有没有 bro 是 Java 转大数据成功的 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
howfree
V2EX    程序员

有没有 bro 是 Java 转大数据成功的

  •  
  •   howfree 2024-01-23 16:58:39 +08:00 3562 次点击
    这是一个创建于 628 天前的主题,其中的信息可能已经有所发展或是发生改变。
    1.主要是想听一些前辈的成功例子,也给自己一些方向;
    2.自己搭建过实时数仓的 demo ,技术栈是 hadoop 、flink 、kafka 、flume 、maxwell 这些;
    3.除了 java,勉强能使用 python ,能使用 pytorch 、tensorflow 、pandas 、matplotlib;
    4.做过的项目中有使用到 flink-cdc 、canal 、flink 、es 、kafka 这些和大数据有关的技术;
    5.k8s 、jinkens 、docker 自己也能用,更多的是自己做的 demo 中会使用,生产项目中还是运维负责 CI/CD 。
    19 条回复    2024-08-24 22:49:28 +08:00
    BBCCBB
        1
    BBCCBB  
       2024-01-23 17:01:44 +08:00
    转去大数据写 sql 吗?
    howfree
        2
    howfree  
    OP
       2024-01-23 17:03:44 +08:00
    @BBCCBB 也不全是 sql boy 吧
    leo6668
        3
    leo6668  
       2024-01-23 17:09:15 +08:00
    大数据还不如你搞 java
    wangyiyi10
        4
    wangyiyi10  
       2024-01-23 17:13:45 +08:00
    大数据也不是写 SQL 的吧,至少我很少写 SQL 。
    如果做纯数据开发,写 SQL 确实没啥意思。
    如果做数据平台开发,其实和做后端没有特别大的区别,只是要对大数据的一些中间件原理要比较熟悉。
    waytodelay
        5
    waytodelay  
       2024-01-23 17:14:12 +08:00
    主 java ,被迫做过 sql boy ,那不是一般的痛苦。

    如果是其他路子那就不清楚了
    wdmcode
        6
    wdmcode  
       2024-01-23 17:29:58 +08:00
    找偏向研发大数据平台的公司,例如星环之类的数据平台厂商。
    大数据组件要会看源码,Hadoop 、flink 这些组件的源码都要了解。
    BBCCBB
        7
    BBCCBB  
       2024-01-23 17:35:55 +08:00
    感觉通过换工作这种方式很难转, 因为没经验. 但如果你公司内部刚好需要人, 倒是可以转岗过去..
    howfree
        8
    howfree  
    OP
       2024-01-23 17:36:45 +08:00
    @BBCCBB 公司都要没了
    LeeReamond
        9
    LeeReamond  
       2024-01-23 18:58:50 +08:00 via Android
    @waytodelay 不是吧兄弟,带薪拉屎还痛苦?
    midsolo
        10
    midsolo  
       2024-01-23 19:06:51 +08:00
    几年前,Java 转大数据成功,现在大数据还不如 Java 。领导说招不到大数据方面的人才,叫我先过去顶一顶,谁知道我变成了大数据团队的二把手。
    cmhonker
        11
    cmhonker  
       2024-01-23 19:30:48 +08:00
    大数据已死,有事烧纸
    waytodelay
        12
    waytodelay  
       2024-01-23 19:45:56 +08:00
    @LeeReamond
    java 接口写完跑个测试一会儿出结果,sql boy...
    而且报表出来也体现不出你的能力水平,不好去做晋升答辩,真的痛苦
    levelworm
        13
    levelworm  
       2024-01-23 22:04:55 +08:00
    不如做后端。大数据太窄了。后端转其他方向很容易,大数据还得先转出来才好继续转。除非你本来就是做数据工程的。
    vincent7245
        14
    vincent7245  
       2024-01-24 11:01:08 +08:00
    Java 后端和大数据本来就是一家,只是业务不同,使用的框架不同而已。当然 sqlboy 除外
    JustinChang
        15
    JustinChang  
       2024-01-24 11:17:03 +08:00
    前同事培训 6 个月转了大数据,现在天天写 sql ,工资涨了 1.5 倍吧
    howfree
        16
    howfree  
    OP
       2024-01-24 11:45:13 +08:00
    @Part2 简历造假吗?
    fengdw
        17
    fengdw  
       2024-01-24 16:22:27 +08:00
    @dlmy 现在大模型起来之后, 按理来说不是数据会更重要, 一些大数据岗位不应该是更多吗, 为什么说还不如 java
    midsolo
        18
    midsolo  
       2024-01-24 16:36:21 +08:00
    @fengdw 现在绝大多数公司都在降本增效,真实情况是一部分 Java 兼职前端开发工作,一部分 Java 兼职测试工作,一部分 Java 兼职运维工作,一部分 Java 兼职大数据相关工作。整个大数据团队只留下几个核心大佬,其他的活全部让 Java 过来顶,哪还有什么大数据岗位呢?
    lfyzjck
        19
    lfyzjck  
       2024-08-24 22:49:28 +08:00
    大数据其实技术方向特别多且杂,可以先找一个点切入,争取或者转岗或者面试的机会,再慢慢了解底层的原理
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5888 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 24ms UTC 03:20 PVG 11:20 LAX 20:20 JFK 23:20
    Do have faith in what you're doing.
    ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86