一个超轻量级大数据处理平台 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
ispong
V2EX    推广

一个超轻量级大数据处理平台

  •  
  •   ispong 2024 年 4 月 8 日 1428 次点击
    这是一个创建于 708 天前的主题,其中的信息可能已经有所发展或是发生改变。

    听说 v 站的哥哥姐姐们,个个都是人才,说话又好听. 推广一个全栈基于 spark 的轻量级大数据处理平台 主打快搭易用特点,欢迎大家积极提建议 一定虚心接受,打死不改

    产品名: 至轻云 官网: https://zhiqingyun.isxcode.com/

    5 条回复    2024-08-12 15:28:35 +08:00
    zwenooo
        1
    zwenooo  
       2024 年 7 月 15 日
    东西看起来不错,但是也有很多不足(也有可能是我粗略的点没点到):
    1.建议把集群相关的调优参数按照框架分组罗列出来。
    2.资源中心、作业流、函数管理...这些最好都按照框架来做分组,或者允许创建文件夹。
    3.调度功能待完善,比较基础的补数功能没有;或者允许用户集成第三方框架。
    4.BI 这块感觉没啥太大必要拿进来... 专注处理就好。
    5.没有即席查询的地方。
    6.数据源不支持 excel ,csv 等方式直接上传。
    ispong
        2
    ispong  
    OP
       2024 年 8 月 11 日
    @wzwmeme 感谢感谢,上述提到的功能我们都在关注,在后期的迭代中会慢慢补充上来。
    ispong
        3
    ispong  
    OP
       2024 年 8 月 11 日
    @wzwmeme
    1. 集群相关的调优,后面会有高级配置选项,但现实中,其实很多客户连集群概念都不理解,不打算做的很复杂
    2. 这个已经在开发,预计 8 月底发版
    3. 我们支持 api 调用和 python 作业,可以勉强集成第三方框架,就是比较 low ,还未排期。
    4. 确实,市面上的 bi 产品都太强了,没必要做,我们也只是尝试一下,老板喜欢看
    5. 第三方的即席查询集成,预计 9 月会发版,但我们有个计算容器,基于 spark 的即席查询,速度也非常快
    6. 这个已经在开发,预计 8 月底发版
    ispong
        4
    ispong  
    OP
       2024 年 8 月 11 日
    也欢迎在 github 中提 issue
    https://github.com/isxcode/spark-yun
    zwenooo
        5
    zwenooo  
       2024 年 8 月 12 日
    @ispong 加油,期待用上你们的产品。
    关于     帮助文档     自助推广系统     博客       FAQ     Solana     1261 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 26ms UTC 23:49 PVG 07:49 LAX 16:49 JFK 19:49
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86