🔥🔥 AllData大数据产品是可定义数据中台,以数据平台为底座,以数据中台为桥梁,以机器学习平台为中层框架,以大模型应用为上游产品,提供全链路数字化解决方案。全新会员商业版 X 微信群:https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo
目前正在建设团队,将大力投入发展AllData项目,欢迎大家踊跃参与建设与讨论!
由于近期购买服务器需要,希望能得到社区的成员捐赠支持
捐赠方式:扫码支付作者10-100元,然后添加作者个人微信AllDataDC,邀请您进入内部研发微信群以及社区讨论微信群
1、您会获得面对面与作者1对1咨询宝贵机会,将有30分钟咨询
2、您会获得收益,作者会分享Github 1000 Stars+ 从0到1建设开源大数据平台经验心得
3、您会获得内部最新总设文档,支付时请备注联系方式,支付后请联系作者微信AllDataDC
4、您将有机会获得商业版定制的机会,加作者微信好友,可以提供第一手安装部署资料
5、您将有机会成为AllData极客开发团队成员,获得成就感与价值输出愉悦感
1、 AllData总体来讲,是一个基础平台基于Ambari拉起10+种开源组件的启停,第二个是数据平台的产品
2、由于Apache很多开源项目发展节奏较快,目前暂时没有很好的版本切换的能力,所以维护不同组件的版本比较困难
3、基于这个前提,打算定期升级维护最新的组件版本,并对已进行二次开发的组件进行适配升级到新的版本,保证以前二开的新功能在新组件版本也能使用
3.1 DataSphereStudio: 1.1.0
3.2 ambari: 3.0.0.0-SNAPSHOT
3.3 dolphinscheduler: 3.0.0
3.4 atlas: 3.0.0-SNAPSHOT
3.5 griffin: 0.7.0-SNAPSHOT
3.6 kong: 2.8.0-SNAPSHOT
3.7 flinkcdc: 2.3-SNAPSHOT
3.8 Chunjun: 1.12.5
3.9 kylin: 4.0.2-SNAPSHOT
4.1 trino: 385-SNAPSHOT
4.2 hudi: v0.12.0
4.3 iceberg: v0.13.1
1、AllData总体来讲,是一个基础平台基于Ambari拉起10+种开源组件的启停,第二个是数据平台的产品
2、由于Apache很多开源项目发展节奏较快,目前暂时没有很好的版本切换的能力,所以维护不同组件的版本比较困难
基于这个前提,打算定期升级维护最新的组件版本,并对已进行二次开发的组件进行适配升级到新的版本,保证以前二开的新功能在新组件版本也能使用
v1.0版本apache社区组件版本:
dlink: 0.6.4-SNAPSHOT
ambari: 3.0.0.0-SNAPSHOT
ds: 2.0.5-SNAPSHOT
atlas: 3.0.0-SNAPSHOT
griffin: 0.7.0-SNAPSHOT
kong: 2.8.0-SNAPSHOT
flinkcdc: 2.3-SNAPSHOT
flinkx: 1.12-SNAPSHOT
kylin: 4.0.2-SNAPSHOT
trino: 385-SNAPSHOT
hudi: v0.12.0
iceberg: v0.13.1