构建和完善openEuler社区下的大数据生态,打造活跃的大数据交流平台,丰富和提升大数据组件功能和性能, 发掘用户大数据需求,孵化有潜力的大数据组件。 在openEuler平台上持续构建大数据生态:
- 基础运行能力,包括数据采集、数据传输、数据存储、数据分析、数据可视等。
- 统一界面,将各种常用的工具软件集成提供统一的用户界面解决让大数据在openEuler上更易用。
- 性能优化,让大数据在openEuler平台上发挥极致性能。
- 集成能力,新芯片和软件进入openEuler时的支持。
- 会议时间: 周四 16:00-17:00(GMT+08:00) 中国标准时间-北京 每两周一次 + 按需出发,详情可见订阅邮箱。
- 订阅邮箱地址:bigdata@openeuler.org
- 杨昭 yangzhao_kl email地址: yangzhao1@kylinos.cn
- 吴泽艺 wuzeyi1 email地址: zaki.wu@huawei.com
- 陈强 macchen1 email地址: mac.chenqiang@huawei.com
- 温伟健 wenwj0 email地址: weijian.wen@foxmail.com
- 吴治国 kevinw66 email地址: wzg547228197@163.com
| 项目 | 版本 | 状态 | 类别 |
|---|---|---|---|
| VectorBlas | 1.0 | 已引入 | 数学库 |
| omnidata-hive-connector | 1.0 | 已引入 | bigdata |
| CuckooSQL | 1.0 | 已引入 | bigdata |
| uadk-bigdata | 1.0 | 已引入 | bigdata |
| Bigtop manager | 1.0 | 已引入 | bigdata |
| Gluten | 1.0 | 已引入 | bigdata |
| Velox | 1.0 | 已引入 | bigdata |
| openAMDC | 1.0 | 已引入 | bigdata |
| OmniOperator | 1.0 | 已引入 | bigdata |
| OmniStream | 1.0 | 已引入 | bigdata |
| OmniStateStore | 1.0 | 已引入 | bigdata |
| OmniAdaptor | 1.0 | 已引入 | bigdata |
openEuler开源实习是openEuler社区和社区合作单位共同发起的线上实习项目,旨在鼓励在校学生积极参与开源社区,在实际的开源环境中提升实践能力,在社区中成长为优秀的开源人才。
openEuler开源实习地址:https://www.openeuler.org/zh/internship/
bigdata 实习任务发布地址:https://www.openeuler.org/zh/sig/sig-detail/?name=bigdata
| 组件 | 版本 | 状态 |
|---|---|---|
| accumulo | 2.0.1 | 已引入 |
| alluxio | 2.7.0 | 已引入 |
| ambari | 2.7.6 | 已引入 |
| apache-atlas | 2.1.0 | 已引入 |
| apache-ranger | 2.1.0 | 已引入 |
| avor | 无 | 引入中 |
| bigtop | 无 | 引入中 |
| blaze | 0.10.1 | 已引入 |
| calcite | 1.30.0 | 已引入 |
| datafu | 1.6.1 | 已引入 |
| delta | 1.2.1 | 已引入 |
| druid | 0.22.1 | 已引入 |
| flink | 1.13.0 | 已引入 |
| flume | 1.10.0 | 已引入 |
| giraph | 1.3.0 | 已引入 |
| hadoop | 3.3.4 | 已引入 |
| hadoop-3.1 | 3.1.4 | 已引入 |
| hbase | 2.2.5 | 已引入 |
| hive | 3.1.3 | 已引入 |
| hudi | 0.11.0 | 已引入 |
| hue | 无 | 引入中 |
| ibis | 1.3.0 | 已引入 |
| iceberg | 0.13.0 | 已引入 |
| ignite | 2.9.0 | 已引入 |
| impala | 无 | 引入中 |
| kafka | 2.8.2 | 已引入 |
| kite-sdk | 无 | 引入中 |
| knox | 1.6.1 | 已引入 |
| kudu | 无 | 引入中 |
| libhdfs | 无 | 引入中 |
| llama | 无 | 引入中 |
| mahout | 14.1 | 已引入 |
| oozie | 5.2.1 | 已引入 |
| parquet-format | 2.9.0 | 已引入 |
| presto | 0.26 | 已引入 |
| qfs | 2.2.4 | 已引入 |
| redis5 | 5.0.4 | 已引入 |
| redis6 | 6.2.7 | 已引入 |
| spark | 3.2.2 | 已引入 |
| storm | 1.2.4 | 已引入 |
| ycsb | 0.17.0 | 已引入 |
| zeppelin | 无 | 引入中 |
| zookeeper | 3.8.0 | 已引入 |
| 组件状态 | 说明 |
|---|---|
| 待引入 | 该组件有需求,但尚未在openEuler中建仓 |
| 引入中 | 该组件已在openEuler建仓且代码正在从上游社区引入,待进入openEuler发行版本 |
| 已引入 | 该组件已引入openEuler社区 |
openEuler bigdata sig组 简介: https://atomgit.com/openeuler/bigdata/wiki/bigdata.md
openEuler bigdata 月刊归档地址:https://atomgit.com/openeuler/bigdata/wiki ---> 大数据技术月刊
会议纪要地址:会议纪要
邮箱地址:https://mailweb.openeuler.org/hyperkitty/list/bigdata@openeuler.org/
微信公众号:openEuler-bigdata-sig