数据开发
1.5-1.6万元/月
更新 2025-12-24 14:27:14
浏览 286
职位详情
数据开发
5-10年
ERP · 要求数据开发经验 · Spark原理/源码 · Scala · Flink原理/源码 · 实时数仓开发经验 · 数据平台开发经验 · 财务 · SQL · Hive · 供应链 · 业财一体化 · Hive原理/源码 · MES · Spark
大数据开发工程师
职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与企业级数据平台的架构设计与开发,包括OLAP查询引擎及相关平台化系统的实现;
3.主导数据仓库与数据湖的模型设计与管理,持续优化数据存储结构与查询性能;
4.关注并引入先进的数据处理技术与工具,推动数据开发流程优化与处理效率提升;
任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,深入了解主流大数据技术体系;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储组件架构,能结合业务场景完成合理技术选型;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具有海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地项目经验(必需);
5.熟悉Iceberg技术框架并拥有实际开发应用经历;
6.精通至少一门编程语言,如Java、Python;
职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与企业级数据平台的架构设计与开发,包括OLAP查询引擎及相关平台化系统的实现;
3.主导数据仓库与数据湖的模型设计与管理,持续优化数据存储结构与查询性能;
4.关注并引入先进的数据处理技术与工具,推动数据开发流程优化与处理效率提升;
任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,深入了解主流大数据技术体系;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储组件架构,能结合业务场景完成合理技术选型;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具有海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地项目经验(必需);
5.熟悉Iceberg技术框架并拥有实际开发应用经历;
6.精通至少一门编程语言,如Java、Python;
相似职位
很抱歉,暂无相似职位!