【大厂】大数据开发工程师 北汽福田 北京 20-30k

【大厂】大数据开发工程师 20-30k
公司：北汽福田
base地：北京
简历投递处：点击此处

1.负责协助系统集成经理推进数据湖项目建设，参与数据集成方案、共享方案以及数据架构方案的制定，负责项目跟踪等；
2.负责数据湖相关运维工作，保证系统的高可用性和稳定性；负责离线数据ETL调度监控及问题处理；负责实时数据调度任务运行状态监控及问题处理；
3.负责数据仓库架构设计、数据架构设计、数据模型开发等工作；
4.负责离线数据处理开发与优化工作；
5.负责基于Flink/Spark Streaming流式处理框架的开发与优化工作；结合业务应用需求，完成实时数据处理开发工作；
6.熟悉开源Hadoop集群架构及相关组件，包含Sqoop、Hive、DolphinScheduler、Flink、Spark、Kafka、Hbase、Hdfs、Yarn、Zookeeper等；
7.具备Shell、SQL、JAVA等开发语言，熟悉Scala语言加分；