一、岗位职责:
1、参与云数据平台规划,分析业务问题,数据模型设计;
2、负责核心数据处理程序开发、部署调优、验收,及交付材料编写;
二、任职要求:
1、熟悉Linux/Unix系统和丰富的Java开发经验;熟练使用Spring boot,了解Spring底层结构,具备从事分布式相关系统的开发
2、精通大数据仓储技术栈有(Spark、Hive、HBase、redis、kafka、Hadoop等)相关开发经验
3、精通SQL,熟悉常用主流数据库,包括MySQL、PostgreSQL、Redis、MongoDB、Oracle,并精通其中任意一种,具有SQL性能优化经验
4、掌握主流ETL开发工具(Sqoop、Kettle)
5、熟悉至少一种实时计算引擎 Storm, Spark Streaming, Flink