岗位职责:
1. 理解数据仓库模型的方案规划和设计;
2. 负责数据仓库模型的ETL开发,性能优化,相关技术问题的解决;
3. 针对数据一致性,准确性,及时性,严格执行数据管理和治理机制,监督保障数据的生产运行;
4. 参与数据架构/应用相关的数据开发工作,如:数据网关,调度系统,爬虫,分布式计算框架(金融模型)
任职要求:
1. 硕士及以上学历计算机或相关专业
2. 熟悉数仓建模方法论,具备海量数据加工处理(ETL)相关经验优先
3. 熟悉Hive语法,善于复杂SQL编写与优化;
4. 精通一门或以上的数据开发语言(python/pandas, java,scala);
5. 熟悉Flink流式处理框架,比如对舆情和价格的实时处理的有实战经验者优先;
6. 熟悉HBase, Impala, ClickHouse,Kafka, spark 等数据中间件产品为加分项。