职位描述
职位描述:
职责描述:
1. 依各大数据分析项目所需,设计及开发数据自动收集/清理之etl程序;
2. 设计监控、维护etl及分析job;
3. 数据治理相关工作与data model设计。
任职要求:
1. 以下经验至少符合一项:
(1)具备data warehouse导入、建置与管理经验经验5年以上;
(2)具备etl开发实务运作经验5年以上;
2. 具备data model设计能力;
3. 有制造业数据处理经验尤佳;
4. 具备hadoop数据分析程序开发能力,熟python、java、spark、shall script等;
5. 熟悉大数据生态系(big data ecosystem),如 hadoop, spark, mapreduce, hive, hdfs 等 。