职位描述
职位描述：1、负责集团离线、实时数据中台的建设及企业级数据仓库系统的研发； 2、数据源的采集入库，监控数据采集进度、服务稳定性和数据质量，保证稳定且有效的数据产出； 3、数据接口的开发，构建统一的数据接口平台； 4、数据标准及规范的实施，共同建设高质量的数据治理平台。职位要求：1、本科以上学历，3年以上数据采集，数据开发相关经验，熟悉linux平台开发； 2、熟练使用Python或Java进行APP、网页数据的采集、解析、入库及优化； 3、熟练使用Redis、Mongodb、Mysql等流行数据库技术； 4、熟悉Scrapy、Requests、BeautifulSoup、Flask等常用框架的使用； 5、了解数据仓库体系的建设。
职能类别：大数据开发工程师