视若飞信息科技(上海)有限公司

大数据开发工程师

16K-27K|上海|3年以下|本科|全职

收藏 投个简历
工作职责:

岗位职责:

1、负责公司数据仓库的架构设计和开发

2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;

3、负责来自业务团队数据需求的研发支撑;

4、大规模数据挖掘和机器学习算法的实现和维护;

5、在线和离线海量数据分析平台的开发;

6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;

7、负责制定数据接入和采集规范制定。

任职要求:

1、从事数据仓库领域工作3年以上;

2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验;具有良好的编程习惯和文档编写习惯;

3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;

4、熟悉常用数据库的性能特点和开发技术,能够灵活运用SQL实现海量数据ETL加工处理;

5、了解大数据基础架构和平台,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验;

6、熟悉Linux系统,能够熟练运用Java、Scala、Python等语言进行开发;

7、有阿里云、腾讯云或AWS等云平台的大数据系统的工作经验优先;

8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;

9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能

办公地点

上海市杨浦区国阳大厦

查看地图