大数据开发工程师 4500招聘 - 展讯通信（上海）有限公司

该职位来源于猎聘岗位职责:1、基于常用大数据组件构建原生数据数据平台，包括调度，计算，存储和查询等； 2、提供统一的异构数据源接入集成，数据离线、实时计算，元数据管理和数据服务等全链路智能数据构建； 3、持续对大数据系统技术架构进行优化，降低成本，提升系统的性能和用户体验；4、关注大数据社区实时动态，并根据需要对大数据平台技术进行演进。任职资格:１、计算机、通信、数学等相关专业，具备良好的计算机基础；２、熟悉java/scala/python等至少一门编程语言； ３、具备良好的沟通和团队协作能力，做事积极主动，有技术激情和具体抗压能力；４、熟悉Hadoop/hdfs/Yarn/Hive/Spark/Flink/Tez/ES等相关大数据技术组件，熟悉流式处理框架，如Sparking Streaming和Flink，有社区贡献经验者优先； ５、熟悉大数据相关的的调度系统的使用，调优经验者优先，如Azkaban,Airflow,DolphinScheduler；６、熟悉Linux环境，具体shell脚本能力。