岗位职责:

1、负责公司大数据平台的基础数据服务

2、负责大数据产品的开发及部署维护

3、构建海量数据仓库,包括数据建模、ETL、元数据等主要环节。

岗位要求:

1、三年以上数据开发工作经验,大学本科及以上学历。

2、 熟练掌握一门语言Java或者Scala,能够编写Mapreduce、Spark等应用程序,以及相关的性能优化方式;

3、精通一种或多种分布式平台,理解计算框架,如Hadoop、Spark、HBase、Hive、Sqoop、elk、Kafka;熟练掌握相关组件的使用、原理实现、常用的性能优化方案;

4、熟悉Linux系统,熟练掌握 Shell、Python、Perl 或其它任何一门脚本语言;

5、理解数据库原理,熟练使用至少一种关系数据库管理系统,如Mysql、Oracle,熟悉掌握Nosql类型数据库;

6、具备较强的编码能力,有扎实的数据结构和算法功底。

发送简历至hr@westcredit.cn