1、负责公司大数据平台的基础数据服务
2、负责大数据产品的开发及部署维护
3、构建海量数据仓库,包括数据建模、ETL、元数据等主要环节。
1、三年以上数据开发工作经验,大学本科及以上学历。
2、 熟练掌握一门语言Java或者Scala,能够编写Mapreduce、Spark等应用程序,以及相关的性能优化方式;
3、精通一种或多种分布式平台,理解计算框架,如Hadoop、Spark、HBase、Hive、Sqoop、elk、Kafka;熟练掌握相关组件的使用、原理实现、常用的性能优化方案;
4、熟悉Linux系统,熟练掌握 Shell、Python、Perl 或其它任何一门脚本语言;
5、理解数据库原理,熟练使用至少一种关系数据库管理系统,如Mysql、Oracle,熟悉掌握Nosql类型数据库;
6、具备较强的编码能力,有扎实的数据结构和算法功底。
投诉热线:029-87607660
异议处理邮箱:company@westcredit.cn