岗位职责：
 
负责基于Hadoop的大数据平台项目的系统架构设计、整体框架实现、核心代码编写等；
 
组织技术团队成员在遵循整体架构规范下，落实高质量的项目实施；
 
负责Hadoop，Spark相关的技术组件的性能调优和复杂故障处理；
 
负责机器学习系统的实施和部署；
 
负责大数据项目的技术把关，控制架构质量，解决项目开发过程中的技术难题；
 
综合各项目中的通用需求，开发相对标准化的的工具和产品；
 
参与公司技术体系的规划与选型，形成数据架构、技术边界、工作范式，负责与本岗位相关内容的细化；
 
促进标签产品在财富管理客户管理的应用，持续提升用户产品体验，并探索新的商业模式；
 
研究大数据技术领域最新进展，并进行应用和实践；
 
 
任职要求：
 
10年以上技术研发工作经历，5年以上金融行业大数据开发经验，985、211院校计算机相关专业，本科以上学历；
 
具备深厚的分布式系统或数据库系统的理论基础，具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验；
 
熟悉Yarn、Hive、Hbase、Spark、Kafka、Storm、Redis、ZooKeeper、Redis等技术，至少精通其中三项以上；
 
精通Linux/Unix环境和Shell脚本编写；
 
能熟练使用一种或多种编程语言实现模型构建的全流程，包括但不限于：SQL、Python、R、Scala，并能熟练使用SQL具备从数据库提取数据的能力；
 
对机器学习、数据挖掘算法及其在互联网上的应用有比较深入的理解；
 
具备良好的文档功底和业务分析能力，语言表达能力强；