职位描述
1、负责大数据基础平台、海量数据存储/处理分布式平台、数据分析系统架构设计和研发，实时计算平台基础架构设计、部署、监控、优化升级；2、协助或进行策略和算法工作，保障数据挖掘建模和工程化；3、深入研究大数据相关技术和产品，跟进业界先进技术，负责技术难点的攻关；技能要求：1、三年以上大数据系统架构经验；2、精通Hadoop/HBase/Spark/Storm/Redis技术及其生态圈； 3、能够搭建主流大数据平台如CDH，以及大数据平台的优化策略；4、具备Python/Java/Scala等开发经验，熟悉数据挖掘和分析的策略与算法； 5、具有大数据领域相关研究背景，对并行计算、实时流计算、数据挖掘与分析等技术有较深的理解 6、熟悉分布式计算的各种范式，分布式算法实现，有较好的分布式架构设计能力。掌握MapReduce处理问题思想，熟悉实时分布式计算模型或有高效索引技术经验者优先；