- 岗位职责
1、参与分布式数据平台的搭建与开发,搭建大数据一站式平台和管理系统;
2、理解业务分析需求,设计和开发对应的数据仓库/数据服务,ETL开发和优化工作;
3、负责对实时、离线数据的计算处理、存储分析的流程进行优化与改造;
4、负责用户行为数据的接入、对比分析、背后原因挖掘,从海量的数据中梳理有用的信息;
5、基于用户画像,挖掘目标用户提供针对***,提升数据质量
- 岗位要求
1. 大学本科以上学历,计算机、软件相关专业优先;
2. 1年及以上JAVA/PHP工作经验,基础扎实,精通IO/NIO、序列化及RPC (Thrift/ProtocolBuffer/AVRO)、多线程、并发等基础框架;
3. 2年以上基于hadoop/hive/mahout等分布式计算环境进行海量数据分析与计算经验优先;
4. 熟悉MySQL,对MySQL的较大量数据存储、优化有丰富的经验;
5. 熟悉Linux/Unix操作系统,熟悉脚本编程(Shell/Perl/Python 其中一种),熟悉常规Linux内核优化;
6. 对常见的数据分析模型有一定的了解,有海量数据分析项目经验、数据挖掘项目经验尤佳;
7. 具有优秀的学习能力、独立分析和解决问题能力,良好的团队合作精神。