工作职责:
1、负责基于Hadoop/Spark平台架构的开发、设计和布局,完成系统框架的设计和核心代码的编写;
2、针对海量的用户行为数据进行统计、分析与挖掘,不断提高系统运行效率;
3、大数据平台的性能监控和持续优化;针对需求提供大数据分析技术解决方案;
任职资格:
1、本科及以上学历,大数据、数学、统计学等相关专业,研究生及以上优先;
2、熟练使用大数据ETL数据抽取工具;精通Hadoop大数据平台架构,具有扎实的Java/Python等开发语言,并可以开发高效可靠的代码;熟悉spark、Hive、storm等计算框架者优先,对分布式存储和计算原理有较深的理解;
3、具有较强的数据分析、数据挖掘能力、严密的数学思维。