职位描述
职位描述:
职责描述:
1.负责大数据基础架构平台(hadoop/hive/presto/spark/kafka/hdfs/hbase等)的开发、运维、监控和优化工作,保障大数据平台服务的稳定性和可用性;
2.负责大数据项目的数据采集、协助智能硬件的调试、整理各部门对数据的需求;
3.负责数据建模与分析,利用机器学习、深度学习等前沿技术提高知识抽取和信息抽取过程的自动化,洞察用户行为规律;
任职要求:
1.1年以上大数据开发工作经验;
2.熟悉大数据的组件(java se/cenos/hadoop/zookeeper/hive/azkaban/flume/sqoop/hbase/kafka/storm/scala/spark)的原理及运维方式;
3.熟悉关系型数据库(mysql/oracle/sqlserver);
4.能够熟练使用shell、python其中一种语言;
5.有较强数据敏感度与数据分析能力,熟悉常用的数据分析算法,如回归、分类、聚类等;
6.熟悉bi产品者或系统分析经验优先;
7.具有良好的职业素养、沟通表达能力强、有责任心、有团队合作精神。