职位:大数据平台架构师 岗位职责: 1、负责海量数据存储体系的实现与解决方案,大数据平台搭建; 2、能够将技术实现及业务场景联系起来,能够根据需求快速的提出技术解决方案; 3、进行存储相关技术攻关,解决技术难题; 4、有应急的技术处理能力,当出现生产问题时可以提出技术解决办法。 任职资格: 1、 8年(硕士以上学历6年)以上软件研发经验、3年以上架构设计经验; 2、精通海量存储技术,对数据的水平扩展存储模式有深入了解及处理实践。 3、精通HBase和MongoDb,熟悉HBase和MongoDb的内部机制和实现原理,有hbase实际开发经验。 4、精通Linux/Unix环境,精通C/C++或java编程,精通数据结构和数据算法 5、对hadoop的Map/Reduce原理有深入研究; 对基于hadoop的大数据处理体系有深入认识,具备相关产品(hadoop、hive、hbase、pig、Storm)项目应用研发经验,熟悉分布式系统、分布式计算系统的工作机制,能熟练掌握相关核心技术的工作机理;具有大规模数据平台,高并发大型系统,大数据等架构设计和开发经验; 6 、对HBase 的数据安全、灾备、一致性等操作有深入了解。7、对HBase有过二次开发及bug修改,或对hbase社区有贡献者优先、有mysql集群管理经验优先; 8、精益求精的钻研精神;优秀的交流沟通能力;思维严谨、责任感强; 9 、有成功上线大数据平台案例及互联网数据分析相关经验优先。
|