大数据开发工程师
职位描述
工作内容:
1. 负责高性能、高可用的大数据数据处理与分析paas软件的研发。
2. 参与包含数据集成系统、元数据管理、数据质量管理等平台的构建与维护;
3. 团队合作,参与海量数据导入、分布式存储、计算引擎的技术调研与攻关。
任职要求:
1. 本科及以上学历,计算机相关专业;
2. 扎实的计算机基础,掌握常用的数据结构及算法,熟练掌握Scala/Python/go/Java 中的一项或多项;
3. 了解分布式系统、大数据平台,有完整的数据工程项目经验,具备一定的框架设计以及抽象能力;
4. 熟悉 Hadoop 生态体系,包括但不限于:Hadoop、Hive、HBase、Spark、Flink、Kafka、Beam 等;
5. 良好的团队精神以及合作意识,热爱技术,高度自驱,追求卓越,对数据敏感;
6. 对批量计算、流式计算、时序数据处理、存储引擎、资源调度等一项或多项有深入理解优先