大数据工程师

字节跳动
大数据工程师
岗位描述:
1、负责字节跳动海量用户行为数据的处理,在分布式计算平台基础上建立高效、实时的数据 pipeline;
2、负责推荐系统、广告系统的数据分析,发现模式与规律,为实验解释、系统改进提供数据支持;
3、负责 Hadoop,Spark 等大数据基础设施和平台的改进,解决大规模生产环境集群可用性和性能优化问题。
岗位要求:
1、本科及以上学历,计算机相关专业;
2、热爱计算机科学和互联网技术,优秀的编码能力,乐于快速学习和尝试新技术、新工具;
3、对数据敏感,掌握量化分析方法,善于从数据中发现问题,提出假设并使用数据进行验证;
4、对至少一项分布式计算平台有使用经验,例如 Hadoop,Spark,Hive,Storm,Kafka 等;
5、有参与开源项目对社区有贡献的经历,有互联网公司实习经历,有大数据处理或用户行为数据分析经验者优先。

顺丰
大数据研发工程师
工作职责:
1、负责流式数据处理的工程实现和落地,包括海量数据的计算、存储和检索;
2、按照具体需求独立完成开发工作,优化系统性能和稳定性。
任职要求:
1、国家统招硕士及以上学历,计算机类相关专业;
2、 熟悉Java、Scala、Python至少一门编程语言,有较强的动手编程能力;
3、 数据结构基础良好、熟悉操作系统和计算机网络原理;
4、 熟悉数据库原理和编程;
5、 熟悉大数据相关技术,如hadoop和spark者优先。

顺丰
大数据平台开发工程师
工作职责:
1、负责建设公司大数据平台,为公司用户提供稳定、易用的大数据平台工具和便捷、酷炫的数据产品;
2、参与并主导大数据平台工具链的设计、开发以及后续维护;
3、参与数据产品的研发,助力数据商业价值的发掘;
4、不断迭代优化已有大数据平台工具和数据产品,推动大数据平台的发展。
任职要求:
1、国家统招硕士及以上学历,计算机类相关专业;
2、熟悉Java语言和SQL语言,具有一定的编程基础;
3、熟悉多种大数据项目,Hive、Pig、HBase、Spark、Hue、Zookeeper、Accumulo、Sqoop、Flink、Giraph、Knox、Oozie、Phoenix、Storm、Kafka、Tez等,有实际部署和运维经验的优先;
4、熟悉软件开发的流程,熟悉Maven,git/SVN等工具优先;
5、热爱编程,逻辑思维清晰;乐于表达,拥有良好的沟通能力。

你可能感兴趣的:(大数据工程师)