2024年4月10日发(作者：)
大数据开发工程师的岗位要求五个
岗位要求1：
学历及专业：
硕士及以上，计算机科学与技术、软件工程、通信工程或其他相
关专业
专业技能：
1. 具备5年以上软件平台的研发及架构设计经验，具备良好的
行业内技术积累,能独立负责技术架构规划与架构演进；
2. 熟悉开源分布式系统，对
Hadoop/Hive/Spark/Flink/HBase/Druid /kafka中的某项或多项
有深入了解及实际的开发经验;
3. 从事过多年的JAVA或者Python开发语言的经验，并且基础
知识扎实，理解io、多线程等基础内容及常用的开源框架，可以
深入代码一线；
4. 熟悉分布式系统的设计和应用，熟悉分布式、缓存、消息等
机制，掌握多线程及高性能的设计与编码及性能调优，有高并发
应用开发经验。
素质：
1. 具备宽广的技术视野和优秀的学习能力，热爱软件技术工作；
2. 工作热情、踏实，态度严谨；
3. 具备优秀的沟通能力和团队合作精神；
4. 具有较强的抗压能力，善于应对来自工作上的各种压力；
5. 熟练的英文读、写、听、说能力。
具备以下经验者优先：
1. 具备5年以上的大数据软件开发和设计经验。
2. 有以下经验者任一可优先:
a) 熟悉大数据、网络通信、云计算等领域主要调度系统的架构、
算法、实现、以及设计理念，有大型或运营商网管领域项目的开
发和架构设计经验者优先。
b) 运营或者参与过开源项目，熟悉开源项目运作，对开源和商
业之间的关系以及联动发展有自己深入独到的理解者优先。从事
过软件研发架构，有大数据高并发商用系统的开发经验者优先。
c) 具备数据挖掘、机器学习、自然语言处理相关开发经验者优
先。
岗位要求2：
1、计算机相关专业全日制统招本科及以上，5年以上工作经验，
4年及以上大数据开发经验
2、深刻理解大数据处理(流计算、分布式计算、分布式文件系统、
分布式存储等相关技术
hadoop/MapReduce/Spark/Hbase/Flink/Hive/R/Mahout)实现方
法，有实际项目开发经验。
3、精通或熟悉常见RDBMS(Oracle / PostgreSQL / MySql)、
NoSQL(Redis / Memcached/ MongoDB)、全文搜索引擎
(Solr/ElasticSearch)的使用及开发，有相关的数据存储、性能调
优等相关领域知识，有相关项目经验尤佳。
4、熟悉业界常用的数据采集、集成、数据存储、计算、数据模
型、数据分析的技术方案。
5、精通Hadoop/Spark/Hbase/Hive等大数据技术,精通ETL技
术。
6、熟悉主流Java技术框架，熟悉容器、虚拟化、微服务框架等
相关技术。 7、有较强的学习能力和问题解决能力，逻辑严
密、思路清晰。
8、有数据仓库经验者优先，有金融行业项目经验者优先。
岗位要求3：
1、全日制本科及以上学历，计算机、数学、统计学、电子等专
业；2、精通大数据Hadoop体系的相关技术：Spark、Hive、
HBase、impala/presto、SparkStreaming/Flink、Redis、Kafka、
Kylin、Druid等；
3、熟悉BI工具，具有大数据平台的开发运维经验；
4、熟悉数据仓库，有建模经验优先；
5、熟悉JAVA/Scala编程，有python经验可加分；
6、熟悉Linux操作系统，Shell编程等；
7、在帆软前端、DBA、ETL等方向有经验的可加分。
岗位要求4：
1、本科及以上学历
2、4年以上相关工作经验，精通SQL语言
3、熟悉Hive、Spark、Flink等工具至少一种
岗位要求5：
- 熟悉 Hadoop YARN 的架构和原理
- 熟悉常用大数据开源组件
- 掌握常用的数据结构与算法
- 有其他调度系统(如：Kubernetes 、
- 有大规模集群优化经验优先
- 有参与开源社区的经验优先
等)开发经验优先Mesos
发布者：admin，转转请注明出处：http://www.yc00.com/news/1712723681a2110652.html
评论列表（0条）