[上海]上海清鹤科技股份有限公司

职位：大数据开发工程师
发布时间：2024-04-27
工作地点：上海
信息来源：前程无忧(51JOB)
职位类型：全职
职位描述
职能类别:数据开发
岗位职责：
1、负责大数据平台的功能设计和开发；
2、熟悉主流大数据计算引擎Hadoop、Spark、HBase、Hive、ES等分布式相关的技术及组件，深刻理解内部机制和原理；
3、熟练掌握Java开发语言，具备迅速处理复杂数据的能力。
任职要求：
1、本科及以上学历，计算机相关专业；
2、具备大型分布式、高并发、高负载、高可用系统设计、开发及调优经验，有大数据平台的软件开发、部署经验；
3、熟悉Spark分布式计算框架原理和编程模型，zookeeper 分布式协调服务的使用；
4、熟悉 Hadoop生态圈技术栈、HBase、Hive、MapReduce等；
5、熟悉Spring等后台开发框架，以及MySQL等关系数据库的设计与优化；
6、熟悉 Spark、Kafka、Zookeeper、K8S等开源组件，具备开源项目集成开发经验优先；
7、熟悉主流大数据计算引擎MapReduce Hadoop、Pig、Spark、HBase、Hive等分布式相关的技术及组件，深刻理解内部机制和原理；
8、熟悉Kafka、Elasticsearch、Flink等实时系统组件；
9、具有良好的编程能力，熟练掌握Java（或者Scala），具备迅速处理复杂数据的能力；
10、追求优秀的设计和代码质量，有良好的责任心和执行力，具备独立分析能力、解决问题能力；
11、有Hadoop、Spark、HBase深入源代码分析经验，熟悉数据仓库的技术架构和实施方法论，并支撑过实际业务场景优先；
12、 熟悉容器、k8s的使用。 公司简要介绍：
公司名称:上海清鹤科技股份有限公司
公司类型:上市公司
公司介绍:上海清鹤科技股份有限公司（股票代码：834762）由上海市领军人才和清华大学优秀博士毕业生带领复旦浙大哈工大一批科技人才创立，多年来公司专注于边缘计算中心系统的算法研究、基础软件以及应用软件的开发与应用，形成了由融合智能视频技术、人工智能技术、边缘中间件技术构成的核心技术体系，为医疗健康、文化旅游、司法政务、商业零售等不同行业场景提供智慧化解决方案，助推人工智能产业化进程和各行业智慧化转型升级。
2020年9月，公司与清华大学联合成立了“视频场景融合联合研究中心”，搭建清鹤企业级视频融合边缘计算中心，致力于攻克行业信息化高端核心领域的“卡脖子”技术难题。
公司自主研发的产品体系已经覆盖全国各省市，并在一带一路国家有落地示范。清鹤科技总部设在上海张江，分别在北京、苏州、深圳等全国28个城市设有分支机构。近年来，公司营收飞速增长，且持续大力投入研发，拥有百余项软件著作权和多项国家发明专利授权，正在稳健快步迈向新的发展高度。