[杭州]上海清鹤科技股份有限公司

职位：大数据开发工程师（杭州）
发布时间：2024-04-26
工作地点：其它
信息来源：前程无忧(51JOB)
职位类型：全职
职位描述
职能类别:数据分析师
岗位职责：
1、负责大数据平台的功能设计和开发；
2、熟悉主流大数据计算引擎Hadoop、Spark、HBase、Hive、ES等分布式相关的技术及组件，深刻理解内部机制和原理；
3、熟练掌握Java开发语言，具备迅速处理复杂数据的能力。
任职要求：
1、本科及以上学历，计算机相关专业；
2、具备大型分布式、高并发、高负载、高可用系统设计、开发及调优经验，有大数据平台的软件开发、部署经验；
3、熟悉Spark分布式计算框架原理和编程模型，zookeeper 分布式协调服务的使用；
4、熟悉 Hadoop生态圈技术栈、HBase、Hive、MapReduce等；
5、熟悉Spring等后台开发框架，以及MySQL等关系数据库的设计与优化；
6、熟悉 Spark、Kafka、Zookeeper、K8S等开源组件，具备开源项目集成开发经验优先；
7、熟悉主流大数据计算引擎MapReduce Hadoop、Pig、Spark、HBase、Hive等分布式相关的技术及组件，深刻理解内部机制和原理；
8、熟悉Kafka、Elasticsearch、Flink等实时系统组件；
9、具有良好的编程能力，熟练掌握Java（或者Scala），具备迅速处理复杂数据的能力；
10、追求优秀的设计和代码质量，有良好的责任心和执行力，具备独立分析能力、解决问题能力；
11、有Hadoop、Spark、HBase深入源代码分析经验，熟悉数据仓库的技术架构和实施方法论，并支撑过实际业务场景优先；
12、 熟悉容器、k8s的使用。 公司简要介绍：
公司名称:上海清鹤科技股份有限公司
公司类型:上市公司
公司介绍:上海清鹤科技股份有限公司（股票代码：834762）由上海市领军人才和清华大学优博毕业生带领复旦、浙大、哈工大等科技人才创立。公司专注于边缘计算中心系统的算法研究、基础软件以及应用软件的开发与应用，通过多年的技术积累，融合汇通智能视频技术、人工智能技术、边缘中间件技术构成的核心技术体系，主要为不同行业提供智慧化解决方案，产品应用于医疗健康、文化旅游、司法政务、商业零售等不同行业场景，助推人工智能产业化进程和各行业智慧化转型升级。公司通过多年的技术积累以及应用端的经验积累优化，目前已形成了从核心算法层，到基础软件层，最终到应用层的以边缘计算系统为核心的智慧化解决方案。公司持续致力于基础软件自研，努力突破2B领域的基础软件“卡脖子”难题。
目前，公司自主研发的产品体系已经覆盖全国各省市，并在一带一路国家有落地示范，入选国家级重点产品库。清鹤科技总部设在上海张江，分别在北京、深圳等全国三十个城市设有分支机构。近年来，公司营收飞速增长，且持续大力投入研发，拥有一百多项软件著作权及国家发明专利授权，稳健快步迈向新的发展高度。