大数据开发工程师
1.3-1.7万元/月
更新 2025-12-15 01:54:09
浏览 264
职位详情
数据开发
经验不限
要求数据开发经验 · 银行 · Kafka原理/源码 · 数据仓库 · 大数据引擎开发经验 · 计算机相关专业 · 金融行业经验 · SQL · 报表 · Shell · Hive · 大数据开发 hive · Spark · 数据仓库开发经验 · Had
岗位一大数据开发甲方:华夏银行信用卡中心
技能要求:
对hadoop安全漏洞有一定认知,深刻理解hdfs原理,对元数据存储有一定的理解,掌握spark调优,对于相关调优参数有一定认识,能实际应用。
岗位职责:
1.负责基于Hadoop/Spark/平台的批量处理计算开发,日常的Hadoop集群运维;
2.负责公司大数据平台数据模型的设计及开发,包括数据需求的沟通、离线模型设计与开发、质量管理监控等工作;
3.日常大数据组件升级,能够调整开源大数据源码相关参数,针对实际生产问题优化参数,重新打包部署;
4.对关系型数据库Oracle,MySQL,Goldendb等关系型数据库有一定了解,熟练编写SQL语句,有一定的SQL性能优化功底;
5.熟练编写shell脚本,能实际应用于日常开发工作。
任职资格:
1.3年及以上相关工作经验,具有扎实的数据结构与算法的理论知识;
2.熟练使用shell、perl、python等至少2门脚本语言;
3.了解Hadoop、Presto、Kafka、Hive、Spark、ES等组件的工作原理;
4.能够承受较强的工作压力,有较强的自学能力、钻研精神和动手能力,具有良好的逻辑思维能力、沟通能力和团队协作能力,做事认真、踏实、负责。
地点:石景山区6号线金安桥地铁附近
岗位二大数据开发工程师甲方:哈尔滨银行消费金融公司(暂停)
1.学历要求:本科及以上学历;
2.工作经验:精通大数据技术栈,包括Hadoop、Hive等;
3.岗位职责:负责公司业务数据的分析研发,可独立完成数据集市的需求分析、设计及实现,报表的开发;
4.具备扎实的编程能力,熟练掌握SQL、具备SQL调优能力;熟悉Hive,Oracle、MySQL等数据库;
5.具备良好的逻辑思维能力、沟通能力和团队合作精神,能够有效与不同团队协作,解决复杂数据问题;
6.对新技术和行业趋势保持敏锐的观察和学习能力,能够不断提升自身的技术水平。
7.有银行、消费金融等行业工作经验;
8.加分项:会paython;
地点:朝阳区10号线三元桥地铁附近
岗位三大数据数仓工程师甲方:哈尔滨银行消费金融公司(暂停)
职责:
1.负责设计、开发和维护大数据数仓系统,包括数据采集、清洗、转换和存储等环节。
2.参与数据模型设计与开发,确保数据仓库的高效性、可靠性和可扩展性。
3.协助业务部门和数据分析团队,理解业务需求并将其转化为可执行的数据仓库解决方案。
4.设计和优化ETL流程,确保数据的准确性和完整性,并提高数据处理的效率。
5.负责监控数据仓库系统的性能,识别和解决潜在问题,保障数据平台的稳定运行。
要求:
1.本科及以上学历
2.精通大数据技术栈,包括Hadoop、Spark、Hive、Flink等,具有丰富的数据仓库建设经验。
3.熟悉数据建模和数据架构设计,具备良好的数据分析能力和逻辑思维能力。
4.具备扎实的编程能力,熟练掌握SQL、Python等编程语言。
5.具备良好的沟通能力和团队合作精神,能够有效与不同团队协作,解决复杂的数据问题。
地点:朝阳区10号线三元桥地铁附近
岗位四大数据工程师甲方:哈尔滨银行消费金融公司(暂停)
要求:
1.具备一定数据开发经验,熟练使用HiveSQL、Oracle、AZkaban进行数据开发。
2.深入了解业务现状,参与监管数据集市需求与模型设计工作,参与监管系统建设和监管数据治理等工作的开展;
3.具备数据开发工作经验、能够参与数据项目开发工作。
4.具备银行、消金等同业工作经验,精通信贷类业务,可以参与需求的沟通讨论,能够参与出具监管问题的可行性解决方案。
5.根据监管项目建设需求,负责项目实施过程管理,制定实施方案与计划,保证项目进度与质量,确保项目按需交付,根据需求最终生成符合监管要求的报送数据;
1、全日制本科及以上学历,3年及以上工作经验;
2、具备数据开发与数据应用项目开发经验,对大数据有较深理解和认识,能使用HiveSQL、Oracle、AZkaban、Shell等开发工具;
3、熟悉银行、消金业务,熟悉银行、消金数据处理流程;
4、工作责任心强,良好的沟通和协调能力,严谨、细致、踏实的工作作风和积极主动的工作态度。
5.能够通过大数据日志等工具排查生产问题、解决生产问题。
6.具备1104、征信报送、利率报备、金数、EAST的等两项及以上工作经验。
地点:朝阳区10号线三元桥地铁附近
岗位五大数据开发工程师甲方:哈尔滨银行消费金融公司(暂停)
要求:
1、统招本科及以上学历,计算机相关专业,3年以上大数据方向技术与项目研发经验;
2、熟练掌握Hivesql/Sparksql/Flinksql及UDF/UDTF/UDAF等一种或多种技术,并具备实际项目经验和一定性能资源调优经验;
3、熟悉大数据生态相关技术框架,有海量离线和实时数据技术经验,对大数据存储与计算涉及的容错机制、高可靠性、低延迟时效性有深入理解和生产经验;
4、熟悉大数据安全、大数据治理、数据标准、元数据、数据质量方面的内容,有一个或多个项目经验优先;
5、熟悉java/Scala/Python一种或多种的开发语言,熟悉常用数据库及其SQL语法;
6、具备良好逻辑思维与沟通表达,工作积极主动、责任心强,有良好的跨团队协作能力,具有良好学习能力与对前沿技术较强的学习热情;
加分项:
1.有金融大数据治理、大数据安全监管合规方向经验优先;
2.有大数据常用开源框架组件优化经验优先;
地点:朝阳区10号线三元桥地铁附近
岗位六甲方:滴滴(暂停)
岗位说明
1、能够独立负责金融某一业务板块实时数据仓库与离线数据仓库的需求管理、架构设计、模型建设和数据研发工作,保证数据服务的稳定性和准确性;
2、能够通过数据资产治理、数据需求交付时效提升等方式实现数据仓库工作的降本提效;
3、能够与上下游紧密协作,为金融商业分析、业务决策、业务运营、数据产品等提供有效数据支撑,对业务赋能;
4、能够与行业先进的数据技术对标,采用最佳技术实践解决业务数据需求痛点。
任职要求:
1、本科及以上学历,计算机等相关专业,3~5年以上工作经验;
2、熟悉金融业务,精通数据仓库建模和ETL实施方法论,具备PB级金融数据仓库设计、实施工作经验,能够对数据仓库架构进行优化提效;
3、熟悉Hadoop大数据生态圈技术组件,熟悉Hive/Flink/Python/MR/Spark等技术,具备互联网大数据环境数据仓库工作经验;
4、熟悉数据标准、数据质量、数据指标、数据成本管控等数据资产管理和数据治理技术,且具备数据治理实践经验;
5、具有较强的执行推动能力和沟通协作能力,能够解决业务痛点和数据痛点,发挥数据资产价值;
6、具有业务Sense,主动基于业务场景下的数据体系建设,不单单是执行。
备注:
1、至少3年实际数据开发经验,SQL熟练;
2、有互联网数仓建设经验;
3、了解常用的OLAP引擎并应用过优先;
4、有体系化的数据治理经验优先。
技术栈:hadoop、hive、spark必须。有starrocks、clickhouse使用经验优先
过往经历:3~5年。互联网公司(不要传统行业和银行保险这种公司的经历)
学历专业:统招全日制一本学历及以上。
业务:互联网的,不要传统行业的
地点:北京市昌平区回龙观北郊农场桥西(临京藏高速)万科天空之城AB座
乘车路线:昌平区13号线龙泽地铁下,坐班车即到或者骑共享单车几分钟即到
技能要求:
对hadoop安全漏洞有一定认知,深刻理解hdfs原理,对元数据存储有一定的理解,掌握spark调优,对于相关调优参数有一定认识,能实际应用。
岗位职责:
1.负责基于Hadoop/Spark/平台的批量处理计算开发,日常的Hadoop集群运维;
2.负责公司大数据平台数据模型的设计及开发,包括数据需求的沟通、离线模型设计与开发、质量管理监控等工作;
3.日常大数据组件升级,能够调整开源大数据源码相关参数,针对实际生产问题优化参数,重新打包部署;
4.对关系型数据库Oracle,MySQL,Goldendb等关系型数据库有一定了解,熟练编写SQL语句,有一定的SQL性能优化功底;
5.熟练编写shell脚本,能实际应用于日常开发工作。
任职资格:
1.3年及以上相关工作经验,具有扎实的数据结构与算法的理论知识;
2.熟练使用shell、perl、python等至少2门脚本语言;
3.了解Hadoop、Presto、Kafka、Hive、Spark、ES等组件的工作原理;
4.能够承受较强的工作压力,有较强的自学能力、钻研精神和动手能力,具有良好的逻辑思维能力、沟通能力和团队协作能力,做事认真、踏实、负责。
地点:石景山区6号线金安桥地铁附近
岗位二大数据开发工程师甲方:哈尔滨银行消费金融公司(暂停)
1.学历要求:本科及以上学历;
2.工作经验:精通大数据技术栈,包括Hadoop、Hive等;
3.岗位职责:负责公司业务数据的分析研发,可独立完成数据集市的需求分析、设计及实现,报表的开发;
4.具备扎实的编程能力,熟练掌握SQL、具备SQL调优能力;熟悉Hive,Oracle、MySQL等数据库;
5.具备良好的逻辑思维能力、沟通能力和团队合作精神,能够有效与不同团队协作,解决复杂数据问题;
6.对新技术和行业趋势保持敏锐的观察和学习能力,能够不断提升自身的技术水平。
7.有银行、消费金融等行业工作经验;
8.加分项:会paython;
地点:朝阳区10号线三元桥地铁附近
岗位三大数据数仓工程师甲方:哈尔滨银行消费金融公司(暂停)
职责:
1.负责设计、开发和维护大数据数仓系统,包括数据采集、清洗、转换和存储等环节。
2.参与数据模型设计与开发,确保数据仓库的高效性、可靠性和可扩展性。
3.协助业务部门和数据分析团队,理解业务需求并将其转化为可执行的数据仓库解决方案。
4.设计和优化ETL流程,确保数据的准确性和完整性,并提高数据处理的效率。
5.负责监控数据仓库系统的性能,识别和解决潜在问题,保障数据平台的稳定运行。
要求:
1.本科及以上学历
2.精通大数据技术栈,包括Hadoop、Spark、Hive、Flink等,具有丰富的数据仓库建设经验。
3.熟悉数据建模和数据架构设计,具备良好的数据分析能力和逻辑思维能力。
4.具备扎实的编程能力,熟练掌握SQL、Python等编程语言。
5.具备良好的沟通能力和团队合作精神,能够有效与不同团队协作,解决复杂的数据问题。
地点:朝阳区10号线三元桥地铁附近
岗位四大数据工程师甲方:哈尔滨银行消费金融公司(暂停)
要求:
1.具备一定数据开发经验,熟练使用HiveSQL、Oracle、AZkaban进行数据开发。
2.深入了解业务现状,参与监管数据集市需求与模型设计工作,参与监管系统建设和监管数据治理等工作的开展;
3.具备数据开发工作经验、能够参与数据项目开发工作。
4.具备银行、消金等同业工作经验,精通信贷类业务,可以参与需求的沟通讨论,能够参与出具监管问题的可行性解决方案。
5.根据监管项目建设需求,负责项目实施过程管理,制定实施方案与计划,保证项目进度与质量,确保项目按需交付,根据需求最终生成符合监管要求的报送数据;
1、全日制本科及以上学历,3年及以上工作经验;
2、具备数据开发与数据应用项目开发经验,对大数据有较深理解和认识,能使用HiveSQL、Oracle、AZkaban、Shell等开发工具;
3、熟悉银行、消金业务,熟悉银行、消金数据处理流程;
4、工作责任心强,良好的沟通和协调能力,严谨、细致、踏实的工作作风和积极主动的工作态度。
5.能够通过大数据日志等工具排查生产问题、解决生产问题。
6.具备1104、征信报送、利率报备、金数、EAST的等两项及以上工作经验。
地点:朝阳区10号线三元桥地铁附近
岗位五大数据开发工程师甲方:哈尔滨银行消费金融公司(暂停)
要求:
1、统招本科及以上学历,计算机相关专业,3年以上大数据方向技术与项目研发经验;
2、熟练掌握Hivesql/Sparksql/Flinksql及UDF/UDTF/UDAF等一种或多种技术,并具备实际项目经验和一定性能资源调优经验;
3、熟悉大数据生态相关技术框架,有海量离线和实时数据技术经验,对大数据存储与计算涉及的容错机制、高可靠性、低延迟时效性有深入理解和生产经验;
4、熟悉大数据安全、大数据治理、数据标准、元数据、数据质量方面的内容,有一个或多个项目经验优先;
5、熟悉java/Scala/Python一种或多种的开发语言,熟悉常用数据库及其SQL语法;
6、具备良好逻辑思维与沟通表达,工作积极主动、责任心强,有良好的跨团队协作能力,具有良好学习能力与对前沿技术较强的学习热情;
加分项:
1.有金融大数据治理、大数据安全监管合规方向经验优先;
2.有大数据常用开源框架组件优化经验优先;
地点:朝阳区10号线三元桥地铁附近
岗位六甲方:滴滴(暂停)
岗位说明
1、能够独立负责金融某一业务板块实时数据仓库与离线数据仓库的需求管理、架构设计、模型建设和数据研发工作,保证数据服务的稳定性和准确性;
2、能够通过数据资产治理、数据需求交付时效提升等方式实现数据仓库工作的降本提效;
3、能够与上下游紧密协作,为金融商业分析、业务决策、业务运营、数据产品等提供有效数据支撑,对业务赋能;
4、能够与行业先进的数据技术对标,采用最佳技术实践解决业务数据需求痛点。
任职要求:
1、本科及以上学历,计算机等相关专业,3~5年以上工作经验;
2、熟悉金融业务,精通数据仓库建模和ETL实施方法论,具备PB级金融数据仓库设计、实施工作经验,能够对数据仓库架构进行优化提效;
3、熟悉Hadoop大数据生态圈技术组件,熟悉Hive/Flink/Python/MR/Spark等技术,具备互联网大数据环境数据仓库工作经验;
4、熟悉数据标准、数据质量、数据指标、数据成本管控等数据资产管理和数据治理技术,且具备数据治理实践经验;
5、具有较强的执行推动能力和沟通协作能力,能够解决业务痛点和数据痛点,发挥数据资产价值;
6、具有业务Sense,主动基于业务场景下的数据体系建设,不单单是执行。
备注:
1、至少3年实际数据开发经验,SQL熟练;
2、有互联网数仓建设经验;
3、了解常用的OLAP引擎并应用过优先;
4、有体系化的数据治理经验优先。
技术栈:hadoop、hive、spark必须。有starrocks、clickhouse使用经验优先
过往经历:3~5年。互联网公司(不要传统行业和银行保险这种公司的经历)
学历专业:统招全日制一本学历及以上。
业务:互联网的,不要传统行业的
地点:北京市昌平区回龙观北郊农场桥西(临京藏高速)万科天空之城AB座
乘车路线:昌平区13号线龙泽地铁下,坐班车即到或者骑共享单车几分钟即到
相似职位
很抱歉,暂无相似职位!