2023年数据仓库工程师的工作内容 数据仓库工程师薪资(22篇)
范文为教学中作为模范的文章,也常常用来指写作的模板。常常用于文秘写作的参考,也可以作为演讲材料编写前的参考。写范文的时候需要注意什么呢?有哪些格式需要注意呢?接下来小编就给大家介绍一下优秀的范文该怎么写,我们一起来看一看吧。
数据仓库工程师的工作内容 数据仓库工程师薪资篇一
1. 负责数据仓库架构设计与开发
2. 根据业务调研,设计信息模型与数据模型,负责大数据建模、etl、数据产品及平台的设计与开发
3. 满足业务数据需求,设计面向业务的数据集市模型
4. 需求的沟通与数据开发项目管理
5. 基于hadoop生态的程序设计、开发和维护
岗位要求:
1.熟悉sql语言,至少熟悉oracle、mysql、sql sever一种及以上
2.精通数据库系统(oracle、sql、mysql等):精通熟悉oracle数据库体系结构,基础扎实;精通熟悉dataguardrac等高可用技术,能顺利的配置和管理dataguard;精通熟悉oracle的备份与恢复技术;熟悉sql和plsql,能编写日常维护需要的脚本
3. 从事过数仓逻辑模型、物理模型设计与实施等工作
4. 有使用hive、hbase、kettle等相关应用经验更佳
数据仓库工程师的工作内容 数据仓库工程师薪资篇二
职责:
1、 参与数据仓库及etl基础架构规划、安全规划制定;
2、 负责数据仓库及etl的开发、测试和优化,并及时解决相关技术问题;
3、 负责相关数据准确性验证及报表等日常维护;
4、 报表性能优化:对存在性能问题的数据报表进行优化;
5、 数据运维:及时处理线上问题;
6、 完成上级交代的其他工作。
岗位要求:
1.计算机相关专业本科及以上学历,2年以上etl开发或数仓相关工作经验;
2.熟练使用oracle、mysql、postgresql等主流数据库,具有较强的sql编写、优化能力,熟悉存储过程编写;
3.熟悉数据仓库数据处理流程,有一定的数据建模能力;
4.具有良好的沟通理解能力,能根据业务提出的需求,快速理解并落地实施;
5.有kettle、greenplum开发经验者优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇三
职责:
1. 负责直播业务相关数据仓库的数据模型设计;
3. 参与数据仓库etl流程设计、开发和优化,解决etl过程相关技术问题;
3. 参与项目规划,数据采集设计,数据仓库开发,模型开发,报表开发等;
4. 总结数据仓库建模的方法,负责数据产品平台化和系统化;
任职资格:
1. 2年及以上的数据仓库/bi相关研发经验,对数据和业务敏感,有较好的数据模型设计能力;
2. 熟悉数据仓库各类模型建模理论,了解数据仓库数据分层架构,多维数据模型设计;
3. 熟练使用hadoop/spark/hive/hbase/mysql,有列式数据库/kylin/elasticsearch等经验者优先;
4. 有较强的编程能力和编程经验,至少熟悉java/scala/python/php等其中一门编程语言;
5. 参与过大型数据仓库架构设计、模型设计、etl设计,具备海量数据处理、性能调优经验;
6. 学习能力强,热衷开源技术,有团队观念,具备独立解决问题的能力;
数据仓库工程师的工作内容 数据仓库工程师薪资篇四
职责:
1、负责数据源导入、清洗、集成等工作,优化etl流程并解决etl相关技术问题;
2、负责参与数据模型体系构建及数据主题设计和开发,数据仓库和业务数据集市的建设;
3、负责数据集市需求调研和需求分析;
4、基于阿里云maxcompute,进行数据开发工作。
岗位要求:
1、3年或以上数据仓库开发和模型设计经验;
2、深入理解dw,bi相关的知识,包括:etl、数据仓库、olap、多维数据模型等;
3、熟悉mapreduce、hive原理;
4、精通sql,能够熟练使用hivesql进行数据开发;
5、具有良好的团队协作精神和沟通能力,较强的逻辑思维,学习能力和解决问题的能力,可承担较大的工作压力;
6、熟悉阿里云大数据开发平台优先,如maxcompute;
7、熟悉跨境电商及供应链业务优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇五
职责
1.负责数据etl开发,优化etl流程设计;
2.负责数据质量问题的分析、跟进、解决,进行数据质量监测、校验和提升;
3.负责etl开发实施文档的编写;
4.负责梳理公司数据仓库/数据集市数据清单、数据映射关系,优化现有数据仓库模型;
5.完善和梳理数据指标体系,完成和维护数据字典的工作;
6.参与数据标准的制定、数据标准管理和数据安全管理工作;
7.参与公司大数据平台的建设,包括sugar报表或神策接口配置,用户画像标签体系的开发等
任职要求:
1.有shell或python脚本开发经验;
2.有传统数据库sql server和mysql,有存储过程编写能力;
3.熟悉hadoop生态相关技术并有相关实践经验,包括但不限于sqoop、hive、hbase、kylin等开发经验;
4.有kettle、azkaban或oozie工作流调度经验;
5.熟悉hive sql或flink sql的开发;
6.有数据仓库模型设计,有使用kafka+flink streaming实时数据处理经验优先;
7.有sugar、神策或tableau使用经验,有用户画像或客户召回标签工作经验优先;
8.对数据挖掘和机器学习有所了解,包括常用的机器学习算法和数据建模过程的优先
数据仓库工程师的工作内容 数据仓库工程师薪资篇六
职责:
1、根据概要需求(客户及内部需求)编写详细需求规格说明书,包括规划业务流程、绘制原型等。
2、系统规划,与产品人员进行前期调研和产品设计工作,编写调研报告和项目解决方案。
3、参与系统功能验收工作及用户手册、新增产品功能培训资料的编写。
4、负责客户需求调研及需求反馈的分析。
5、配合测试人员编写测试计划、测试用例、测试报告的编写、问题缺陷的发现及跟踪、产品用户手册编写等。
6、协助系统架构师、系统分析师对需求进行理解。
任职资格:
1.有成熟的技能经验,其中2年以上软件需求分析经验,成功参与过大型产品项目的需求分析工作;有1年以上保险及理赔需求分析经验者优先;有开发经验者优先;
2、具备良好的沟通能力,能快速把握需求的核心要点,能够与不懂软件的其他行业的客户迅速沟通,获取用户的想法、目的,同时对内沟通,让内部的开发人员、项目经理理解用户想要的东西;
3、熟悉需求调研方法,较强的业务流程及业务模型分析设计能力;善于控制需求,
4、有较强的文档编写能力;熟悉cmm文档规范者优先;
5、需有较强的团队协作精神。有效的沟通技巧,在团队协作中具有精炼思维和解决复杂问题的能力,具备良好的学习能力,责任心强,能够承受较大的工作压力;
数据仓库工程师的工作内容 数据仓库工程师薪资篇七
职责:
1. 负责公司各类数据库系统维护管理、问题处理及性能调优工作;
2. 负责公司数据备份及数据分析工作;参与数据中心建设、管理;
3. 负责数据库架构的规划,设计主机、存储、数据库的整体方案;
4. 参与公司技术管理其它工作。
任职资格:
1.计算机相关专业大学本科及以上学历,具有2年及以上的oracle管理和开发经验;
2.熟悉oracle、sqlserver等主流数据库的管理,要求具备有较强的故障定位和问题分析、解决能力;
3.丰富的数据库维护经验,擅于分析运行瓶颈,并提供改进方案;
4.熟悉unix/linux等主流os平台,理解操作系统原理,具备脚本编写能力(shell/perl/python),并善于利用脚本解决问题;
5.能够熟练运用rac/dataguard/goldengate/streams等高可用技术;
6.深入理解oracle数据库的运行机制和体系架构,精通sql 性能调优;
7.善于数据库架构的规划,能设计主机、存储、数据库的整体方案;
8.具备期货从业资格者优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇八
职责描述:
1.负责不锈钢雕塑工件的加工锻造
2.具有识图、锻造、拼接、抛光经验
任职要求:
1.有两年以上相关工作经验
2.有做道具、雕塑、工艺品、家具相关行业经验者优先录用
数据仓库工程师的工作内容 数据仓库工程师薪资篇九
职责:
1、国家电网公司数据挖掘与数据分析工作;
2、面向国家电网各省分公司进行数据挖掘模型设计、方案编写、模型开发工作;
3、数据挖掘模型方案交流、模型分析成果交流工作
岗位要求:
1、三年左右数据挖掘建模工作经验,电网行业相关工作经验优先;
2、统招本科及以上学历,统计学、应用数学类相关专业优先;
3、熟悉主流机器学习算法,精通文本挖掘者优先;
4、熟练使用主流建模工具,python等;
5、掌握主流的框架、如keras、caffe等;
6、具有良好的sql编写与优化能力,至少熟悉一种数据库的操作oracle/mysql;
7、熟练使用word,excel,powerpoint等办公软件;
8、思维清晰、有逻辑,学习能力强,具备较强的分析能力;
9、具有良好的沟通能力和团队合作精神
数据仓库工程师的工作内容 数据仓库工程师薪资篇十
1、根据生产计划,结合库存、在途等情况制定物料需求计划;
2、跟进生产用料的进度,保证物料使用需求,协调物料及时到料;
3、对接生产计划,及时协调和反馈物料异常等情况,确保生产有序进行;
4、原材料库存控制,制定合理的库存控制策略和具体措施,满足生产发货的同时不断优化库存结构;
5、确保物料更替有序进行,并保证生产需求和预防呆滞;
6、评估和分析物料供应风险,制定长期有效的供应策略,降低供应风险。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十一
1.做好车间各机台的上下模工作,对车间机台所生产的模具进行监控,防止人为因素的破坏;
2.负责机台工艺调试,产品质量控制;
3.负责模具润滑(保养)及生产运营情况;
4.对设备运营情况进行观察,防止设备故障的产生;
5.下班前检查工具是否齐全,是否规范到位;
6.对不能正常生产的设备和模具要做好记录,上报维修;
7.接到转模通知单后要迅速转模,严禁拖拖拉拉;
8.负责机台作业员操作技能培训,作业试指导;
9.协助机台的6s管理工作;
10.认真填写作业员交接班记录,面对面和下一班技术员相互交流,传递信息;
11.负责设备状况的标识工作,及机台各类表单成型参数,设备模具的点检记录;
12.完成上级交代的其它工作.
数据仓库工程师的工作内容 数据仓库工程师薪资篇十二
1.负责与用户进行新开发底盘产品技术要求协调工作;
2.负责完成底盘产品总体方案论证、方案设计工作;
3.负责底盘车架等总成的具体设计、技术文件制定工作;
4.负责底盘产品生产配合、售后技术服务工作;
5.负责开展底盘关键技术预先研究、论证以及标准、规范研究制定工作;
6.配合开展底盘可靠性提升等技术研究工作;
数据仓库工程师的工作内容 数据仓库工程师薪资篇十三
职责
1、负责数据库设计、开发、运维工作,能独立完成核心数据库开发、数据库性能优化工作;
2、针对公司的海量结构化和非结构化数据,设计和开发数据存储模型,实现数据资源合理高效的存储、管理;针对具体数据应用系统的建设需求与目标,参与设计和开发数据仓库;基于数据库和数据仓库,设计和开发数据服务接口,实现数据资源服务化;
3、负责主导该领域的技术沉淀及经验分享。
4、能够及时配合并支持数据团队完成该领域的数据库开发及性能问题处理。
5、负责数据库环境部署和运维管理;及时处理数据库系统的各类故障问题;
6、负责数据库日常监控、维护、备份和恢复,探查系统潜在的问题和可能的性能瓶颈,并进行优化。
7、有良好的沟通技能及处理突发事件的能力;
8、可适应短期出差(浙江省内);
9、熟悉db2或mysql数据库、具有ocp认证优先考虑。
招聘要求
1、计算机、电子通信、自动化等专业,本科及以上学历;
2、五年以上相关领域的数据库开发及运维工作经验,熟悉制造业及相关领域业务,熟练掌握数据库相关工作技能、了解该领域发展趋势;
3、掌握高效的数据库开发和管理工作方法及流程,能承受工作中的各种压力;
4、具备良好的自我学习能力及团队合作意识;
5、熟练使用关系型数据库,并具有丰富的实际项目经验;
6、对数据库有一定的了解并具备一定的相关项目实践经验;
7、熟悉hadoop 、hive、spark等技术及其生态圈。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十四
职责:
1.负责用户特征、车辆特征等挖掘,并能结合应用场景进行抽象建模;
2.负责用户意图、偏好及车辆等建模画像工作;
3.负责梳理各业务场景下用户生命轨迹,挖掘价值点,建立用户行为预测模型;
4.负责挖掘用户、车源的关联关系,实体对象相似性计算,构建供需匹配推荐模型
任职资格:
1. 5年以上相关工作经验,计算机、统计学、数学相关专业背景,机器学习、数据库、数据挖掘理论和技术基础;
2.掌握常用的机器学习算法,如关联规则 、分类算法、聚类算法;
3.掌握至少一门编程语言,如python、c、c++、java等;
4.理解数据库原理,掌握sql,熟练使用hadoop系列工具;
5.有较强的结构化思维、逻辑思维、数据思维,具备独立思考问题解决问题的能力;
6.有用户画像建模及推荐系统工作经验者优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十五
职责:
1、编写简单的功能测试用例,完善测试流程;
2、执行测试计划,测试用例,负责客户端的测试工作;
3、跟进回归测试周期的相关工作;
4、在职学习相关测试的技能和知识;
5、完成上级领导安排的其他事宜。
任职要求:
1、大专以上学历,计算机相关专业,经验不限;
2、性格沉稳,做事细心,有耐心,责任心强,具有良好的沟通协调能力和团队合作精神;
3、工作积极性高,学习能力强,能胜任长期枯燥和重复性的工作,对测试岗位具有浓厚兴趣;
4、能熟练使用办公软件:word、excel、svn,了解一种或多种性能测试工具更佳。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十六
1、企业基础信息调查。
2、污染源调查。
3、对数据进行分析计算整理,编写废水、废气技术方案。
4、和甲方技术部门能充分有效沟通,确定完善的技术路线。
5、协助工程部确定工程安装场地,确定设备,仪表,管道,阀门及其配件的选型,完成工艺流程图、场地基础图、非标设备加工图、设备布置图、管路布置图等设计安装图纸,图纸交底,监制非标设备制造加工。
5、编制调试方案,安装完成后根据调试方案进行设备单机调试、联动调试,调试完成后编写调试报告,整理移交竣工资料。
6、了解设计规范,了解最新环保法规以及行业环保标准和规范。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十七
职责:
1、负责数据中心服务器架构的规划、建设、验收与运维,编制虚拟化和私有云建设方案、设备采购清单和具体实施计划;
2、负责参与相关业务系统的规划部署,分配与业务系统需求匹配的计算、存储、网络资源,并提供相关技术支持;
3、负责制定服务器日常技术维护流程与制度,并推动执行,包括事务处理,系统升级、备份和恢复,日志报告等;
4、负责建立自动化、平台化管理运维平台,分析服务器架构日常运行情况,提供服务器性能分析报告和架构优化方案;
5、负责对服务器环境进行故障响应和问题跟踪,解决系统故障、性能瓶颈等相关问题;了解分布式服务框架、服务网关、消息中间件、数据中间件、公用组件服务等,参与中间件系统的安装、扩容、升级、迁移、拆分、合并等重要项目实施。
任职要求:
1、计算机相关专业统招本科及以上学历,3年以上服务器、存储及灾备系统建设管理经验、通过vmwarevcp认证;
2、熟悉服务器、存储、备份、san网络管理;有存储运维经验者优先;
3、掌握linux运维管理;熟悉aix、solaris者优先;
4、具有私有云建设、管理维护经验,有应用级别灾备系统项目运维经验优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十八
职责:
1、负责公司与阿里巴巴在新行业方向(新金融、新零售、国内外运营商)的产品研发;
2、负责分析挖掘客户/行业对大数据产品的需求(应用场景),利用数据分析结论提升客户业务能力。例如:文本挖掘,潜在客户挖掘,用户画像,个性化推荐,用能预测等;
3、进行大数据场景下的数据统计、数据挖掘、机器学习、深度学习,包括数据整理、模型建立、模型应用、评估优化等;
4、将客户需求准确转化为可执行的数学模型,针对不同的应用场景,负责编写数据挖掘算法及对其的优化;
5、基于需求分析/运营支持/商业报告等成果,抽取典型用户/客户/行业/产品分析模型并与开发团队沟通实施方案及构建产品原型。
岗位要求:
1、本科以上学历,扎实的机器学习、数据挖掘、统计学理论基础;有统计、应用数学、金融等相关专业背景优先;
2、精通常见机器学习算法(如逻辑回归、svm、神经网络、决策树、贝叶斯等),有实际建模经验,掌握深度学习算法优先;
3、具有扎实的计算机操作系统、数据结构等编程基础,精通至少一门编程语言例如java/python/r等;
4、熟悉map-reduce模型,对hadoop、spark、storm等大规模数据存储与运算平台有实践经验优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇十九
职责:
1、负责时间序列分析类算法的维护和设计实现;
2、负责海量内容和业务数据的分析和挖掘、建模,快速迭代算法,提升算法效果;
3、参与搭建和实现大数据平台下的算法处理程序;
4、应用各种机器学习、数据挖掘技术进行数据分析与数据挖掘;
5、根据业务需求进行数学建模,设计并开发高效算法,并对模型及算法进行验证和实现。
【职位要求】
1、20xx届应届毕业生,本科及以上学历,985/211毕业院校优先考虑,计算机软件、通讯相关专业;
2、熟悉linux操作,熟悉oracle数据库及sql语言;
3、掌握数据分析/挖掘方法及相关算法;
4、有r语言开发能力优先;
5、有运营商数据分析,模型构建经验优先。
数据仓库工程师的工作内容 数据仓库工程师薪资篇二十
职责:
1. 负责不同大型客户环境下linux业务服务器的配置,维护,监控,调优,故障排除等;
2. 针对用户量大的集群,做高性能gpu服务器系统的部署方案及实施;
3. 保障服务器与数据库安全,检查并消除安全漏洞;
4. 数据备份、数据监控、应急响应、故障排除、编写数据分析报告等;
任职资格:
1. 两年以上大中型系统运维工作经验、linux基础较好,熟悉linux相关数据库、操作系统、硬件服务器、系统部署、网络安全等,对存储、网络安全有一定的了解,具备网络故障诊断能力;
2. 精通linux系统如redhat、gentoo、精通apache、nginx、mysql、ftp、dns、squid等常用服务的安装、配置和维护;
3. 精通并灵活运用1种以上的脚本语言,包括:python、shell、perl、php等;
4. 对事物有敏锐的洞察力,高度的责任感,较强的故障分析及排除能力,运用相关工具及资源,保障系统的运行。善于在工作中学习,有较强的抗压能力;
数据仓库工程师的工作内容 数据仓库工程师薪资篇二十一
职责:
1. 负责移动终端软件测试,按照测试用例和测试流程完成测试任务。
2. 负责测试过程中发现bug的登记,并对修改后的bug做验证和回归测试。
3. 按照软件测试文档要求,编制规范测试报告。
4. bt,wifi功能和协议的测试/功耗、性能、压力测试等,其中任意一方向能达到深入了解;
任职要求:
1. 计算机、通信相关专业,专科以上学历。
2. 对测试行业有兴趣,并想长期发展。
3. 1年以上工作经验,应届生条件优秀者可酌情考虑。
4. 责任心强,执行力强,乐于学习,有一定抗压能力。
5. 有一定用例编写能力。
6. 有基础的英文读写能力。
数据仓库工程师的工作内容 数据仓库工程师薪资篇二十二
职责:
1、编制水文水资源信息化项目有关的科研报告、实施方案、投标文件等;
2、负责与客户进行业务沟通,挖掘和把握客户的需求;
3、在项目实施过程中,对阶段成果进行功能性测试;
4、协助项目经理在项目实施过程中进行汇报、沟通;
5、带领团队进行需求调研,包括需求调研计划编制、需求调研实施、系统原型设计、需求规格说明书编写、推进需求评审等;
6、掌握软件开发与数据库基础知识,辅助项目实施工作;
7、负责需求变更的跟踪管理;
8、编制项目过程文档,完成各类汇报与项目验收等工作,承担培训及后期维护工作;
9、配合项目经理,带领团队针对项目中的数据进行规划、整理,掌握行业发展现状,了解行业动态,分析政策信息。
任职要求:
1、从事水利行业需求分析等相关经验3年以上,最好做过2个以上大中型项目(300万以上),熟悉软件开发者更佳;
2、本科及以上学历,硕士研究生优先考虑;
3、有良好的计算机基础,了解软件设计和开发基本原理;
4、熟悉水文、水资源、地下水、水环境等业务者优先,具备应用系统初步设计能力;
5、有较强的文档编写能力;
6、具备良好的系统分析、逻辑思维和抽象概括的能力;
7、具备独立工作能力和团队合作精神,细心、责任感强;
8、 对用户体验方面的理论有一定的了解和认识,并能有效运用于产品设计工作中;
9、熟悉需求调研方法,有较强的业务流程及业务模型分析设计能力。
10、优先考虑具有水利行业软件需求分析经验的人员。