2023年数据仓库工程师培训(十五篇)
范文为教学中作为模范的文章,也常常用来指写作的模板。常常用于文秘写作的参考,也可以作为演讲材料编写前的参考。范文怎么写才能发挥它最大的作用呢?这里我整理了一些优秀的范文,希望对大家有所帮助,下面我们就来了解一下吧。
数据仓库工程师培训篇一
1.参与打造数据中心内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;
2.参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据仓库;
3.参与数据产品与应用的数据研发;
4.负责日常应用系统监控,发现异常问题及时分发,并跟进后续处理;
5.编写python程序,或etl技术完成日常数据抽取和整理任务,可独立进行数据分析;
岗位要求:
1.熟悉etl开发、数据仓库设计流程,熟悉oracle, ms sql server 等主流数据库,表结构设计,存储过程编写;
2.熟练掌握常用linux命令,具备shell编程能力,熟练掌握python编程语言
3.具有较强的语言表达和沟通能力,良好的团队合作精神
4.逻辑思维能力强,对数据敏感,有较强学习能力和创新思维;
5.具有高度的责任感和敬业精神,能够承受较大的工作压力
数据仓库工程师培训篇二
职责:
1、负责大数据开发工作;
2、负责公司数据服务接口平台的建设;
3、参与打造数据中台内容的规划、设计、开发工作,实现高质量数据的互通与共享; 4、参与数据模型体系构建及数据主题设计和开发,搭建离线、近线、实时数据公共层;
5、参与构建非结构化数据体系,进行网络数据爬取,数据清洗,特征挖掘,统计分析,并结合应用场景实现落地。
岗位要求:
1、本科以上学历,计算机、数学、统计学等相关专业;
2、熟悉数据集成、数据仓库、数据分析等全流程数据处理,具备开源或阿里大数据平台实战经验,如hive/spark/maxcompute;
3、熟悉数据治理体系,包括数据模型、数据标准、数据质量等;
4、熟悉常见的离线、实时、流式数据应用场景及架构;
5、至少掌握一门开发语言,java/python;
6、具备良好的沟通能力和设计文档编写能力;
7、懂数据挖掘、知识图谱的构建者优先。
数据仓库工程师培训篇三
职责:
负责大数据数据仓库的建设,根据数据仓库及bi项目的需求,制定相关的设计方案和开发计划;
参与数据的分析处理和数据统计内容的架构设计与研发;
组织项目组成员完成数据仓库的开发和运维等;
负责公司数据规范、数据标准、数据指标梳理与定义;
协助技术人员完成数据管控平台的搭建,完成数据规范管理体系到信息平台的落地实施;
组织开展对数据平台各模块的内容进行培训;
制定和审计业务系统数据数据库模型设计规范;
任职资格:
有一定的互联网数据仓库经验;
深入了解 hadoop 生态系统,熟悉hbase、hive、storm、spark等大数据开发工具中一种或几种;
具备大型数据仓库架构设计、模型设计、etl 设计的相关经验;
关系型数据库原理基础扎实,熟悉 mysql/postgresql等的使用和调优;
有独立设计数据仓库经验、熟悉数据仓库相关理论知识者优先;
数据仓库工程师培训篇四
职责:
1、负责金融行业数据仓库开发工作
2、负责与多个应用对接的接口和框架设计
3、充分理解产品需求,能够结合需求进行任务设计,完成详细设计文档的编写。
岗位要求:
1. 从事数据仓库及商业智能(bi)领域工作至少3年以上,熟悉数据仓库模型设计方法论,并有实际的模型设计经验,有大型数仓建设经验优先;
2. 精通数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、主数据管理、性能调优等;
3.有主流商业/开源etl工具(informatica、datastage、kettle等)使用经验者优先;
4. 熟悉hadoop生态相关技术并有相关实践经验,包括hdfs、map-reduce、hive、hbase、spark等,具备海量数据加工处理(etl)相关经验;
5. 熟练使用java语言,对微服务架构有一定了解;
6. 具有较强的团队意识与良好的沟通能力及高度的工作责任感,热爱技术,有很强的钻研能力,乐于接受有挑战性的任务;
7、有团队管理经验优先。
数据仓库工程师培训篇五
职责:
1、深入理解业务,了解需求和痛点,为风控和业务部门提供数据支持;
2、针对业务需求,参与数据仓库需求分析,制定etl相关设计方案和开发计划;
3、负责数据同步,数据整合清洗,以及数据质量的治理;
4、数据仓库模型设计,分层体系构建,元数据管理监控以及权限控制。
任职资格:
1、重点院校统招本科及以上学历,计算机基础扎实;
2、具有2年以上金融贷款类业务经验;
3、熟悉数据仓库理论和数据库建模,有redshift和aws经验优先;
4、精通pgsql/mysql等数据库,精通sql语言,具有数据库优化/sql优化相关经验;
5、熟练掌握python/shell语言。
数据仓库工程师培训篇六
职责:
1. 负责ibm、hp、dell等业界主流品牌的服务器安装配置及日常维护工作;
2. 负责vmware虚拟化平台项目实施及维护工作;
3. 解决实施工作中的技术难题,挖掘客户需求,提出针对性的解决方案;
4. 编写各类维护文档,譬如:实施方案、实施报告、巡检报告、故障处理报告等等。
5. 负责操作系统(windows & linux)的安装、配置和维护,问题处理,以及软件升级,安全优化;
6. 维护linux、windows服务器,监控服务器性能 负责windows & linux 平台下的系统维护(系统补丁安全漏洞修复等),提高系统的可用率及可维护性 负责相关数据备份和恢复.服务器监控系统的配置和维护;
任职要求:
1. 3年以上服务器相关工作经验。
2. 熟悉或精通以下领域(windows/linux server,active directory,grouppolicy,vmware/hyper-v,storage,backup and etc)
3. 有技术支持经验者优先。
4. 有日志分析能力或脚本编写能力者优先。
5. 有1-3年外企或global team工作经验者优先。
6. 了解lotus notes和c#作为加分项。
7. 计算机相关大专以上学历,3年以上it工作经验;
8. 熟悉vmware虚拟化架构技术,具有虚拟化的搭建和运维经验,对vmware的存储、灾备、网络、安全、升级、虚拟机管理、监控和性能等有深刻的理解;
9. 有一定的信息安全实施经验,对vpn,防火墙,上网行为管理以及内网安全有深入理解和实操经验;
10. 熟悉服务器运维及服务器架设,包括ad域,iis,dns、双机集群等各类windows服务器的配置管理;
11. 精通windows & linux系统的安装、配置和维护
数据仓库工程师培训篇七
1.参与施工交接桩、复测、设计图纸复核。对设计中存在问题及时汇报。
2.做好隧道施工中特殊过程、危险源和环境因素辩识评价,参与编制项目施组及隧道工程专项施工组织设计,制定质量安全、环保相关作业指导书、管理方案、应急予案和技术交底。
3.准确掌握隧道工程的设计文件意图、标准规范,明确施工工艺流程和创优规划,按工期要求及时提报进度安排、材料计划和技术交底。深入现场指导施工,及时处理施工中出现的技术问题。
4.做好隧道施工过程中内业资料的积累及竣工资料的编制、整理工作。
5.参与推广隧道施工中新技术,新工艺、新材料、新方法的应用和qc小组活动。
6.积极主动参与论文及技术总结的编写。按规定提供有关报表。
7.协助领导做好施工中的进度、质量、安全、环保、成本控制及管理。搞好日常检查,发现问题及时纠正预防。
数据仓库工程师培训篇八
1、模切产品的材料管控、材料开发与验证、材料知识培训、产品开发等;
2、对工程开发选材,提供技术支持;
3、为客户提供材料解决方案;
4、协助生产工艺流程的改进、优化等;
5、能独立完成新产品开发,产品工艺改善,和各项研究工作开展;
6、对模切生产了解提供支持。
数据仓库工程师培训篇九
职责:
1、负责项目的需求调研,编写相应的调研报告、业务需求方案;
2、负责项目业务需求分析,将业务需求转化为功能需求,撰写需求规格说明书;
3、在产品经理组织下,参与产品规划和策划;
4、对所负责项目或产品进行需求管理、跟踪调研、原型设计;
5、向开发、测试、ui解释业务需求,对实现需求进行验收。
职位要求:
1、专科学历以上,计算机、软件工程相关专业优先;
2、2年以上产品设计、需求分析相关经验;
3、能熟练使用axure、墨刀等原型工具,独立完成产品prd、demo及mrd等内容;
4、有很强的沟通表达能力和团队合作精神,能承受一定的工作压力;
5、有大数据、bi等相关产品或项目经验者优先;
6、从事过java开发、数据开发等工作经验值优先;
7、熟悉审计业务者优先。
数据仓库工程师培训篇十
职责:
1、hpe、h3c、华为等服务器硬件安装和维护;
2、熟悉hpe、emc、华为等各品牌存储,能独立进行lun映射及存储故障解决;
3、熟悉服务器常用的raid、scsi技术;
4、对windows、linux等操作系统安装、排错;
5、协助业务部门做产品升级及方案制订;
任职资格:
1、大专及以上学历,计算机专业;
2、服务器相关行业具有三年及以上工作经验,具有独立服务器硬件故障判断能力,对故障进行独立解决,具有丰富的硬件安装和维护经验;
3、熟悉vmware、华为、h3c等虚拟化技术及虚拟化软件操作;
4、具有一定的网络规划及实施能力,具备网络基本知识,可排查常见的网络故障;
5、具备数据库维护经验更佳;
数据仓库工程师培训篇十一
1、负责数据库系统的管理工作,保证其安全、可靠、正常运行;
2、负责数据库服务器的管理工作,做好服务器的运行记录,当服务器出现故障时,迅速会同相关人员一同解决;
3、负责数据库系统的建设,做好服务器的维护、数据库软件的安装、数据库的建立工作,定期对数据进行备份;
4、sql优化,负责对问题sql提出优化及改进建议;
5、研究新版数据库功能,完成功能测试报告;
6、负责数据库服务器的安全防范管理工作,制定业务的日常运维,定期制作运维报告;
7、协助软件开发人员完成数据库软件开发所需的各类数据库的信息;
8、根据公司和部门工作需要,完成领导交办的其他任务;
数据仓库工程师培训篇十二
职责:
1、参与k12教育行业大数据分析、大数据处理、数据挖掘等系统的设计和开发;
2、根据业务需求,基于海量学生学习和行为数据(如错题等)进行数学建模,设计并开发高效算法,并对模型及算法进行验证和实现,通过产品和技术提升教学和服务的效率和质量;
3、应用各种机器学习、数据挖掘技术进行数据分析与用户画像;
4、设计和构建基于用户行为特征的平台化画像服务能力,并建立用户画像产品的评估机制和监控体系;
任职资格:
1、全日制本科及以上学历,计算机、数学、统计等相关专业;超过三年的相关工作经验;
2、熟悉c、c++、java、python,csharp,r等一门或多门编程语言;具备扎实的数学和计算机编程功底,以及坚实的文本数据挖掘和机器学习理论基础,在推荐算法、广告算法等相关领域研究或实践经验者优先;
3、具备深厚的数据建模(机器学习、数据挖掘)工作经验;有大数据处理实际开发经验(hadoop、spark,、flink、elasticsearch、hive、hbase);
4、熟悉各种特征提取、数据降维等数据处理技术;从事过用户画像等方面工作;
5、熟练应用各种分类聚类算法;熟悉各种相关性算法、回归算法;具有数据挖掘算法开发经验;
6、具备较强的沟通能力和优秀的逻辑思维能力,擅长从海量数据中发现有价值的规律;
7、自我驱动能力强,踏实勤勉,对有挑战的问题充满激情;愿意在创业氛围中工作;
8、能够阅读英文技术文档及论文,具有良好的自学能力,可以快速学习和掌握新的方法和技术;
数据仓库工程师培训篇十三
职责:
1. 负责移动终端软件测试,按照测试用例和测试流程完成测试任务。
2. 负责测试过程中发现bug的登记,并对修改后的bug做验证和回归测试。
3. 按照软件测试文档要求,编制规范测试报告。
4. bt,wifi功能和协议的测试/功耗、性能、压力测试等,其中任意一方向能达到深入了解;
任职要求:
1. 计算机、通信相关专业,专科以上学历。
2. 对测试行业有兴趣,并想长期发展。
3. 1年以上工作经验,应届生条件优秀者可酌情考虑。
4. 责任心强,执行力强,乐于学习,有一定抗压能力。
5. 有一定用例编写能力。
6. 有基础的英文读写能力。
数据仓库工程师培训篇十四
职责:
(1)负责软件系统代码的实现,编写代码和开发文档
(2)负责进行系统的功能定义,程序设计
(3)根据设计文档或需求说明完成代码编写、调试、测试与维护
(4)分析并解决软件开发过程中的问题
(5)配合技术经理完成相关任务目标
任职资格:
(1) 计算机相关专业全日制本科及以上学历;
(2) 3年以上工作经验,其中至少2年oracle、mysql数据库开发经验
(3) 熟练掌握java架构和开发,熟练使用shell脚本编程
(4) 学习和理解能力强,具有一定的系统分析能力,及独立解决问题的能力
(5) 具备良好的团队合作精神和承受压力的能力
(6) 拥有金融类产品开发经验者优先。
数据仓库工程师培训篇十五
职责:
1、负责生产环境mysql数据库系统高可用、高性能架构方案,分库分表策略,数据库扩展方案;
2、排查数据库故障,分析和解决疑难问题,提出预防方案;
3、制定数据库监控策略、备份策略、容灾策略,探查系统潜在的问题和可能的性能瓶颈并进行优化;
4、对开发工程师的sql语句进行审核及sql优化;
5、负责redis、memcache等非关系数据库的管理和扩展,能够根据业务需求完成系统设计、架构设计工作;
6、参与前瞻性新技术研究,解决数据库相关疑难问题。
【任职要求】
1、计算机相关专业,统招大专及以上学历;
2、具备5年以上丰富的mysql实践经验,精通sql优化以及存储过程编程,熟悉oracle的管理和优化;
3、精通mysql数据库性能优化,精通mysql引擎,精通mysql主从调优,精通mysql集群优化;
4、精通mysql数据库的运行机制和体系架构;
5、精通mysql复制,实时备份、负载均衡等处理技术,精通数据库核心参数设置和调整,具备io与系统性能优化的经验;
6、熟悉redis、memcached、mongodb等非关系数据库管理者优先;
7、有大型网站数据库高并发量设计经验、熟悉大型数据库的设计、容量性能管理和调优经验者优先。