首页 > 手机 > 配件 > BI工程师是做什麽的,etl工程师是做什么的

BI工程师是做什麽的,etl工程师是做什么的

来源:整理 时间:2022-04-07 19:43:01 编辑:华为40 手机版

大数据ETL工程师是做什么的,发展前景如何

大数据ETL工程师是做什么的,发展前景如何

Etl工程师,是大数据数仓方向的一个职位,主要是做数据清洗,抽取,转换,目前的话主要已hadoop的hdfs作为存储平台,hive作为数据建模,清洗,结构化数据的分析,使用工具或者脚本,导入到关系型数据库数据结,作为结果数据,供后续各部门使用。一般的工作应该是hiveSql进行数据分析统计,shell脚本或者job依赖性强的工具如oozie做任务周期调度发展空间很大,用sql实现业务可以锻炼思维逻辑,增加工作经验,后续可以做数据建模工程师,可以指导小兵做日常开发,而且工资很乐可观。

什么是ETL,ETL工程师的主要工作职责是什么?

什么是ETL,ETL工程师的主要工作职责是什么

一、什么是ETL?ETL是北美地区的安全认证,是电气、机械、机电等等产品进入北美市场的准入安全认证,相当于我国的3C认证、也相当于欧洲的GS认证,是强制执行的。 其产品认证标志如下:如果一个产品获得了ETL认证,并且获得模压证书后,就可以在产品实物上粘贴带有ETL标志的铭牌,或在纸箱上印刷ETL标志。

而获得ETL标志的产品代表满足北美的强制标准,可顺利进入北美市场销售。再谈谈UL与ETL的区别UL和ETL都代表产品通过国家认可测试实验室的测试,符合相应的安全标准,而两者主要区别在于服务、费用、认证周期等等方面,而这几方面均以ETL占优,所以,很多销往北美市场的产品大多都选择做ETL安全认证。 二、ETL工程师的主要工作职责是什么? 其主要工作职责如下: 1、依照相关标准对产品进行安全认证测试; 2、测试问题点分析及向客户反馈; 3、认证测试报告的编写。

BI工程师、数据仓库工程师、ETL工程师、数据开发工程师(大数据开发工程师) 有什么区别?

BI工程师、数据仓库工程师、ETL工程师、数据开发工程师(大数据开发工程师) 有什么区别

本质都是要写代码,分工不同,而且需要的领域知识也不一样。实际中可能得是一个人同时兼任这几种角色的。字面意思定义就不说了,只说它们实际做什么吧。bi工程师,一般是写统计做报表的,需要具备sql相关知识。数据仓库工程师,一般是做和数据存储有关的,需要具备数据仓库的建设和维护的知识etl工程师,一般是从事数据的解析清洗提取的,需要具备基本的编码技能大数据开发工程师,从事大数据有关的计算存储相关的,具备大数据套件的使用开发技能。

文章TAG:工程师BIetl

最近更新