DMER站长博客分析师资源站

DMER数据分析

 找回密码
 免费注册

扫一扫,访问微社区

QQ登录

只需一步,快速开始

Excel2016视频教程工商管理 视频教程Tableau 9.2 视频教程 SPSS modeler 18 数据挖掘网站流量分析
查看: 281|回复: 0

[课件] ETL工具(数据仓库)

[复制链接]

1010

主题

1301

帖子

3万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
34162
QQ
发表于 2017-1-9 15:59:33 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?免费注册

x
这些年,几乎都与ETL打交道,接触过多种ETL工具。现将这些工具做个整理,与大家分享。我们公司用过(SSIS,datastage)在选择的时候,多听专业人士意见,如果不懂,那就去 51job 上面看,人家招聘 那个岗位需求多,要求怎么样。

数据库也可以做数据仓库,不过就是 专业的工具 写起来效率更高,现成的工具直接调用。还有就是如果你是数据产品经理,开发人员 开发东西时间成本是很大的,不要觉得今天 提需求,2天就弄出来。站在外行的角度,想当然的觉得很简单。你一个小的思维变动,人家可能改几天。提出的需求要思考清楚,不要经常变动。提出需求以后,后面不要加需求。开发人员最讨厌,因为你的思考不全面,谨慎导致重新开发,返工。

数据仓库

数据仓库

一 ETL工具
【国外】

1. datastage
点评:最专业的ETL工具,价格不菲,使用难度一般

2. informatica
点评:专业程度如Datastage旗鼓相当,价格似乎比Datastage便宜。
Informatica PowerCenter 8.6.1 for Win 32Bit

3. kettle
点评:业界最有名的开源ETL工具。开源当然就免费,免费的有些东西使用就不是很方便。

4. ODI
点评:oracle数据库厂商提供的工具,有局限性,与oracle数据库耦合太深。

5.Cognos
Cognos BI Cognos是在BI核心平台之上,以服务为导向进行架构的一种数据模型,是唯一可以通过单一产品和在单一可靠架构上提供完整业务智能功能的解决方案。它可以提供无缝密合的报表、分析、记分卡、仪表盘等解决方案,通过提供所有的系统和资料资源,以简化公司各员工处理资讯的方法。作为一个全面、灵活的产品,Cognos业务智能解决方案可以容易地整合到现有的多系统和数据源架构中。

6.SSIS
SSIS是Microsoft SQL Server Integration Services的简称,是生成高性能数据集成解决方案(包括数据仓库的提取、转换和加载 (ETL) 包)的平台。构成Integration Services 包括用于生成和调试包的图形工具和向导;用于执行工作流函数(如 FTP 操作)、执行 SQL 语句或发送电子邮件的任务;
------------------------------------------
【国内】
6. beeload
点评: 最好的国产ETL工具,但产品化程度还有一定距离。国内的工具基本不怎么用,用的人少,大家需要谨慎选择。

---------------------------

二 专业调度工具
有人说: ETL是BI的基础,而调度是ETL的灵魂,可见调度的重要性!
调度原本是ETL技术的一个分支,但这些年, 调度越来似乎有走独立工具的趋势。虽然在ETL工具有调度功能,但与独立调度工具相比,ETL工具的调度就显得很弱了。

【国外】
1. Control-M
点评:你当了大哥太多年,确实有点寂寞。不论是你的规模、价格、使用难度,都很伟大,但我一界平民,你对我只是传说。

【国内】

2. taskctl
点评:调度新秀。专业,而且设计独特、体验友好。易安装、易使用,看好其前景。


3. ETS
点评:专业化有待提升

4. Moia
点评:产品与项目是有区别的,不要总是在产品化与客户化之间徘徊。

5. ETL-Plus
点评:功能全,遗憾的是东南倒塌。

http://dmer.cn  数据分析论坛,已经更新全部文章和帖子
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

关于我们|小黑屋|手机版|Archiver|帮助|DMER 数据分析 ( 蜀ICP备13007024号-2  

GMT+8, 2017-5-27 23:39 , Processed in 0.205748 second(s), 36 queries .

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表