ETL学习之四：SQL Server Integration Services入门
SSIS就是微软在SQL SERVER2005上对DTS的升级，不得不说，微软在BI上是花了很大功夫的，包括提供了SSIS,SSAS,SSRS等多个工具，从创建数据仓库，到从元数据抽取数据，到创建维度和挖掘结构，挖掘模型，训练，报表模型设计，报表设计，发布，非常方便和强大。先从ETL开始，看看利用这些工具如何将元数据和数据仓库联系起来，以下转自MSDN:
在本课中，您将创建一个简单 ETL 包，该包可以从单个平面文件源提取数据，使用两个查找转换组件转换该数据，然后将该数据写入 AdventureWorksDW 中的 FactCurrencyRate 事实数据表。在本课中，您还将学习如何创建新包、添加和配置数据源和目标连接以及使用新的控制流和数据流组件。
| 重要事项： |
|---|
| 本教程需要 AdventureWorksDW 示例数据库。有关安装和部署 AdventureWorksDW 的详细信息，请参阅： |
了解包要求
在创建包之前，需要充分了解在源数据和目标数据中使用的格式。了解了这两种数据格式后，才能定义将源数据映射到目标数据所需的转换。
查看源
对于本教程，源数据是一组包含在平面文件 SampleCurrencyData.txt 中的历史货币数据。源数据有以下四列：货币的平均汇率、货币键、日期键和当天汇率。
下面是 SampleCurrencyData.txt 文件中所包含的源数据示例：
1.00010001 ARS 9/3/2001 0:00 0.99960016
1.00010001 ARS 9/4/2001 0:00 1.001001001
1.00020004 ARS 9/5/2001 0:00 0.99990001
1.00020004 ARS 9/6/2001 0:00 1.00040016
1.00050025 ARS 9/7/2001 0:00 0.99990001
1.00050025 ARS 9/8/2001 0:00 1.001001001
1.00050025 ARS 9/9/2001 0:00 1
1.00010001 ARS 9/10/2001 0:00 1.00040016
1.00020004 ARS 9/11/2001 0:00 0.99990001
1.00020004 ARS 9/12/2001 0:00 1.001101211
在使用平面文件源数据时，需要了解平面文件连接管理器如何解释平面文件数据，这一点很重要。如果平面文件源是 Unicode 编码的，则平面文件连接管理将所有列定义为 [DT_WSTR]，默认列宽为 50。如果平面文件源是 ANSI 编码的，则将列定义为 [DT_STR]，默认列宽为 50 。您可能必须更改这些默认设置，才能使字符串列类型与所使用的数据更相符。为此，您需要查看将写入数据的目标的数据类型，然后在平面文件连接管理器中选择正确的类型。
查看目标
源数据的最终目标是 AdventureWorksDW 中的 FactCurrencyRate 事实数据表。FactCurrencyRate 事实数据表有四列，并且与两个维度表有关系，如下表所示。
| 列名 | 数据类型 | 查找表 | 查找列 |
|---|---|---|---|
|
AverageRate |
float |
无 |
无 |
|
CurrencyKey |
int (FK) |
DimCurrency |
CurrencyKey (PK) |
|
TimeKey |
Int (FK) |
DimTime |
TimeKey (PK) |
|
EndOfDayRate |
float |
无 |
无 |
将源数据映射为与目标兼容
对源数据和目标数据的分析指出需要查找 CurrencyKey 和 TimeKey 值。将执行这些查找的转换通过使用 DimCurrency 和 DimTime 维度表中的备用键来获取 CurrencyKey 和 TimeKey 值。
| 平面文件列 | 表名 | 列名 | 数据类型 |
|---|---|---|---|
|
0 |
FactCurrencyRate |
AverageRate |
Float |
|
1 |
DimCurrency |
CurrencyAlternateKey |
nchar(3) |
|
2 |
DimTime |
FullDateAlternateKey |
Datetime |
|
3 |
FactCurrencyRate |
EndOfDayRate |
Float |