• Microsoft SQL Server Integration Service文章总结

    SSIS中的容器和数据流—数据转换(Transformations) SSIS中的容器和数据流—数据转换(Transformations)续 SSIS中的容器和数据流—举例说明数据转换任务 SSIS中的容器和数据流—调试工具数据视图 创建SSIS包—建立...
    文章 2011-01-03 793浏览量
  • 实例学习SSIS(五)-理论介绍SSIS

    数据仓库和数据集市中的数据具有更新频繁和加载量的特点,SSIS专门提供了一个从平面文件容量加载到 SQL Server的任务。清除数据数据标准化 Integration Services 包含一些内置转换,可将其添加到包中以清理...
    文章 2014-11-25 1001浏览量
  • SSIS从理论到实战,再到应用(2)-SSIS包的控制流

    和我们画的流程图没有太的区别 图中的容器:指的是一个可执行的功能,表示该控件可以执行某种功能。MSDN关于控制流是如下解释的: 创建控制流包含下列任务: 添加在包中实现重复的工作流或将控制流划分为子集的...
    文章 2014-05-08 1037浏览量
  • 使用SSIS进行数据清洗

    原文:使用SSIS进行数据清洗 简介 OLTP系统的后端关系数据库用于存储不同种类的数据,理论上来讲,数据库中每一列的值都有其所代表的特定含义,数据也应该...使用SSIS进行数据清洗相较于其他方式有很的灵活性和性能。
    文章 2014-12-01 1013浏览量
  • SSIS从理论到实战,再到应用

    1.SSIS是Microsoft SQL Server Integration Services的简称,是生成高性能数据集成解决方案(包括数据仓库的提取、转换和加载(ETL)包)的平台. 以上的这段文字来自于百度,脱离这个概念,我一直再思考如何向普通人...
    文章 2014-05-08 943浏览量
  • 使用SSIS进行数据清洗

    简介 OLTP系统的后端关系...使用SSIS进行数据清洗相较于其他方式有很的灵活性和性能。分类:SSIS 本文转自CareySon博客园博客,原文链接http://www.cnblogs.com/CareySon/p/4010424.html,如需转载请自行联系原作者
    文章 2017-12-14 1165浏览量
  • 总结运行SSIS包的几种方式

    原文:总结运行SSIS包的几种方式 ...所以在很多商业智能项目中,通常借助SSIS包来定期从OLTP中向数据仓库中抽取数据,或者数据仓库中其它的数据任务,当然还有园子里的高手提到过的用它来实现监控任务。
    文章 2014-11-19 1023浏览量
  • 实例学习SSIS(五)-理论介绍SSIS

    填充数据仓库和数据集市 数据仓库和数据集市中的数据具有更新频繁和加载量的特点,SSIS专门提供了一个从平面文件容量加载到 SQL Server的任务。清除数据数据标准化 Integration Services 包含一些内置转换,...
    文章 2017-11-14 1447浏览量
  • SSIS Design7:数据类型的选择

    由于SSIS使用内存缓存区来完成相关操作,被加载到缓冲区的行数直接和row的宽度相关,row的宽度越窄,缓冲区容纳的行数越多,被处理的数据量越,性能越好。如果要定义大型输入源的数据类型,必须慎重挑选数据类型,...
    文章 2016-10-12 903浏览量
  • 《BI那点儿事》SQL Server 2008体系架构

    SQL2008对Lookup的性能作出很的改进,而且能够处理不同的数据源,包括ADO.NET,XML,OLEDB和其他SSIS压缩包。SSIS 应用场景SSIS 应用主要是在一些商业智能的大型数据系统中,对数据的抽取,清洗等,以获得高质量的...
    文章 2014-12-02 1312浏览量
  • SSIS

    Integration Services 包含一个可直接将数据从平面文件容量加载到 SQL Server 表和视图中的任务,还包含一个目标组件,该组件可以在数据转换过程的最后一步将数据大容量加载到 SQL Server 数据库中。SSIS 包可配置...
    文章 2012-10-24 971浏览量
  • SQL Server 数据归档方案

    本文旨在从数据库管理方面,提供将SQL Server大数据表归档的解决方案。可以作为新业务上线时进行方案设计的参考。归档方案选型 方案一: 方案介绍 BCP导出数据到本地目录目录后,遍历目录文件BCP导入到临时表,再...
    文章 2017-11-08 1689浏览量
  • SSIS集成服务引擎—简介

     控制流和数据流的对比 数据流的类型 控制流中的高级话题 数据流中的缓冲器和执行树 监控数据流的执行这个章节中的内容有些抽象,我们将从一些高级话题开始一步一步地理解SSIS的内部机制。...
    文章 2011-09-28 583浏览量
  • SSIS包中使用 Checkpoint从失败处重新启动包

    使用SSIS做ETL的过程中会遇到各种各样的错误,对于一些大数据量的Job失败以后我们不希望重新运行,因为重新运行的时间开销是非常大的,我们只希望从失败的部分开始运行,这样可以省去很多的时间。SSIS提供了...
    文章 2017-11-15 1109浏览量
  • SSIS 优化设计1:数据源的提取和使用暂存

    增量更新,使用DateTime,Row_Version等字段来实现增量更新,而不是将重复的数据重复加载,增量更新会幅度减少需要加载的数据行数量,减少ETL运行的时间。2,使用Where条件,过滤无效的数据 过滤数据行,只加载...
    文章 2014-07-10 666浏览量
  • SSIS中的容器和数据流—数据

    SSIS中大多数的数据源都指向一个连接管理器,通过指定连接管理器可以在Package中重复使用连接,这样只需要修改一次就能重新设置所有连接,在SSIS中有6中不同的数据源。OLE DB数据源 OLE DB数据源用来连接OLE EB...
    文章 2011-04-08 711浏览量
  • SSIS数据流和控制流

    阻塞转换是非常低效的和资源消耗的,因为所有数据都被拦截,所以server必须使用大量的内存来存储数据,或者如果Server没有足够的内存,那么Server会将部分数据暂存在磁盘上,从而导致IO开销;因为要对大量的数据...
    文章 2016-03-17 1272浏览量
  • 效率最高的Excel数据导入续-SSIS Package包制作图解全...

    效率最高的Excel数据导入-(c#调用SSIS Package将数据数据导入到Excel文件中【附源代码下载】)效率最高的Excel数据导入续-SSIS Package包制作图解全过程 本文转自左正博客园博客,原文链接:...
    文章 2017-11-16 1430浏览量
  • (c#调用SSIS Package将数据数据导入到Excel文件中...

    (四)数据库中存储过程示例(SSIS应用过程中需要的,最好拿个本子把需要的内容记下)在SQL SERVER 2005中,以SSISDataBase数据库作为应用,仅包括2张表City,Province.(主要是为了简单,便于讲解) 其中存储过程...
    文章 2017-08-29 2384浏览量
  • SSIS技巧-优化数据流缓存

    原文:SSIS技巧-优化数据流缓存 问题 我们经常遇到一种情况,在SSMS中运行很慢的一个查询,当把查询转化成从源到目的数据库的SSIS数据流以后,需要花费几倍的时间!源和数据源都没有任何软硬件瓶颈,并且没有大量的...
    文章 2018-01-25 1289浏览量
  • SSIS Design6:利用数据

    数据流利用内存来缓冲数据,并在内存中处理数据转换,由于内存的访问速度是非常快的,所以SSIS数据流转换性能是非常高效的。SSIS Engine将数据分批加载到内存中,当Data Flow将一批新的数据加载到内存时,下游转换...
    文章 2016-02-12 807浏览量
  • OLEDB数据源和目标组件

    SSIS工程的开发过程中,OLEDB 数据源和目标组件是最常用的数据流组件。从功能上讲,OLEDB 数据源组件用于从OLEDB 提供者(Provider)中获取数据,传递给下游组件,OLEDB提供者是外部数据源,SQL Server是其中一种...
    文章 2017-01-29 1037浏览量
  • SSIS可靠性和扩展性—可扩展性

    在设计SSIS之初,数据传输的操作都发生在内存中,这样会使数据传输和转换更加的快,一个设计目标是数据传输只有一条路径。这样消除了多次读取或者写入数据造成的时间消耗。这样有一个缺点是你需要大量的数据和复杂的...
    文章 2011-09-27 764浏览量
  • SSISDB1:使用SSISDB管理Package

    开发人员把SSIS工程部署到“Integration Services Catalog”中之后,集成服务引擎把Package的配置数据,ETL执行的情况等都记录在SSISDB数据库中。数据库SSISDB包含两个内置的框架(schema)中:internal和catalog。...
    文章 2016-04-14 972浏览量
  • SSIS高级转换任务—执行SQL语句

    SSIS中有许多任务可以解决譬如去掉平面文件中的无用数据,分隔数据输入内容,循环执行几个任务。我们还是可能遇到SSIS不能解决的问题,如果遇到了就需要使用灵活的.net脚本任务来解决。这里我们将使用这些新的工具来...
    文章 2011-04-28 769浏览量
  • 你真的了解事务吗?

    本机事务只能使用单一连接,在同一个连接中通过TSQL命令执行事务处理,不能实现跨连接,不能跨数据库的事务,由于SSIS经常需要处理多个数据库的数据,本机事务无法实现跨数据库的事务处理,用户可以通过MS DTC(微软...
    文章 2016-10-30 659浏览量
  • SQL Server BI Step by Step SSIS 6-获取远程主机的...

    不过使用SSIS,你可以结合这些应用,与数据库的操作,数据转换和集成联系起来,能够发挥更强大的作用。需求: 需要获取远程服务器的磁盘可用空间大小.实现: 1.首先需要确定的是,查询远程电脑的磁盘大小,必须具有这...
    文章 2016-11-28 1045浏览量
  • SQL Azure(二)SQL Azure vs SQL Server

    您可以使用BCP 或 SSIS 来按需获得流入本地 SQL Server的数据。您也可以使用SQL Data Sync tool 来保持本地 SQL Server 和 SQL Azure 的同步。日志传输 Log Shipping 支持 不支持 数据镜像Database Mirroring 支持 ...
    文章 2017-01-29 942浏览量
  • 创建SSIS包—建立端到端的package

    使用SSIS的首要目的是从数据源中读取数据,然后写入Destination中,这个向导介绍从平面文件中读取数据。使用下面的文字 Zipcode State ZipName32008 FL BRANFORD32009 FL BRYCEVILLE32011 FL CALLAHAN32013 FL DAY...
    文章 2011-04-17 871浏览量
  • SQL Server BI Step by Step SSIS 7(End)-事务,错误...

    5.事件处理:在SSIS包中,事件处理是和控制流,数据流相并列的。在这里,你可以对程序包,任务或者容器的不同的事件进行处理,事件还可以用于设置断点并控制日志记录。我们可以使用OnError事件来捕获错误. 6.日志记录...
    文章 2016-11-27 800浏览量
1 2 3 4 5 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化