T-SQL存储过程调用SSIS Package

为什么需要用存储过程调用SSIS Package?

可以综合利用存储过程和SSIS Package各自的优点。如Package中有很多现成的component直接使用,而存储过程中实现同样功能则需要大费周章;存储过程的传参灵活方便,而Package的传入参数如果是经常需要变化的,就比较麻烦了。

两种方法

1、调用SSISDB内置的存储过程

如果SSIS Package是部署在SQL Server的Integration Services Catalogs上的话,可以利用SSISDB中的几个内置存储过程来实现功能。

注意:调用以此方法写就的存储过程时需要用Windows Authentication方式登录数据库

示例存储过程用到一个自定义表变量PACKAGEVARIABLES,需要事先定义:

IF NOT EXISTS(SELECT * FROM  sys.table_types)
CREATE TYPE [dbo].[PackageVariables] AS TABLE ( 
  [id] INT IDENTITY (1, 1) NOT NULL,
  [property_path] NVARCHAR (4000) NOT NULL, 
  [property_value] NVARCHAR (MAX) NOT NULL, 
  [sensitive] BIT DEFAULT ((0)) NOT NULL
);

存储过程实现代码如下:

CREATE PROC [dbo].[usp_CallSSISPackage] @package_name    NVARCHAR(260),--包名称
                                        @folder_name     NVARCHAR(128),--IS Catagory文件夹名
                                        @project_name    NVARCHAR(128),--IS Catagory项目名称
                                        @use32bitruntime BIT=FALSE,--以32位运行还是64位
                                        @delay           VARCHAR(100)='00:00:30',--package启动后每隔多久查看一次运行情况
                                        @maxExecMinutes  INT=60,--超时分钟数,超过这个时间则不再继续等待
                                        @variables       PACKAGEVARIABLES READONLY,--自定义数据类型
                                        @status          INT OUTPUT,--0:Succeeded 1:Failed package运行状态
                                        @execution_id    BIGINT OUTPUT--SSISDB自动生成的execution_id
AS
  BEGIN
      /*
      --Example:
      
      DECLARE @variables AS PACKAGEVARIABLES;
      DECLARE @pkgStatus INT;
      DECLARE @execution_id BIGINT;
      INSERT INTO @variables
                (property_path,
                 property_value)
      VALUES      (N'\Package.Variables[User::var1].Value',
                 @script);
      
      INSERT INTO @variables
                (property_path,
                 property_value)
      VALUES      (N'\Package.Variables[User::var2].Value',
                 @database);
      
      INSERT INTO @variables
                (property_path,
                 property_value)
      VALUES      (N'\Package.Variables[User::var3].Value',
                 @level);
      
      INSERT INTO @variables
                (property_path,
                 property_value)
      VALUES      (N'\Package.Variables[User::var4].Value',
                 @operation_type);
      
      EXEC [dbo].[usp_CallSSISPackage]
      @package_name=N'MyPackage.dtsx',
      @folder_name=N'MySolution',
      @project_name=N'MyProject',
      @variables=@variables,
      @status=@pkgStatus,
      @execution_id=@execution_id;
      */
      SET NOCOUNT ON;

      DECLARE @property_path NVARCHAR(4000);
      DECLARE @property_value NVARCHAR(MAX);
      DECLARE @sensitive BIT;
      DECLARE @i INT=1;
      DECLARE @max INT;
      DECLARE @runningStatus INT;
      DECLARE @isBufferUsed BIT = 0;
      DECLARE @statusReport VARCHAR(500);
      DECLARE @pkgStartTime DATETIME = GETDATE();
      DECLARE @errMsg NVARCHAR(2048);
      DECLARE @errSev INT;
      DECLARE @errState INT;

      BEGIN TRY
          SELECT @max = ISNULL(MAX(id), 0)
          FROM   @variables;

          EXEC [SSISDB].[catalog].[create_execution]
            @package_name=@package_name,
            @execution_id=@execution_id OUTPUT,
            @folder_name=@folder_name,
            @project_name=@project_name,
            @use32bitruntime=False,
            @reference_id=NULL

          DECLARE @var0 SMALLINT = 1

          EXEC [SSISDB].[catalog].[set_execution_parameter_value]
            @execution_id,
            @object_type=50,
            @parameter_name=N'LOGGING_LEVEL',
            @parameter_value=@var0

          WHILE @i <= @max
            BEGIN
                SELECT @property_path = property_path,
                       @property_value = property_value,
                       @sensitive = sensitive
                FROM   @variables
                WHERE  id = @i;

                EXEC [SSISDB].[catalog].[set_execution_property_override_value]
                  @execution_id,
                  @property_path,
                  @property_value,
                  @sensitive

                SET @i=@i + 1;
            END

          EXEC [SSISDB].[catalog].[start_execution]
            @execution_id

          SET @statusReport='Started to execute ' + @package_name;

          RAISERROR(@statusReport,0,1) WITH NOWAIT;

          --Monitor the log
          WHILE @runningStatus IN( 1, 2, 5, 8 )
                 OR @runningStatus IS NULL
            BEGIN
                WHILE @runningStatus IS NOT NULL
                       OR @isBufferUsed = 0
                  BEGIN
                      SELECT @runningStatus = [Status]
                      FROM   SSISDB.[catalog].[executions] WITH(NOLOCK)
                      WHERE  execution_id = @execution_id;

                      SET @statusReport = 'Running Status is '
                                          + CAST(@runningStatus AS VARCHAR(20));

                      RAISERROR(@statusReport,0,1) WITH NOWAIT;

                      IF @runningStatus IS NULL
                        BEGIN
                            RAISERROR('Execution log is not found yet. Wait for 30 seconds...',0,1) WITH NOWAIT;

                            WAITFOR DELAY '00:00:30';

                            SET @isBufferUsed = 1;
                        END
                      ELSE
                        BREAK;
                  END

                IF @runningStatus IS NULL
                  BEGIN
                      RAISERROR('Execution log is not found after waiting for 30 seconds. Please check the status and update ProcessFlag mannually!',0,1) WITH NOWAIT;

                      SET @status = 1;

                      BREAK;
                  END
                ELSE IF @runningStatus IN( 1, 2, 5, 8 )
                  BEGIN
                      SET @statusReport = 'The package is ' + CASE @runningStatus WHEN 1 THEN 'created' WHEN 2 THEN 'running' WHEN 5 THEN 'pending' WHEN 8 THEN 'stopping' END + '. Wait for ' + @delay
                                          + '...';

                      RAISERROR(@statusReport,0,1) WITH NOWAIT;

                      WAITFOR DELAY @delay;
                  END
                ELSE
                  BEGIN
                      SET @statusReport = 'The package is ' + CASE @runningStatus WHEN 3 THEN 'canceled' WHEN 4 THEN 'failed' WHEN 6 THEN 'ended unexceptedly' WHEN 7 THEN 'succeeded' WHEN 9 THEN 'completed' END

                      RAISERROR(@statusReport,0,1) WITH NOWAIT;

                      SET @status = CASE @runningStatus
                                      WHEN 7 THEN 0
                                      ELSE 1
                                    END;
                  END

                IF DATEDIFF(MINUTE, @pkgStartTime, GETDATE()) >= @maxExecMinutes
                  BEGIN
                      RAISERROR('The package execution timed out! Please check the status and update ProcessFlag mannually!',0,1) WITH NOWAIT;

                      SET @status = 1;

                      BREAK;
                  END
            END
      END TRY

      BEGIN CATCH
          SET @errMsg=ERROR_MESSAGE();
          SET @errSev=ERROR_SEVERITY();
          SET @errState=ERROR_STATE();

          RAISERROR(@errMsg,@errSev,@errState) WITH NOWAIT;

          SET @status = 1;

          RETURN;
      END CATCH
  END

2、调用dtexec命令
如果SSIS Package是以File System形式存放,则需要调用dtexec命令了。
虽然这种方法对于package部署在IS Catagory上的情况也适用,但由于无法直接通过return code来判断package运行成功与否,不推荐。
存储过程的核心代码如下:

--Config for dtexec
EXEC sp_configure
  'show advanced options',
  1;

RECONFIGURE;
EXEC sp_configure
  'xp_cmdshell',
  1;

DECLARE @cmd        VARCHAR(8000),
        @returncode INT
DECLARE @val1 VARCHAR(255),
        @val2 VARCHAR(255),
        @val3 VARCHAR(255)

SET @val1 = 'Value 1'
SET @val2 = 'Value 2'
SET @val3 = 'Value 3'
SET @cmd1='dtexec /Rep e /FILE "\"E:\MySolution\MyProject\MyPackage.dtsx\"" /SET \Package.Variables[User::var1].Value;"'
          + @val1
          + '"  /SET \Package.Variables[User::var2].Value;"'
          + @val2
          + '" /SET \Package.Variables[User::var3].Value;"'
          + @val3 + '"'

EXEC @returncode = xp_cmdshell--0:Succeeded 1:Failed
  @cmd
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 210,835评论 6 490
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 89,900评论 2 383
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,481评论 0 345
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,303评论 1 282
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,375评论 5 384
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,729评论 1 289
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,877评论 3 404
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,633评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,088评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,443评论 2 326
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,563评论 1 339
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,251评论 4 328
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,827评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,712评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,943评论 1 264
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,240评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,435评论 2 348

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,626评论 18 139
  • 发现 关注 消息 iOS 第三方库、插件、知名博客总结 作者大灰狼的小绵羊哥哥关注 2017.06.26 09:4...
    肇东周阅读 12,058评论 4 62
  • 从爸爸上周检查身体到今天做完手术,一直只有经历的我们和他最有感觉,绷着的一根弦越来越紧,从昨天通知可以做...
    4点半的恩赐阅读 188评论 0 1
  • 我有一句口头禅常挂在嘴边。 我妈骂我把屋子弄得太乱的时候,我说,我还是个孩子,你不能对我要求太高;做错事的时候,自...
    染雨若阅读 566评论 0 9
  • 听说爱情有四个阶段,熬过去就会永远在一起。 有位心理学家曾写道,一个成熟称得上真爱的恋情必须经过四个阶段, 那就是...
    琚家小颖颖阅读 217评论 0 1