将SQL列中的分隔值拆分为多行

时间:2012-06-13 15:17:16

标签: sql sql-server sql-server-2008 tsql sql-server-2005

我真的很喜欢这里的一些建议,提供一些背景信息我正在使用将Exchange 2007中的邮件跟踪日志插入SQL。由于我们每天有数百万行,所以我使用Bulk Insert语句将数据插入到SQL表中。

实际上我实际上是Bulk Insert到一个临时表,然后从那里我将数据合并到实时表中,这是用于测试解析问题,因为某些字段否则会有引号等值。

这很有效,但收件人地址列是由a分隔的分隔字段的事实除外;角色,有时可能会非常长,因为可能有很多电子邮件收件人。

我想取这个列,然后将值拆分成多行,然后将这些行插入到另一个表中。问题是我想要的是要么花太长时间,要么不按我想要的方式工作。

以此示例数据:

message-id                                              recipient-address
2D5E558D4B5A3D4F962DA5051EE364BE06CF37A3A5@Server.com   user1@domain1.com
E52F650C53A275488552FFD49F98E9A6BEA1262E@Server.com     user2@domain2.com
4fd70c47.4d600e0a.0a7b.ffff87e1@Server.com              user3@domain3.com;user4@domain4.com;user5@domain5.com

我希望在我的收件人表格中将其格式化为:

message-id                                              recipient-address
2D5E558D4B5A3D4F962DA5051EE364BE06CF37A3A5@Server.com   user1@domain1.com
E52F650C53A275488552FFD49F98E9A6BEA1262E@Server.com     user2@domain2.com
4fd70c47.4d600e0a.0a7b.ffff87e1@Server.com              user3@domain3.com
4fd70c47.4d600e0a.0a7b.ffff87e1@Server.com              user4@domain4.com
4fd70c47.4d600e0a.0a7b.ffff87e1@Server.com              user5@domain5.com

有没有人对我如何做到这一点有任何想法?

我非常了解PowerShell,所以我尝试了这一点,但即使在28K记录上的foreach循环也需要永久处理,我需要能够尽可能快速/高效地运行的东西。

谢谢!

4 个答案:

答案 0 :(得分:45)

首先,创建一个分割函数:

CREATE FUNCTION dbo.SplitStrings
(
    @List       NVARCHAR(MAX),
    @Delimiter  NVARCHAR(255)
)
RETURNS TABLE
AS
    RETURN (SELECT Number = ROW_NUMBER() OVER (ORDER BY Number),
        Item FROM (SELECT Number, Item = LTRIM(RTRIM(SUBSTRING(@List, Number, 
        CHARINDEX(@Delimiter, @List + @Delimiter, Number) - Number)))
    FROM (SELECT ROW_NUMBER() OVER (ORDER BY s1.[object_id])
        FROM sys.all_objects AS s1 CROSS APPLY sys.all_objects) AS n(Number)
    WHERE Number <= CONVERT(INT, LEN(@List))
        AND SUBSTRING(@Delimiter + @List, Number, 1) = @Delimiter
    ) AS y);
GO

现在你可以简单地推断:

SELECT s.[message-id], f.Item
  FROM dbo.SourceData AS s
  CROSS APPLY dbo.SplitStrings(s.[recipient-address], ';') as f;

另外我建议不要在列名中添加短划线。这意味着您必须将它们放在[square brackets]

答案 1 :(得分:3)

SQL Server 2016包含一个新的表函数string_split(),类似于以前的解决方案。

唯一的要求是将兼容级别设置为130(SQL Server 2016)

答案 2 :(得分:1)

您可以使用CROSS APPLY(在SQL Server 2005及更高版本中可用)和STRING_SPLIT函数(在SQL Server 2016及更高版本中可用):

DECLARE @delimiter nvarchar(255) = ';';

-- create tables
CREATE TABLE MessageRecipients (MessageId int, Recipients nvarchar(max));
CREATE TABLE MessageRecipient (MessageId int, Recipient nvarchar(max));

-- insert data
INSERT INTO MessageRecipients VALUES (1, 'user1@domain.com; user2@domain.com; user3@domain.com');
INSERT INTO MessageRecipients VALUES (2, 'user@domain1.com; user@domain2.com');

-- insert into MessageRecipient
INSERT INTO MessageRecipient
SELECT MessageId, ltrim(rtrim(value))
FROM MessageRecipients 
CROSS APPLY STRING_SPLIT(Recipients, @delimiter)

-- output results
SELECT * FROM MessageRecipients;
SELECT * FROM MessageRecipient;

-- delete tables
DROP TABLE MessageRecipients;
DROP TABLE MessageRecipient;

结果:

MessageId   Recipients
----------- ----------------------------------------------------
1           user1@domain.com; user2@domain.com; user3@domain.com
2           user@domain1.com; user@domain2.com

MessageId   Recipient
----------- ----------------
1           user1@domain.com
1           user2@domain.com
1           user3@domain.com
2           user@domain1.com
2           user@domain2.com

答案 3 :(得分:0)

对于 table = "yelp_business",将由 categories 分隔的列 ; 值拆分为行并显示为 category 列。

SELECT unnest(string_to_array(categories, ';')) AS category
   FROM yelp_business;