Excel in SSIS：当DT_NTEXT导致失败时，如何导入可能超过255个字符的列？

Question

好的，所以我的最新项目需要将 Excel 2007 电子表格加载到 SQL Server 表中。我在 SSIS 2008R2 中工作。根据我在互联网上找到的一些东西，我在高级编辑器中打开 Excel 源并将长列的数据类型更改为 DT_NTEXT，这样它就不会截断它。然后我创建了数据库列 VARCHAR(MAX)。这在我的笔记本电脑上以调试模式正确运行。

然后我将它部署到开发服务器并尝试加载相同的测试文件。它失败并显示以下错误消息：

Error: Code: 0xC0208265
       Source: Main Data Flow Task Get Main Data [1]
       Description: Failed to retrieve long data for column "DESCR".
End Error
Error: Code: 0xC020901C
       Source: Main Data Flow Task Get Main Data [1]
       Description: There was an error with output column "DESCR" (72) on output "Excel Source Output" (9). The column status returned was: "DBSTATUS_UNAVAILABLE".
End Error
Error: Code: 0xC0209029
       Source: Main Data Flow Task Get Main Data [1]
       Description: SSIS Error Code DTS_E_INDUCEDTRANSFORMFAILUREONERROR.  The "output column "DESCR" (72)" failed because error code 0xC0209071 occurred, and the error row disposition on "output column "DESCR" (72)" specifies failure on error. An error occurred on the specified object of the specified component.  There may be error messages posted before this with more information about the failure.
End Error

搜索有关错误的信息，我发现大约一百万个站点提供相同的三个建议解决方案：

1. 将'IMEX=1'添加到连接字符串的扩展属性中。
   它已经在那里了。

2. 更改注册表中的 TypeGuessRows 键。
   这在服务器上设置为零，我理解这意味着它应该查看整个文件。不过，我将其更改为 8 以匹配我的笔记本电脑。再次运行时出现了同样的错误。然后我将其更改为 1,763，这比电子表格中的行数多。它仍然给出了同样的错误。所以，我把它归零。 （在我的测试文件的第一行有一个 1,900 个字符的值，所以在这种情况下，它检查多少并不重要。）

3. 在源中将数据类型更改为 DT_WSTR(4000)。
   该列应该最多包含 10,000 个字符，所以我不确定这是否是个好主意，即使它有效。不过，我还是试过了。这次它给了我一个截断错误。我将截断错误处置更改为“忽略失败”并加载数据，但将值截断为 255 个字符。我已验证长度为 4000，并且在我保存文件时没有更改，但它仍然被截断为 255 个字符。

我不知道还能看什么。任何帮助将不胜感激。

更新 1 月 29 日：该包没有任何更改，在预生产服务器上运行时可以正常工作。在开发服务器上运行时仍然失败。两台服务器都具有相同版本的 SSIS（包括次要版本号）以及相同版本的 Windows、Access 和 Excel。我不知道如何解释这一点，也不知道如何判断它是否适用于生产环境。

Answer 1

我创建了一个具有类似非功能需求（Excel 2007 文件、SSIS 2008、SQL Server 2008 R2、VARCHAR(MAX) 目标列）的新包，在部署到数据库服务器后它工作得很好。我的包裹：

1. Excel 源组件输出的元数据（使用高级编辑器检查）：DT_NTEXT
2. 使用（DT_TEXT，1252）从 unicode 转换为非 unicode 的源和目标之间的派生列组件
3. OLE DB 目标组件输入的元数据（使用高级编辑器检查）：DT_TEXT
4. 目标列数据类型：VARCHAR(MAX)
5. 我没有在连接中明确使用扩展属性 IMEX

通过右键单击数据库服务器上的包来执行，并将每条记录几千个字符的文件加载到表中而不会被截断。希望这有帮助

Answer 2

我在导入一个字段包含超过 255 个字符的 excel 文件时遇到了这个问题。我用 Python 解决了这个问题。

简单地说，将 excel 导入 pandas 数据框中，然后计算每行每个字符串值的长度。

然后，按降序对数据框进行排序。这将使 SSIS 在扫描前 3 行以分配存储时为该字段分配最大空间：

df = pd.read_excel(f,sheet_name=0,skiprows = 1)
df = df.drop(df.columns[[0]], axis = 1)
df['length'] = df['Item Description'].str.len()
df.sort_values('length', ascending=False, inplace=True)
writer = ExcelWriter('Clean/Cleaned_'+f[5:])
df.to_excel(writer,sheet_name='Billing',index=False)
writer.save()