LONG数据类型的每次提交行

2020-09-14 08:21发布

         点击此处--->   EasySAP.com群内免费提供SAP练习系统(在群公告中)

加入QQ群:457200227(SAP S4 HANA技术交流) 群内免费提供SAP练习系统(在群公告中)


嗨,当您尝试迁移数据时,正处于警告之下,并且迁移时间更长。

警告:由于表包含LONG或BLOB列,表加载器的每次提交行已被重置为1。

我进行了搜索,但未找到任何解决方案。

这导致延迟。 我已经将数据加载到DEV。 因为在DEV环境中,时间无关紧要,但我的关注点已转移到PROD。

数据库:MySQL AWS。

SAP DS:14.2.4

我们有大量数据要迁移。

请帮助。

         点击此处--->   EasySAP.com群内免费提供SAP练习系统(在群公告中)

加入QQ群:457200227(SAP S4 HANA技术交流) 群内免费提供SAP练习系统(在群公告中)


嗨,当您尝试迁移数据时,正处于警告之下,并且迁移时间更长。

警告:由于表包含LONG或BLOB列,表加载器的每次提交行已被重置为1。

我进行了搜索,但未找到任何解决方案。

这导致延迟。 我已经将数据加载到DEV。 因为在DEV环境中,时间无关紧要,但我的关注点已转移到PROD。

数据库:MySQL AWS。

SAP DS:14.2.4

我们有大量数据要迁移。

请帮助。

付费偷看设置
发送
7条回答
蓋茨
1楼-- · 2020-09-14 08:54

你好拉克什曼。

您将找不到任何解决方案,因为这不是问题。 这就是DS的工作方式,我能想到的原因是每一行都存储在缓冲区中,并且当达到每次提交的行数限制时,它将提交到数据库。 Long和LOB类型的行将已经很大,并且使其在缓冲区中堆积会影响系统,该系统在生产中可能正在运行1000个作业,因此默认值为1。

从未使用过MySQL,但请检查其中是否有批量加载选项。 我读到一些过去的资料,如果我们使用批量加载器,可以解决这种数据类型加载性能问题。

关于。 S

南山jay
2楼-- · 2020-09-14 08:34

如我所料,BODS给我的超时错误如下。 超时设置为更大的数字(8小时)绝对不是MySQL RDS问题。

38207520DBS-0704018/17/2018 1:02:26 PM |数据流DF_abc |阅读器Q_xyz ODBC数据源操作的错误消息:<[MySQL] [ODBC 8.0(w)驱动程序] [ mysqld-5.7.19-log]在查询期间与MySQL服务器的连接丢失。

MySQL超时:显示变量,如'%_timeout';

'connect_timeout','10''delayed_insert_timeout','300''have_statement_timeout','YES''innodb_flush_log_at_timeout','1',innodb_lock_wait_timeout,'50','innodb_rollback_on_timeout','OFF','interactive 28800''lock_wait_timeout','31536000''net_read_timeout','30''net_write_timeout','60''rpl_stop_slave_timeout','31536000''slave_net_timeout','60''wait_timeout','28800'

Dirk Venken

Aasavari Bhave

何必丶何苦呢
3楼-- · 2020-09-14 08:51

select col1,max(length (col1))from table1;

18,726,618-XML数据

根据本文的建议,基于最大长度,我什至无法通过Query_Transform使用Varchar

Jessie Wu Ravi kiran Pagidi

感谢您的帮助。

我的源和目标都是AWS上的mySQL 5.7。

d56caomao
4楼-- · 2020-09-14 08:59

DS尚不支持MySQL 5.7。

CPLASF-自律
5楼-- · 2020-09-14 08:36

谢谢Dirk

我知道DS尚不支持MySQL 5.7

,但问题并不是5.7的新问题。 正确吗?

Doze时光
6楼-- · 2020-09-14 08:42

感谢您的回复,Shazin。

在Google上进行了大量研究后,甚至我也认为没有解决方案。 这就是BODS的工作方式。

是的,甚至我也读过一些文章并建议使用Bulk loader,但我看不到该选项。 不知道为什么。

一周热门 更多>