今天项目测试,中间库使用工具kettle,但是在往mysql库推数据的时候报了两个错误:

错误一:Incorrect string value: '\xF0\x9F\x91\x80' for column 

            -- 问题一解决方法:添加参数解决。

错误二:Unable to get database metadata from this database connection

            -- 问题二解决方法:1、清空缓存;2、检查数据连接及字段映射是否正确。

根据报错应该是数据类型的错误,记得之前使用kettle的时候,添加过连接数据源的选项,经过多次编码测试终于成功,直接贴出正确的,遇到类似的问题可以一试:

1、打开DB连接,看到左边的:高级和选项

2、点击高级,在右下框中输入 : set names utf8mb4;

    【网上很多说改成:set names utf8; 但我的不行,改成utf8mb4才可以,可能是因为数据格式的问题,自己对比差异

3、点击选项,输入三行(命名参数填左边的,值填右边的)

 defaultFetchSize     500
useCursorFetch       true
characterEncoding   utf8

提升读取插入数据的速度:

如果上面三个参数无法提速,可以在选项页添加下面三个参数:

useServerPrepStmts=false
rewriteBatchedStatements=true
useCompression=true

(具体情况可能还要根据自己使用的库的编码而定,这里只是提供一下参考,如果不能解决,可以根据自己的数据库编码多尝试不同的编码)

最后保存,清空缓存,最好重启一下,我清空缓存还是报了错误,复制了那张表就成功了。然后清空缓存,重启一下,原来报错的表也没问题了。

小问题也花了好长时间,不知这样对不对,问题解决了,先记录一下。

----以上----

寻找 管什么日月星辰;

跋涉 分什么春夏秋冬;

Logo

更多推荐