当前位置:网站首页>环境:Flink版本:1.15.1jar包:flink-sql-connector-oracle
环境:Flink版本:1.15.1jar包:flink-sql-connector-oracle
2022-08-09 18:25:00 【阿里云问答】
环境: Flink版本:1.15.1 jar包:flink-sql-connector-oracle-cdc-2.2.1.jar OS版本:CentOS7.6 源Oracle:版本11.2.0.4
在flink sql客户端创建好source表之后,简单使用select 查询,因为Oracle源表有lob字段,这个应该是存储的lob字段太大导致报错,尝试了另外一张表也有lob字段,但是读取时正常的,报错信息如下: [ERROR] Could not execute SQL statement. Reason: java.lang.RuntimeException: Record size is too large for CollectSinkFunction. Record size is 2421996 bytes, but max bytes per batch is only 2097152 bytes. Please consider increasing max bytes per batch value by setting collect-sink.batch-size.max
看提示应该是修改一下参数 collect-sink.batch-size.max 即可,但是我没有找到这个参数是在哪里设置的,求大神指点,感谢。
采纳答案1:
单条记录太大,collect-sink需要配置下这个参数,直接在sql client set就行了(此答案整理自Flink CDC 社区)
边栏推荐
猜你喜欢
随机推荐
网络安全:常见的网络协议
awk use
YOLO v3 source, rounding
Qt 5.12 LTS 部署
全自动化机器学习建模!效果吊打初级炼丹师!
[免费专栏] Android安全之Root检测和绕过(浅析)
优秀的 Verilog/FPGA开源项目介绍(三十一)- OFDM
数据库注入提权总结(一)
Flink运行架构
哈希表
与同步传递相关的获取-释放序列
2022.08.05_每日一题
Win10系统80端口被占用的解决方法
Flink on Yarn
golang单元测试:testing包的基本使用
YOLO v3源码详解
三面(技术 +HR 面试)网易,分享我的面试经验!(已拿 offer)
16 张图解 | 淘宝 10年架构演进
Sublime Text如何安装Package Control
国产抗新冠口服药每瓶不超300元/ 我国IPv6网络全面建成/ 谷歌入局折叠屏手机...今日更多新鲜事在此...