Linuxeden开源社区
发版日期：2023 年 8 月 28 日
TiDB 版本：6.5.4
兼容性变更
改进提升
- TiDB
- TiKV
- PD
- TiFlash
- Tools
- Backup & Restore (BR)
- TiCDC
- 优化 TiCDC 在故障重试时的状态展示信息 #9483 @asddongmen
- 优化同步到 Kafka 时对超过限制的消息的处理方式，支持只发送主键到下游 #9574 @3AceShowHand
- Storage Sink 支持对 HEX 格式的数据进行十六进制编码输出，使其兼容 AWS DMS 的格式规范 #9373 @CharlesCheung96
- TiDB Data Migration (DM)
- Dumpling
错误修复
- TiDB
- 修复下推
STREAM_AGG()算子时，可能报错index out of range的问题 #40857 @Dousir9 - 修复
CREATE TABLE语句包含子分区定义时，TiDB 会忽略所有分区信息创建出普通表的问题 #41198 #41200 @mjonss - 修复
stale_read_ts设置不正确可能导致PREPARE stmt读数据不正确的问题 #43044 @you06 - 修复 ActivateTxn 可能出现数据竞争的问题 #42092 @hawkingrei
- 修复 batch client 重连不及时的问题 #44431 @crazycs520
- 修复 SQL compile 报错的日志未脱敏的问题 #41831 @lance6716
- 修复同时使用 CTE 和关联子查询可能导致查询结果出错或者 panic 的问题 #44649 #38170 #44774 @winoros @guo-shaoge
- 修复 TTL 任务不能及时触发统计信息更新的问题 #40109 @YangKeao
- 修复 GC resolve lock 可能错过一些悲观锁的问题 #45134 @MyonKeminta
- 修复 memory tracker 潜在的泄露问题 #44612 @wshwsh12
- 修复
INFORMATION_SCHEMA.DDL_JOBS表中QUERY列的数据长度可能超出列定义的问题 #42440 @tiancaiamao - 修复使用
Prepare或Execute查询某些虚拟表时无法将表 ID 下推，导致在大量 Region 的情况下 PD OOM 的问题 #39605 @djshow832 - 修复在为分区表添加新的索引之后，该分区表可能无法正确触发统计信息的自动收集的问题 #41638 @xuyifangreeneyes
- 修复极端情况下，统计 SQL execution detail 的信息占用太多内存导致 TiDB OOM 的问题 #44047 @wshwsh12
- 修复 batch coprocessor 重试时可能会生成错误 Region 信息导致查询失败的问题 #44622 @windtalker
- 修复带
indexMerge的查询被 kill 时可能会卡住的问题 #45279 @xzhangxian1008 - 修复某些情况下查询系统表
INFORMATION_SCHEMA.TIKV_REGION_STATUS返回结果错误的问题 #45531 @Defined2014 - 修复当开启
tidb_enable_parallel_apply时，MPP 模式下的查询结果出错的问题 #45299 @windtalker - 修复开启
tidb_opt_agg_push_down时查询可能返回错误结果的问题 #44795 @AilinKid - 修复由虚拟列引发的
can't find proper physical plan问题 #41014 @AilinKid - 修复
processInfo为空导致的 panic 问题 #43829 @zimulala - 修复
SELECT CAST(n AS CHAR)语句中的n为负数时，查询结果出错的问题 #44786 @xhebox - 修复当使用 MySQL 的 Cursor Fetch 协议时，结果集占用的内存超过
tidb_mem_quota_query的限制导致 TiDB OOM 的问题。修复后，TiDB 会自动将结果集写入磁盘以释放内存资源 #43233 @YangKeao - 修复通过 BR 恢复
AUTO_ID_CACHE=1的表时，会遇到duplicate entry报错的问题 #44716 @tiancaiamao - 修复当分区表定义中使用了
FLOOR()函数对分区列进行取整时SELECT语句返回错误的问题 #42323 @jiyfhust - 修复并发视图模式可能会造成 DDL 操作卡住的问题 #40352 @zeminzhou
- 修复收集统计信息任务因为错误的
datetime值而失败的问题 #39336 @xuyifangreeneyes - 修复集群的 PD 节点被替换后一些 DDL 语句会卡住一段时间的问题 #33908
- 修复 resolve lock 在 PD 时间跳变的情况下可能卡住的问题 #44822 @zyguan
- 修复 index scan 中可能存在的数据竞争问题 #45126 @wshwsh12
- 修复对于过长的 SQL 输入，
FormatSQL()方法无法正常截断的问题 #44542 @hawkingrei - 修复即使用户没有权限，也能查看
INFORMATION_SCHEMA.TIFLASH_REPLICA表信息的问题 #45320 @Lloyd-Pottiger - 修复
DATETIME或TIMESTAMP列与数字值比较时，行为与 MySQL 不一致的问题 #38361 @yibin87 - 修复 Index Join 出错可能导致查询卡住的问题 #45716 @wshwsh12
- 修复 kill 连接之后可能会出现 go coroutine 泄露的问题 #46034 @pingyu
- 修复
tmp-storage-quota配置无法生效的问题 #45161 #26806 @wshwsh12 - 修复集群中有 TiFlash 节点宕机时，TiFlash 副本可能不可用的问题 #38484 @hehechen
- 修复并发读写
Config.Lables时可能出现数据竞争导致 TiDB crash 的问题 #45561 @genliqi
- 修复下推
- TiKV
- 修复
ttl-check-poll-interval配置项对 RawKV API V2 不生效的问题 #15142 @pingyu - 修复 Online Unsafe Recovery 超时未中止的问题 #15346 @Connor1996
- 修复在执行
FLASHBACK后 Region Merge 可能被阻塞的问题 #15258 @overvenus - 修复当一个 TiKV 节点被隔离而另一个节点重启时，可能导致读取不一致的问题 #15035 @overvenus
- 修复自适应同步模式下 sync-recover 阶段 QPS 下降到 0 的问题 #14975 @nolouch
- 修复部分写入时加密可能导致数据损坏的问题 #15080 @tabokie
- 减少 Store 心跳重试次数，修复心跳风暴的问题 #15184 @nolouch
- 修复当待处理的数据整理字节数较高时流量控制可能无效的问题 #14392 @Connor1996
- 修复 PD 和 TiKV 之间的网络中断可能导致 PITR 卡住的问题 #15279 @YuJuncen
- 修复在启用了 TiCDC 的 Old Value 功能时，TiKV 可能会使用更多内存的问题 #14815 @YuJuncen
- 修复
- PD
- 修复当 etcd 已经启动，但 client 尚未连接上 etcd 时，调用 client 会导致 PD panic 的问题 #6860 @HuSharp
- 修复 leader 长时间无法退出的问题 #6918 @bufferflies
- 修复 Placement Rule 在使用
LOCATION_LABLES时，SQL 和 Rule Checker 不兼容的问题 #38605 @nolouch - 修复 PD 可能会非预期地向 Region 添加多个 Learner 的问题 #5786 @HunDunDM
- 修复在 rule checker 选定 peer 时，unhealthy peer 无法被移除的问题 #6559 @nolouch
- 修复
unsafe recovery中失败的 learner peer 在auto-detect模式中被忽略的问题 #6690 @v01dstar
- TiFlash
- 修复在更改
DATETIME、TIMESTAMP、TIME数据类型的fsp之后查询失败的问题 #7809 @JaySon-Huang - 修复由于 Region 的边界的 Key 不合法导致 TiFlash 数据不一致的问题 #7762 @lidezhu
- 修复当同一个 MPP Task 内有多个 HashAgg 算子时，可能导致 MPP Task 编译时间过长而严重影响查询性能的问题 #7810 @SeaRise
- 修复 TiFlash 在使用 Online Unsafe Recovery 之后重启时间过长的问题 #7671 @hongyunyan
- 修复 TiFlash 在进行除法运算时对
DECIMAL结果 round 进位错误的问题 #6462 @LittleFall
- 修复在更改
- Tools
- Backup & Restore (BR)
- 将 BR 使用的全局参数
TableColumnCountLimit和IndexLimit的默认值提升到最大值，修复恢复过程失败的问题 #45793 @Leavrth - 修复 PITR 中处理 DDL meta 信息时 rewrite 出错的问题 #43184 @Leavrth
- 修复 PITR 执行中没有检查函数返回而导致 panic 的问题 #45853 @Leavrth
- 修复当使用非 Amazon S3 而是其他 S3 兼容的存储时，获取无效 region ID 的问题 #41916 #42033 @3pointer
- 修复 RawKV 模式下细粒度备份阶段可能出错的问题 #37085 @pingyu
- 修复当 TiDB 集群不存在 PITR 备份任务时，
resolve lock频率过高的问题 #40759 @joccau - 缓解了 Region leadership 迁移导致 PITR 日志备份进度延迟变高的问题 #13638 @YuJuncen
- 将 BR 使用的全局参数
- TiCDC
- 修复下游发生故障重试时同步任务可能卡住的问题 #9450 @hicqu
- 修复同步到 Kafka 时重试间隔过短导致同步任务失败的问题 #9504 @3AceShowHand
- 修复在上游同一个事务中修改多行唯一键场景下，TiCDC 可能导致同步写冲突的问题 #9430 @sdojjy
- 修复可能无法正确同步 rename DDL 操作的问题 #9488 #9378 #9531 @asddongmen
- 修复下游发生短时间故障导致同步任务卡住的问题 #9542 #9272#9582 #9592 @hicqu
- 修复在 TiCDC 节点状态发生改变时可能引发的 panic 问题 #9354 @sdojjy
- 修复当 Kafka Sink 遇到错误时可能会无限阻塞同步任务推进的问题 #9309 @hicqu
- 修复当下游为 Kafka 时，TiCDC 查询下游的元信息频率过高导致下游负载过大的问题 #8957 #8959 @hi-rustin
- 修复 TiCDC 部分节点发生网络隔离时可能引发的数据不一致问题 #9344 @CharlesCheung96
- 修复在打开 redo log 且下游出现异常时可能会导致同步任务卡住的问题 #9172 @CharlesCheung96
- 修复由于 PD 短暂不可用而导致同步任务报错的问题 #9294 @asddongmen
- 修复同步到 TiDB 或 MySQL 场景下，频繁设置下游双向复制相关变量导致下游日志过多的问题 #9180 @asddongmen
- 修复对默认
ENUM值编码错误的问题 #9259 @3AceShowHand
- TiDB Data Migration (DM)
- TiDB Lightning
- 修复当存在正在导入数据的 engine 时 disk quota 检查可能阻塞的问题 #44867 @D3Hunter
- 修复当目标集群启用 SSL 时 checksum 报错
Region is unavailable的问题 #45462 @D3Hunter - 修复无法正确输出编码错误的问题 #44321 @lyzx2001
- 修复导入 CSV 数据时，route 可能 panic 的问题 #43284 @lyzx2001
- 修复逻辑导入模式下导入 A 表时可能误报 B 表不存在的问题 #44614 @dsdashun
- 修复保存
NEXT_GLOBAL_ROW_ID时类型错误问题 #45427 @lyzx2001 - 修复
checksum = "optional"时 Checksum 阶段仍然报错的问题 #45382 @lyzx2001 - 修复当 PD 集群地址变更时数据导入失败的问题 #43436 @lichunzhu
- 修复部分 PD 节点失败导致数据导入失败的问题 #43400 @lichunzhu
- 修复当表使用
AUTO_ID_CACHE=1且使用自增列时，ID 分配器 base 值错误的问题 #46100 @D3Hunter
- Dumpling
- TiDB Binlog
- Backup & Restore (BR)