首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

MySQL5.7中使用GROUP_CONCAT数据截断的问题

前天在生产环境中遇到一个问题:使用GROUP_CONCAT函数select出来的数据截断了,最长长度不超过1024字节,开始还以为是navicat客户端自身对字段长度做了限制的问题。...然后想到1024这个熟悉的数字,会不会是C++框架在接收MySQL通过socket传输过来的数据时处理了呢?于是手工在日志中打印这个字段,发现即使数据长度超过1024字节仍然是可以完整显示的。...1 查找原因 至此,只能从SQL语句出发了。网上搜了下GROUP_CONCAT数据截断的问题,答案都指向了group_concat_max_len这个参数,它的默认值正好是1024。...2 解决问题 只要调整group_concat_max_len到最大值就行了,官方在MySQL5.7的手册中给出了如下定义: 由于BZ的测试虚拟机MySQL5.7.19是64位的,所以可以通过下面这两种方法配置好...中使用GROUP_CONCAT数据截断的问题。

13810
您找到你想要的搜索结果了吗?
是的
没有找到

MYSQL 清空表和截断

清空表和截断表 清空表:delete from users; 清空表只是清空表中的逻辑数据,但是物理数据不清除,如主键值、索引等不被清除,还是原来的值。...截断表:truncate table users; 截断表可以用于删除表中 的所有数据。截断表命令还会回收所有索引的分配页。...截断表的执行速度与不带where子句的delete(删除)命令相同,甚至比它还要快。...delete(删除)一次删除一行数据,并且将每一行被删除的数据都作为一个事务记录日志;而truncate (截断)表则回收整个数据页,只记录很少的日志项。...delete(删除)和truncate(截断)都会回收数据占用的空间,以及相关的索引。只有表的 拥有者可以截断表。 另外,truncate表之后,如果有自动主键的话,会恢复成默认值。

5.1K10

MySQL 8.0.21中UNDO截断的改进

作者:Kevin Lewis 译:徐轶韬 UNDO表空间可以在MySQL 8.0中隐式或显式截断。两种方法使用相同的机制。当UNDO表空间截断完成时,可能导致非常繁忙的系统上的定期停顿。...此问题已在MySQL 8.0.21中修复。 首先,让我们了解可用于防止UNDO表空间过大的两种方法。 隐式截断 默认情况下,隐式方法在MySQL 8.0中为ON。...’; 详细内容请参阅在线手册https://dev.mysql.com/doc/refman/8.0/en/innodb-undo-table和一个博客文章https://mysqlserverteam.com...因此,在MySQL 8.0.21中,在删除了关联的撤消数据文件之后,InnoDB现在将那些页面留在缓冲池中。InnoDB知道这些页面用于已删除的表空间ID。由于页面变得很少使用,它们将被动释放。...每次UNDO表空间截断时,它都会获得一个新的ID,该ID以循环方式分配。

1.2K30

SQL Server 2012事务日志截断、回绕与收缩

例如:在使用DPM备份SQL server的时候,如果进行完整备份,则不会截断日志,但是如果使用完整+事物日志的备份方式就可以截断事物日志。 ?...新日志记录添加到逻辑日志的末端,然后向物理日志的末端扩张。日志截断将释放记录全部在最小恢复日志序列号 (MinLSN) 之前出现的所有虚拟日志。...截断事务日志 截断是对SQL逻辑日志的一个清除过程,清除非活动的逻辑事务日志。...,他表示当有新的日志记录进来时,这些空间可以再次利用,所以截断日志并不会减小物理日志文件的大小,只是清理了里面的一些内容,以便新的日志记录可以进来,SQL总是以循环链表的方式使用物理日志文件的,当逻辑日志增长到物理日志文件的尽头时...,他会循环到日志文件的首部搜索截断而释放出来的空间,如果这个时候没有空间的话,说明物理日志已经用完了,就得增加物理日志的大小,如果磁盘也用尽了,系统就会返回一个错误提示。

4.2K60

MySQL | 使用 limit 优化查询和防止SQL优化

-- Table of Contents 查询优化1.1 最大值和最小值的优化1.2 优化 limit 分页1.2.1 使用关联查询优化1.2.2 使用范围查询1.2.3 利用唯一自增序列进行查询防止优化参考...查询优化 1.1 最大值和最小值的优化 对于 MIN() 和 MAX() 查询,MySQL 的优化做的并不是太好,例如 select MIN(id) FROM film where name = '西游记...1.2 优化 limit 分页 在系统进行分页操作的时候,当偏移量大时,例如:limit 10000,20 时,MySQL 需要查询 10020 条记录然后只返回 20 记录,前面的记录全部舍弃,这样的代价非常高...select * from film where id > sid limit pageSize 当查第一页的时候,sid 传入 0 即可,查第二页的时候,传入获取第一页时最后得到 id 即可 防止优化...在写 SQL 的时候,除了要考虑优化 SQL 降低执行时间外,有时还要防止 SQL MySQL 本身给你优化掉,造成执行结果和你想象的不一样。

1.3K20

MySQL 8.0不再担心垃圾SQL搞爆内存

MySQL 8.0.28引入的新功能 MySQL 8.0.28开始,新增一个特性,支持监控统计并限制各个连接(会话)的内存消耗,避免大量用户连接因为执行垃圾SQL消耗过多内存,造成可能OOM kill...如果线上经常运行垃圾SQL导致MySQL内存消耗过大的话,可以适当调低这个选项。 如何在评估一条SQL可能要消耗多少内存呢?...当执行完这条SQL后,我们再次查询状态变量 Global_connection_memory,会发现它的值并没这么大,说明这条SQL执行完毕后,相应的内存也立即释放,只保留维持会话连接所需的基本内存:...才会受到内存使用上限约束,如果是用root用户执行同一条SQL,则不受限制: mysql> select user(); +----------------+ | user() | +-...,避免OOM kill。

1K40

MySQL 8.0不再担心垃圾SQL搞爆内存

MySQL 8.0.28引入的新功能 MySQL 8.0.28开始,新增一个特性,支持监控统计并限制各个连接(会话)的内存消耗,避免大量用户连接因为执行垃圾SQL消耗过多内存,造成可能OOM kill...如果线上经常运行垃圾SQL导致MySQL内存消耗过大的话,可以适当调低这个选项。 如何在评估一条SQL可能要消耗多少内存呢?...当执行完这条SQL后,我们再次查询状态变量 Global_connection_memory,会发现它的值并没这么大,说明这条SQL执行完毕后,相应的内存也立即释放,只保留维持会话连接所需的基本内存:...才会受到内存使用上限约束,如果是用root用户执行同一条SQL,则不受限制: mysql> select user(); +----------------+ | user() | +-...,避免OOM kill。

69130

0791-5.13.1-Hive视图执行show create table截断异常分析

异常重现 当对Hive的VIEW执行SHOW CREATE TABLE时,结果输出只有部分,会被截断,这个表现在Hue,Beeline以及Hive CLI中都会存在,如下所示。 1.通过Hue ?...从CDH5.13.1开始,Hive在保存元数据信息到数据库MySQL之前,会删掉空格,所以不会出现该问题。...要解决该问题,需要更新Hive元数据库中的信息,具体操作如下: 1.停止Hive服务,这样阻止了对Hive元数据库的后续操作; 2.使用mysqldump命令将整个MySQL数据库dump成文本文件;...3.使用文本编辑器将TBLS表中所有“tab”替换为空格; 4.直接drop掉MySQL中旧的Hive元数据库; 5.使用修改好的dump文件加载到新创建的Hive元数据库中; 6.重启服务然后检查是否问题修复

1.6K40

Mysql插入超过长度字符串会发生什么

为 一、问题说明 一朋友线上用的mysql5.6.17,sql_mode配的STRICT_TRANS_TABLES,这个配置的具体含义就不在这里说明了,这个是比较严格的模式; 有一天发生一个奇怪的问题...可以看到sql1失败报太长了,sql2执行成功,但只有一个警告。...; default: return 0; } } 因为传递的是MY_SEQ_SPACES,所以这里会判断my_isspace是否空格,如果是由跳过,因此尾部是空格由会跳过,即认为不会超过长度...三、总结 1、varchar字段mysql内部用Field_varstring表示,插入时mysql会调用字段的store方法进行数据复制; 2、Field_varstring继承Field_longstr...并调用report_if_important_data来检查数据长度; 3、report_if_important_data调用test_if_important_data来检查是否超过长度,后者会根据每种字符集来做处理

3.5K20
领券