工作中遇到一个查询很慢的情况，环境如下： 开发语言：JAVA 数据库：MySQL 数据量：1600~1800 问题：查询200条时就很慢，是慢在IO上： 如果是查全部(一千六百多条)，就更慢了，几乎四十秒还没有返回...： 原因：数据表中有个longtext字段： 优化思路：数据库中不存longtext字段，新增blob字段，将文本在后端压缩为bytep[]存到blob二进制字段中，查询时返回。...数据流图： blob字段： 后端使用Zip压缩算法，使用java.util.zip包下的DeflaterOutputStream和InflaterOutputStream，压缩文本再保存。...，然后把原表拷贝到两张表，一张表保留longtext字段，一张表保留blob字段，查询比对如下： 说明blob字段IO速度比long text字段IO速度快很多。...注：这种方式就是不存原文本内容，弊端就是无法做对文本的搜索功能，如果要求要对文本做搜索，或者保留为文档到ES中，建议把content字段拆出来一张表和主表关联，也是保存和查询需要处理一下。
我们知道倒序输出是很简单的 select * from table order by id desc 直接这样就可以 那么现在的问题在于日期字段怎么来倒序输出 这里我们用到cast()来将指定的字段转换为我们需要的类型...经过查阅资料得知类型的转换有两种方式 1.cast()方法 2.convert()方法 使用格式 1.cast(字段名 as 数据类型) 如上述sql语句 cast(date as datetime)...2.convert(字段名,数据类型) 例：convert(da,datetime) 记录下来，留待后查，也方便别人。
在编写 Dockerfile 时，遇到过几次文件权限的问题，每次都需要查询，总是记不住，整理一篇文章记录在这里。...20d23117c700e59f1793dd2fddecfa9bdb01085f entrypoint.sh 040000 tree 7bf219dd6874e144f7801fe4ba4e9e5655ad9c4e yapi 修改文件权限 在 Git 版本记录中...，关于文件权限部分，由于在不同的系统中的各种特性，Git 仅记录了文件的执行权限，也就是不记录 文件所有者和所属组的变更。...在 Linux 和 Mac 中，可以很方便的对文件权限进行变更，和追踪： chmod +x entrypoint.sh 然后 git status 进行变更查看，再 git add entrypoint.sh...忽略文件权限 但是，有很多时候我们并不需要过多关注文件权限，特别是部署时会重置文件权限的情况，在开发时由于各环境不同，总是有文件权限的冲突，此时，我们可以忽略文件变更追踪。
背景因为Android应用市场要求是最低要求API 30以上，我准备就直接从API 28升到API 33了，其中遇到了一些读写存储空间的问题，这里做一些记录总结~相关权限：permission.READ_EXTERNAL_STORAGEpermission.WRITE_EXTERNAL_STORAGEpermission.MANAGE_EXTERNAL_STORAGEpermission.READ_MEDIA_VIDEOpermission.READ_MEDIA_IMAGESpermission.READ_MEDIA_AUDIO
Canal 是mysql数据库binlog的增量订阅&消费组件。 ...行更改（RowChange）后写入MySql指定的记录表中（canal.logs，CanalSharp.AspNetCore会自动帮我们创建这张记录表)。...修改C:\ProgramData\MySQL\MySQL Server 5.7\my.ini的以下内容 log-bin=mysql-bin binlog-format=Row server-id=1 ...Configuration, defaultLogger); } 五、效果演示 当在指定要监听的数据库对某张表的某行数据进行Update或Delete操作后，又或者进行Insert行操作后，canal.logs表会自动记录变更的记录数据如下图...PS：INSERT操作会记录新增的数据行数据到CurrentValue列，DELETE操作会记录删除的数据行数据到PreviousValue列，UPDATE操作则会记录修改前PreviousValue和修改后的值
unsigned 和 zerofill UNSIGNED 修饰符规定字段只保存正值,即无符号,而mysql字段默认是有符号的。...ENUM 类型字段可以从集合中取得一个值或使用 null 值，除此之外的输入将会使 MySQL 在这个字段中插入一个空字符串。...MySQL 认为 ENUM 类型集合中出现的值是合法输入，除此之外其它任何输入都将失败。这说明通过搜索包含空字符串或对应数字索引为 0 的行就可以很容易地找到错误记录的位置。...如果插入一个即有合法的元素又有非法的元素的记录，MySQL 将会保留合法的元素，除去非法的元素。 一个 SET 类型最多可以包含 64 项元素。...希望从 SET 类型字段中找出非法的记录只需查找包含空字符串或二进制值为 0 的行。
1、字段抽取 字段抽取是根据已知列数据的开始和结束位置，抽取出新的列 字段截取函数：slice(start,stop) 注意：和数据结构的访问方式一样，开始位置是大于等于，结束位置是小于。...nums = df['tel'].str.slice(7, 11) #赋值回去 df['bands'] = bands df['areas'] = areas df['nums'] = nums 2、字段拆分...PDA\\4.7\\data.csv' ) newDF = df['name'].str.split(' ', 1, True) newDF.columns = ['band', 'name'] 3、记录抽取...根据一定的条件，对数据进行抽取 记录抽取函数：dataframe[condition] #类似于excel里的过滤功能 参数说明 ① condition 过滤的条件 返回值 ① DataFrame 常用的条件类型
一 前言 前几天一个开发同事咨询我，update 更新字段为相同的值是否会记录binlog，我回复说不会。 其实 严格的说这个答案是不准确的，说要区分场景。...当 row_format 为mixed或者statement格式是，binlog 的大小发生改变，不管是否真的更新数据，MySQL都记录执行的sql 到binlog。...三 小结 基于row模式时，server层匹配到要更新的记录，发现新值和旧值一致，不做更新，就直接返回，也不记录binlog。...基于 statement 或者 mixed格式，MySQL执行 update 语句，并把更新语句记录到binlog。 那为什么问题来了 statement 和 mixed 会完整的记录sql语句呢？...且听下回分解吧，因为我要解析源码，使用Clion 编译MySQL 调试环境还没成功。
给定一个 salary 表，如下所示，有 m = 男性 和 f = 女性 的值。交换所有的 f 和 m 值（例如，将所有 f 值更改为 m，反之亦然）。要求只使...
（默认保留1个月的历史版本，肯定是不够用的）因此，这里使用到触发器，将变革明细都记录到历史表里面，便于事件的回溯。...创建历史记录表CREATE TABLE `config_info_his` ( `id` bigint unsigned NOT NULL AUTO_INCREMENT COMMENT 'id',...nacos的记录一般情况下变更并不是很频繁，因此触发器造成的性能损耗基本可以忽略。
导读：本文详细讲述Oracle 12c 在2小时内完成一张14亿条记录的表结构字段类型变更的过程，希望可以帮到工作中的大家，如有任何疑问，欢迎在本文的评论区交流讨论。...FALSE, num_errors => num_errors, copy_statistics => FALSE); 由于场景1的效率比较差，我这里就只列举场景2的测试过程，后续实际业务变更也是在场景...2中进行，以下是整个变更过程： 硬软配置一般，如下： CPU：Intel® Xeon® CPU E7-4820 v3 @ 1.90GHz（物理4个，10核心，80个逻辑cpu） 内存：500 GB 存储...to_number(apply_obj_id) apply_obj_id', --这里只列举了需要变更的字段类型...Elapsed: 00:04:18.35 取消表、索引上的并行度，检查字段是否修改成功，删除临时表，至此整个修改过程结束，这里耗时约10分钟左右。
今天这篇博客，主要是记录了一个客户提出了多次的需求：实体更新时，只更新改动的字段。 听上去，这个需求是一个非常简单的需求，但是我一直没有升级。...而不需要太多关注 Update 语句具体是更新了几个字段。Rafy 框架会管理好领域框架的状态变更。事实上，这几年确实没有升级，而开发者也用得很好，很少有人关注。...nameChanged;',[TasksTime] = 0,[TestUserExt_UserCode] = 'DefaultUserCode' WHERE [Id] = 2967; 升级后的更新语句，也只更新变更后的属性了
表字段是怎么插入并修改呢？ 字段又有哪些约束条件?...看完本文，你能够优雅地设计一张有意义的表; 一、字段操作 1.添加字段 (add) alter table add 字段名 数据类型; desc ; 2.修改字段数据类型 (modify... ; #可用来修改字段数据类型 #也可以在修改数据类型后添加默认值或其它约束条件 #可以在最后修改字段位置[first | after] 4 字段添加默认值... alter 字段名 drop default; desc ; 5.删除字段 (drop) alter table drop 字段名; desc ; 二、字段约束 约束是对字段中的数据进行限制...约束字段默认值 UNIQUE KEY 约束字段的值唯一 PRIMARY KEY 约束字段为主键,唯一标识 AUTO_INCREMENT 字段值自动增加 1.
alter add命令格式：alter table 表名 add字段 类型 其他; 例如，在表MyClass中添加了一个字段passtest，类型为int(4)，默认值为0： mysql> alter...，字段名2 …]); 例子： mysql> alter table employee add index emp_name (name); 2) 加主关键字的索引 mysql> alter...mysql> alter table 表名 add unique 索引名 (字段名); 例子： mysql> alter table employee add unique emp_name2(...index emp_name; 5) 增加字段 mysql> ALTER TABLE table_name ADD field_name field_type; 6) 修改原字段名称及类型...mysql> ALTER TABLE table_name CHANGE old_field_name new_field_name field_type; 7) 删除字段 MySQL
1.字段抽取 根据已知列的开始与结束位置，抽取出新的列 字段截取函数slice(start, stop) slice()函数只能处理字符型数据 start从0开始，取值范围前闭后开。...13822254373 138 2225 4373 7 13322252452 133 2225 2452 8 18922257681 189 2225 7681 2.字段拆分...按固定的字符，拆分已有字符串 字段分隔函数split(sep, n, expand=False) 参数说明 sep：用于分割的字符串 n：分割为多少列，从0开始，如设置为0，即拆分为1列；如设置为1...屏幕快照 2018-07-01 19.52.00.png 3.记录抽取 根据一定条件对数据进行抽取 记录抽取函数dataframe[condition] 参数说明：condition 过滤对条件 返回值...：DataFrame 类似于Excel对过滤功能 3.1 记录抽取常用的条件类型 比较运算：> = <= !
问题 GROUP_CONCAT函数用于将多个字符串连接成一个字符串，在拼接成字符串时就会存在拼接长度的问题，MySQL 默认的拼接最大长度为1024 个字节，由于1024个字节会出现不够用的情况，所以有时需要去根据情况进行修改...， 使用SHOW VARIABLES LIKE "%group_concat_max_len%"查看 mysql> SHOW VARIABLES LIKE "%group_concat_max_len%...> 1 临时修改（命令行） 1.1 修改group_concat_max_len长度为：10240 mysql> SET GLOBAL group_concat_max_len = 10240; mysql...> SET SESSION group_concat_max_len = 10240; 1.2 查看 mysql> SHOW VARIABLES LIKE "%group_concat_max_len%...[mysqld] ...... group_concat_max_len = 10240 #添加 2.2 重启mysql服务 如果mysql服务不重启的话，可以配合临时修改一起使用 $ service
MySQL字段类型 MySQL支持多种类型，大致可以分为三类：数值、日期/时间和字符串(字符)类型。...北京时间 2038-1-19 11:14:07，格林尼治时间 2038年1月19日 凌晨 03:14:07 YYYYMMDD HHMMSS 混合日期和时间值，时间戳 数据类型的属性 MySQL
字段 1.增 添加字段 alter table 表名 add 字段 类型(宽度) 约束条件; 添加固定为值，最后添加first，将会放到第一个字段 `alter table 表名 add 字段 类型(宽度...) 约束条件 after 上一个字段名; 2.删 删除字段 alter table 表名 drop 字段名; 删除表分区 alter table tlog_rsp drop PARTITION TLOG_RSP..._20190901; 3.改 将s2表的age字段修改为char类型，最大字符数为4。...alter table s2 modify age char(4); 将字段放到最前面 alter table 表名 modify 字段 int(3) first; 修改字段名，若类型修改则修改，原先则默认...alter table 表名 change 原名 新名 类型(宽度); 修改字段类型 alter table 表名 modify 字段 char(20);
特殊说明： 解决问题的光鲜，藏着磕Bug的痛苦。 万物皆入轮回，谁也躲不掉！ 以上文章，均是我实际操作，写出来的笔记资料，不会出现全文盗用别人文章...
MySQL 支持大量的字段类型，其中常用的也有很多。...定点型字段类型有 DECIMAL 一个，主要用于存储有精度要求的小数。 DECIMAL 从 MySQL 5.1 引入，列的声明语法是 DECIMAL(M,D) 。...char 类型是定长的，MySQL 总是根据定义的字符串长度分配足够的空间。当保存 char 值时，在它们的右边填充空格以达到指定的长度，当检索到 char 值时，尾部的空格被删除掉。...3.日期时间类型 MySQL支持的日期和时间类型有 YEAR 、TIME 、DATE 、DATETIME 、TIMESTAMP，几种类型比较如下： 涉及到日期和时间字段类型选择时，根据存储需求选择合适的类型即可...总结： 本篇文章主要介绍了 MySQL 中常用的字段类型，平时用到的字段类型基本都在这里了，以一张思维导图总结如下： 版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
