引言 一般情况下，会考虑到MySQL与MongoDB如何做技术选型的时候，你一定是遇到了类似于非结构化数据JSON的存取难题，否则大家都直接MySQL开始搞起了。 为什么要关注MongoDB呢？...3.3 增删改查操作的差异 当从数据库表或表组合中请求信息时，MySQL 使用 结构化查询语言（SQL），SQL是最流行和利用最广泛的查询语言，大多数开发人员都有这方面的经验。...尽管 MQL 和 SQL 有相似之处，但 MQL 通常需要额外花费精力进行学习。 3.4 事务支持的差异 当应用程序类型需要多行事务时，关系数据库是最合适的选择。...MongoDB在指定_id插入的时候，插入性能下降非常厉害。 MySQL非常稳定，无论在指定主键还是在不指定主键插入的情况下，其效率都差不了。 MongoDB会充分利用内存作为缓存。...此外，当应用程序需要提供多行事务(如，会计和银行系统)时，以MySQL为首的关系型数据库提供了高事务处理率(high transaction rate)。
上条插入语句只插入一行数据，称之为单条插入，相应地，还可以在一条语句中插入多行数据，称之为批量插入。...单行插入引擎 此前，OceanBase的单条插入与批量插入使用的是同一套接口，从SQL层读取一行，检查冲突，插入数据，然后反复重复这个过程，直到没有数据为止。...看似很简单的优化，性能却提升了很多，在递增插入场景，Sysbench bulk insert的单线程测试中，无基线数据时，性能提升30%，有基线数据时，性能提升了100%。...·END· 相关阅读：MySQL与MongoDB，该如何做技术选型？ 应该如何正确理解BFF架构设计？...浅析分布式系统中的补偿机制设计问题聊聊分布式日志系统的设计与实践 执行个 DEL 竟然也会阻塞 Redis？深挖一下果然不简单 PHP 中数组是如何灵活支持多数据类型的？
预处理执行过程： 把SQL语句分成两部分，命令部分与数据部分。 先把命令部分发送给MySQL服务端，MySQL服务端进行SQL预处理。...然后把数据部分发送给MySQL服务端，MySQL服务端对SQL语句进行占位符替换。 MySQL服务端执行完整的SQL语句并将结果返回给客户端。 为什么要预处理？...在MySQL中只有使用了Innodb数据库引擎的数据库或表才支持事务, 事务处理可以用来维护数据库的完整性，保证成批的SQL语句要么全部执行，要么全部不执行。...# 可以看到用户的在数据库中金额变化 1 WeiyiGeek 1150 2 辛勤的小蜜蜂 3700 0x01 Go语言编程快速入门之第三方sqlx库操作MySQL数据库 描述: 在项目中我们通常可能会使用...= nil { panic(err) // 在进行开发测试代码时使用，正式环境中请勿使用。 } else { fmt.Println("sqlx.In - 批量插入执行完毕!")
GoLang如何操作mysql goLang提供的规范接口 1. 初始化数据库连接： 2....查询操作 单行查询 多行查询 3.插入数据 4.更新数据 5.删除数据 6.预处理 Go实现MySQL预处理 SQL注入问题 Go实现MySQL事务 什么是事务？.../mysql" 解释一下导入包名前面的"_"作用： import 下划线（如：import _github/demo）的作用：当导入一个包时，该包下的文件里所有init()函数都会被执行，然而，有些时候我们并不需要把整个包都导入进来...客户端发送完整SQL语句到MySQL服务端 MySQL服务端执行完整的SQL语句并将结果返回给客户端。 预处理执行过程： 把SQL语句分成两部分，命令部分与数据部分。...在MySQL中只有使用了Innodb数据库引擎的数据库或表才支持事务。事务处理可以用来维护数据库的完整性，保证成批的SQL语句要么全部执行，要么全部不执行。
HTTP进行TCP连接之后，在什么情况下会中断 当服务端或者客户端执行 close 系统调用的时候，会发送FIN报文，就会进行四次挥手的过程 当发送方发送了数据之后，接收方超过一段时间没有响应ACK报文...如果某个查询语句使用了二级索引（非聚簇索引），但是查询的数据不是主键值，这时在二级索引找到主键值后，需要去聚簇索引中获得数据行，这个过程就叫作「回表」，也就是说要查两个 B+ 树才能查到数据。...如果我们使用自增主键，那么每次插入的新数据就会按顺序添加到当前索引节点的位置，不需要移动已有的数据，当页面写满，就会自动开辟一个新页面。...如果我们使用非自增主键，由于每次插入主键的索引值都是随机的，因此每次插入新的数据时，就可能会插入到现有数据页中间的某个位置，这将不得不移动其它数据来满足新数据的插入，甚至需要从一个页面复制数据到另外一个页面...使用红黑树：在JDK 8中，当链表长度过长时，会将链表转换为红黑树，以减少查找时间，提高性能。
一、SQL优化 1.高效添加数据的几种方式 普通插入（Insert语句） 先回顾一下向数据库中添加数据的基本操作： 当我们想要向数据库中的表tb中插入一条数据时，可以采用insert into语句： insert...，此时可以使用MySQL数据库提供的load指令，这个过程只需要花费几十秒。...按照顺序，主键50应该存储在47之后。 但1页显然已经存满，随后会进行“页分裂”的过程，即先开启第三页，然后将1页后一半的数据，移动到3页，然后在3页中插入50。...最终过程如下： 与页分裂相对，还有页合并现象： 当删除一行记录时，实际上记录并没有被物理删除，只是记录被标记（flaged）为删除并且它的空间变得允许被其他记录声明使用。...插入大量数据时，选择MySQL提供的load指令插入的效率要大于Insert语句 插入数据时，尽量选择主键顺序插入，选择使用AUTO_INCREMENT自增主键。
[WHERE clause]; 2、MySQL 中 的 DML 语句详解 2.1、DML语句：INSERT 在 MySQL 中，INSERT 语句用于将一行或者多行数据插入到数据表的指定列中。...值的位置和列的位置一一对应；⑤ 当插入多行数据时，多个值列表之间使用逗号分隔；⑥ INSERT 语句返回插入的行数。...: 0 Warnings: 0 # Records: 2 代表有 2 行数据要插入到表中 # Duplicates: 0 代表重复的行数是...REPLACE 语句和 INSERT 语句很像，它们的不同之处在于，当插入过程中出现了重复的主键或者重复的唯一索引的时候，INSERT 语句会产生一个错误，而 REPLACE 语句则先删除旧的行，再插入新的行...列名放在小括号中，多个列表使用逗号分隔；④ VALUES 关键字之后的小括号中是值列表。值的数量要和字段的数量相同。值的位置和列的位置一一对应； ⑤ 当插入多行数据时，多个值列表之间使用逗号分隔。
当几何扩容时，会创建更大的数组，并把原数组复制到新数组。ArrayList支持对元素的快速随机访问，但插入与删除速度很慢。...表数据太少的时候，不需要创建索引； 经常更新的字段不用创建索引，比如不要对电商项目的用户余额建立索引，因为索引字段频繁修改，由于要维护 B+Tree的有序性，那么就需要频繁的重建索引，这个过程是会影响数据库性能的...这样即使使用索引快速查找到了第一条数据，仍然不能停止，要进行目标值附近的小范围扫描。但它的好处是它并不需要扫全表，因为索引是有序的，即便有重复值，也是在一个非常小的范围内扫描。...eq_ref 类型是使用主键或唯一索引时产生的访问方式，通常使用在多表联查中。...Redis 的 SUBSCRIBE 命令可以让客户端订阅任意数量的频道， 每当有新信息发送到被订阅的频道时， 信息就会被发送给所有订阅指定频道的客户端。
优点是RDB文件数据是被压缩写入的，因此RDB文件的体积要比整个实例内存要小，当实例宕机恢复时，加载RDB文件的速度很快，能够在很短时间内迅速恢复文件中的数据。...当几何扩容时，会创建更大的数组，并把原数组复制到新数组。ArrayList支持对元素的快速随机访问，但插入与删除速度很慢。...比如：在putVal中，如果计算出来的hash槽没有存放元素，那么就可以直接使用CAS来进行设置值，这是因为在设置元素的时候，因为hash值经过了各种扰动后，造成hash碰撞的几率较低，那么我们可以预测使用较少的自旋来完成具体的...流量控制是通过在TCP报文段首部维护一个滑动窗口来实现的。 拥塞控制：拥塞控制就是当网络拥堵严重时，发送端减少数据发送。拥塞控制是通过发送端维护一个拥塞窗口来实现的。...拥塞控制主要是四个算法： 慢启动 拥塞避免 拥塞发生 快速恢复 慢启动 TCP 在刚建立连接完成后，首先是有个慢启动的过程，这个慢启动的意思就是一点一点的提高发送数据包的数量，如果一上来就发大量的数据，
（数组中插入、删 除数据项时，需要移动其它数据项）。 （静态)数组从栈中分配空间（用 new 创建的在堆中）, 对于程序员方便快速,但是自由度小；链表从堆中分配空间, 自由度大但是申请管理比较麻烦。...数据库进行任何写入操作的时候都是要先写日志的，同样的道理，我们在执行事务的时候数据库首先会记录下这个事务的 redo 操作日志，然后才开始真正操作数据库，在操作之前首先会把日志文件写入磁盘，那么当突然断电的时候...对称加密的一大缺点是密钥的管理与分配，换句话说，如何把密钥发送到需要解密你的消息的人的手里是一个问题。在发送密钥的过程中，密钥有很大的风险会被黑客们拦截。...使用的方法有 当发送窗口大小小于发送门限时，使用慢开始指数增大窗口，当发送窗口大于发送门限时，使用拥塞避免算法加性增加发送窗口大小，当出现网络拥塞时，门限减为当前发送窗口的一半，重新开始慢启动。...当数据准备好时，进程会收到一个 SIGIO 信号，可以在信号处理函数中调用 I/O操作函数处理数据。 异步IO: 当一个异步过程调用发出后，调用者不能立刻得到结果。
（3）支持面向过程编程和函数式编程 应用场景 Lua在不同的系统中得到大量应用，场景的应用场景如下: 游戏开发、独立应用脚本、web应用脚本、扩展和数据库插件、系统安全上。...方式一: 我们需要一个文件名为 hello.lua,在文件中添加要执行的代码，然后通过命令 lua hello.lua来执行，会在控制台输出对应的结果。...Lua的注释 关于Lua的注释要分两种，第一种是单行注释，第二种是多行注释。...创建表的最简单方式: > a = {} 创建数组: 我们都知道数组就是相同数据类型的元素按照一定顺序排列的集合，那么使用table如何创建一个数组呢?...在ngx_lua中，MySQL有两种访问模式,分别是使 （1）用ngx_lua模块和lua-resty-mysql模块：这两个模块是安装OpenResty时默认安装的。
存储过程与函数 MySQL 的存储过程与函数都可以避免开发人员重复编写相同的 SQL 语句，并且存储过程和函数都是在 MySQL 服务器中执行的，可以减少客户端和服务器端的数据传输。...索引 来看 MySQL 的索引，索引可以大幅增加数据库的查询的性能，在实际业务场景中，或多或少都会使用到。...这种索引一般用来保证数据的唯一性，比如保存账户信息的表，每个账户的 ID 必须保证唯一，如果重复插入相同的账户 ID 时 MySQL 返回异常。...一般来说，设计关系数据库时需要满足第三范式，但为了满足第三范式，我们可能会拆分出多张表。...或者利用 Profile 命令来分析某个语句执行过程中各个分步的耗时。 要注意使用查询语句是要避免使用 SELECT *，而是应该指定具体需要获取的字段。
联合索引，查询时的条件列不是联合索引中的第一个列，索引失效。 在索引列上使用mysql的内置函数，索引失效。 对索引列运算（如，+、-、*、/），索引失效。 索引字段上使用（！...所谓的mixed格式其实就是row和statement格式混合使用，当MySQL判断可能数据不一致时，就用row格式，否则使用就用statement格式。 9....allkeys-lfu：4.0版本新增，当内存不足以容纳新写入数据时，从所有key中使用LFU算法进行淘汰； volatile-random：当内存不足以容纳新写入数据时，从设置了过期时间的key中，随机淘汰数据...volatile-ttl：当内存不足以容纳新写入数据时，在设置了过期时间的key中，根据过期时间进行淘汰，越早过期的优先被淘汰； noeviction：默认策略，当内存不足以容纳新写入数据时，新写入操作会报错...JDK1.7 Hashmap的底层数据结构是数组+链表 JDK1.8 Hashmap的底层数据结构是数组+链表+红黑树 数据元素通过映射关系，即散列函数，映射到桶数组对应索引的位置，插入该位置时，如果发生冲突
，得到value在Bucket数组的位置idx， 再从Bucket数组中取出元素。...mysql的长连接如果长期闲置，mysql会8小时后（默认时间）主动断开该连接。 10.线程池的大概设计 （1）要设置最大连接和最大连接空闲数。小于最空闲数则使用完入池。...设置有默认的超时时间，超时报错 （3）当一个链接使用完，要判断是否有等待队列需求，有的话直接返回给等待中的需求，没有的话就入池 （4）均衡和保活。均衡可采用队列先进先出的方式保持 。...我们可以在消费者中只做不耗时的操作，耗时的操作打入到二级队列， 二级队列多做几个分区，这样消费能力跟得上 4.redis多个master怎么平均分配数据进去，会不会出现有的负载很高的情况...可以带上库名，比如a.demo 和b.demo （2）不同mysql下的查询 可以通过mysql的federated引擎，创建的表只是在本地有表定义文件， 数据文件则存在于远程数据库中
parameterType：入参类型，可以使用的有基本数据类型和Java复杂数据类型 基本数据类型：包含int,String,Date等。基本数据类型作为传参，只能传入一个。...例如使用下列语句，这样每次插入数据时，就可以省略掉 id 列了。（注：当数据库中的字段不是自增的时，useGeneratedKeys 不起作用。）...（这些逗号是在使用条件语句给列赋值时引入的）。 ...当使用可迭代对象或者数组时，index 是当前迭代的序号，item 的值是本次迭代获取到的元素。当使用Map对象（或者 Map.Entry 对象的集合）时，index 是键，item 是值。 ...item表示集合中每一个元素进行迭代时的别名。 index指定一个名字，用于表示在迭代过程中，每次迭代到的位置。 open表示该语句以什么开始。
php7中mysql的连接与使用与PHP5中大不相同 PHP5中mysql_connect()等函数大多被PHP7中类的成员函数所代替。...PHP5中连接mysql是过程性的，而PHP7中强调了类的使用与面向对象的方法 $user = new mysqli(); //Connect to mysql $user- connect("localhost...TRUE，失败则返回FALSE 设置客户端字符集 mysqli_set_charset(mysqliLink, charset) – 描述：设置默认字符编码 – 返回：成功时返回 TRUE， 或者在失败时返回...对于其它类型的 SQL 语句，mysqli_query()在执行成功时返回 TRUE，出错时返回 FALSE。非 FALSE 的返回值意味着查询是合法的并能够被服务器执行。...当使用UPDATE查询，MySQL不会将原值和新值一样的值更新，返回值不一定就是查询条件所符合的记录，只有修改过的记录数才会被返回。
6.mysql的myisam的索引结构是什么样子的 MyISAM引擎使用B+Tree作为索引结构，索引文件叶节点的data域存放的是 数据记录的地址，指向数据文件中对应的值，每个节点只有该索引列的值...答： ht[0]，是存放数据的table ht[1]，只有正在进行扩容时才会使用，它也是存放数据的table，长度为ht[0]的两倍 进行读操作：会先去ht[0]中找，找不到再去...rabbitmq：处理完数据才发送ack，mq就可以放心删除数据了。 当消费者异常退出没有发送ack，此消息会发送给下一个消费者，保证不丢失。...它是为了解决普通二叉查找树在数据更新的过程中， 复杂度退化的问题而产生的。红黑树的高度近似 log2n，所以它是近似平衡， 插入、删除、查找操作的时间复杂度都是 O(logn)。...1）数组存储每个节点，key=>节点查询的时候先判断key在不在数组 2）注意数组要定义长度的，超过长度则删除尾部值 3）put的时候，注意数组满没满，没满就生成新节点， 然后插入到链表头部
索引基础 常见的索引类型有：哈希、数组、搜索树 哈希用于等值查询，不适合范围查询；数组查询很快，但是更新效率低 数据库使用N叉树降低树的层级，innodb使用的是B+树 在InnoDb中，主键索引又叫聚簇索引...合理设置前缀索引：索引可以设置只用前面几位，可以减少索引占用空间，同时设置时应保证合适的区分度。 锁相关 全局锁：用于备份的时候，锁住整个库，防止备份过程中数据修改导致问题。...用法，lock in share mode用于两个表之间要保证一致性，a表的操作时要保证b表中的某条数据不能被修改； for update用于同一个表中的数据，a事务操作时不允许b事务进行修改。...如果位点相同可以认为已经同步 对比GTID集合确保主备无延迟： 如何判断一个数据库正常 1、使用select进行查询，查询一个创建在mysql库中的表；容易实现，但是因为只是查询所以会漏掉一些错误条件，...当使用join的时候如果不能走索引的情况，那么mysql会使用BNL算法，将驱动表的数据和被驱动表的数据加载到内存中，并且使用join_buffer来进行合并操作，但是这样扫描行会变的非常的巨大，所以这个时候如果表的数据太多就不适合使用
有同学问我银行软开岗位的面试要怎么准备？难度如何？ 银行的面试跟互联网公司的面试还是有区别。...我们常说的索引数据结构，就是由存储引擎层实现的，不同的存储引擎支持的索引类型也不相同，比如 InnoDB 支持索引类型是 B+树 ，且是默认使用，也就是说在数据表中创建的主键索引和二级索引默认使用的是...当几何扩容时，会创建更大的数组，并把原数组复制到新数组。ArrayList支持对元素的快速随机访问，但插入与删除速度很慢。...索引可以建立在一个或多个列上，这些列可以是表中的任意字段。索引的创建过程会对指定的列进行排序和存储，以便快速定位和访问数据。...索引的作用是加快查询操作的速度，通过使用索引，可以减少数据库的扫描和比较操作，从而提高查询的效率。但是索引也会占用额外的存储空间，并且在插入、更新和删除操作时需要维护索引，会增加写操作的开销。
所以在 JDK 1.8 版本的时候做了优化，当一个链表的长度超过8的时候就转换数据结构，不再使用链表存储，而是使用红黑树，查找时使用红黑树，时间复杂度O（log n），可以提高查询性能，但是在数量较少时...当发生缓存雪崩或击穿时，数据库中还是保存了应用要访问的数据，一旦缓存恢复相对应的数据，就可以减轻数据库的压力，而缓存穿透就不一样了。...当用户访问的数据，既不在缓存中，也不在数据库中，导致请求在访问缓存时，发现缓存缺失，再去访问数据库时，发现数据库中也没有要访问的数据，没办法构建缓存数据，来服务后续的请求。...当我们在写入数据库数据时，在布隆过滤器里做个标记，这样下次查询数据是否在数据库时，只需要查询布隆过滤器，如果查询到数据没有被标记，说明不在数据库中。...当应用要查询数据 x 是否数据库时，通过布隆过滤器只要查到位图数组的第 1、4、6 位置的值是否全为 1，只要有一个为 0，就认为数据 x 不在数据库中。
领取专属 10元无门槛券
手把手带您无忧上云
