ML.NET一种跨平台的开源机器学习框架。ML.NET将让广大.NET开发人员可以开发自己的模型，并且将自定义的机器学习融入到其应用程序中，无需之前拥有开发或调整机器学习模型方面的专业知识。能够支持诸多机器学习任务，比如说分类（比如文本分类和情绪分析）以及回归（比如趋势预测和价格预测）,使用模型用于预测，还包括该框架的核心组件，比如学习算法、转换和核心的机器学习数据结构。
插入排序是从一个乱序的数组中依次取值，插入到一个已经排好序的数组中。 这看起来好像要两个数组才能完成，但如果只想在同一个数组内排序，也是可以的。此时需要想象出两个区域：前方有序区和后方乱序区。
本文是《SQL必知必会》一书的精华总结，帮助读者快速入门SQL或者MySQL，主要内容包含：
用 Objective-C 实现几种基本的排序算法，并把排序的过程图形化显示。其实算法还是挺有趣的 ^ ^.
1. Oracle跟SQL Server 2005的区别？ 宏观上： 1). 最大的区别在于平台，oracle可以运行在不同的平台上，sql server只能运行在windows平台上，由于windows平台的稳定性和安全性影响了sql server的稳定性和安全性 2). oracle使用的脚本语言为PL-SQL，而sql server使用的脚本为T-SQL 微观上： 从数据类型,数据库的结构等等回答
用Objective-C实现几种基本的排序算法，并把排序的过程图形化显示。其实算法还是挺有趣的 。 选择排序 冒泡排序 插入排序 快速排序 01 选择排序 以升序为例。 选择排序比较好理解，一句话概括就是依次按位置挑选出适合此位置的元素来填充。 1.暂定第一个元素为最小元素，往后遍历，逐个与最小元素比较，若发现更小者，与先前的"最小元素"交换位置。达到更新最小元素的目的。 2.一趟遍历完成后，能确保刚刚完成的这一趟遍历中，最的小元素已经放置在前方了。然后缩小排序范围，新一趟排序从数
DML（Data Manipulation Language，数据操作语言）：用于检索或者修改数据。
游标（Cursor）是Oracle数据库中SQL解析和执行的载体，它可以分为共享游标（Shared Cursor）和会话游标（Session Cursor）。共享游标是指缓存在库缓存（Library Cache）里的一种库缓存对象，其实就是指缓存在库缓存里的SQL语句和匿名PL/SQL块所对应的库缓存对象。共享游标是Oracle缓存在库缓存中的几十种库缓存对象之一，它所对应的库缓存对象句柄的Namespace属性的值是CRSR（也就是Cursor的缩写）。共享游标会存储目标SQL的SQL文本、解析树、该SQL所涉及的对象定义、该SQL所使用的绑定变量类型和长度，以及该SQL的执行计划等信息。共享游标可以细分为父游标（Parent Cursor）和子游标（Child Cursor），可以通过视图V$SQLAREA来查看当前缓存在库缓存（Library Cache）中的父游标，而通过V$SQL来查看缓存在库缓存中的子游标。Oracle设计这种嵌套的Parent Cursor和Child Cursor并存的结构是为了能尽量减少对应的Hash Bucket中库缓存对象句柄链表的长度。
编辑手记：在很多生产系统中，程序员经意不经意写下的一条SQL都可能带来性能上的巨大隐患，而DBA就要不断在这些问题中出生入死，这些不正确的SQL可能给我们带来哪些麻烦，如何识别和处理，本文将通过真实案例的分析深入解答。 作者介绍：李华 云和恩墨高级技术顾问 错误的SQL可能对数据库产生的种种影响。如何找到这些错误的、解析失败的SQL呢？我们先把方法列举在这里： 通过关联 x$kglcursor x$kglcursor_child_sqlid 视图； 通过使用 Oracle 10035 Event 事
MySQL应该说是如今使用最为普遍的数据库了，没有之一，而Python作为最为流行的语言之一，自然少不了与mysql打交道，pymysql就是使用最多的工具库了。
李华 云和恩墨高级技术顾问 以下案例来自大讲堂的一次分享，从这个案例中我们可以了解“错误的SQL”可能对数据库产生的种种影响。如何找到这些错误的、解析失败的SQL呢？我们先把方法列举在这里： 通过关联 x$kglcursor x$kglcursor_child_sqlid 视图； 通过使用 Oracle 10035 Event 事件可以找到解析失败的SQL； 通过 oracle systemdump 也可以找到解析失败 SQL； 以下我们来看看这个精彩的案例分享。 背景介绍 客户的一套重要生产系统
冷菠 冷菠，网名悠然（个人主页http://www.orasky.net），资深DBA，著有《Oracle高性能自动化运维》，有近10年的数据库运维、团队管理以及培训经验。曾担任美资企业Senior
mysql应该说是如今使用最为普遍的数据库了，没有之一，而Python作为最为流行的语言之一，自然少不了与mysql打交道，pymysql就是使用最多的工具库了。
官方已经不再推荐采用Scroll API进行深度分页。如果遇到超过 10000 的深度分页，推荐采用search_after + PIT。
在这个例子中，我们创建了一个名为 BookPagination 的分页器类，并设置了默认的每页返回的对象数量为 10。我们还为客户端指定了可以在查询参数中使用的 limit 和 offset 参数，并设置了最大页面大小为 100。最后，我们将 BookPagination 分页器类添加到 BookViewSet 视图集合中。
问题 1： 为什么 group by 和 order by 会使查询变慢? 答： group by 和 order by 操作通常需要创建一个临时表来处理查询的结果，所以如果查询结果很多的 话会严
视图(view）是一种虚拟存在的表。视图中的数据并不在数据库中实际存在，行和列数据来自定义视图的查询中使用的表，并且是在使用视图时动态生成的。 通俗的讲，视图只保存了查询的SQL逻辑，不保存查询结果。所以我们在创建视图的时候，主要的工作就落在创建这条SQL查询语句上。
List 应该接口是 Collection 最常被使用的接口了。其下的实现类皆为有序列表，其中主要分为 Vector，ArrayList，LinkedList 三个实现类，其中 Vecotr 又拥有子类 Stack。
此时我们需要使用游标，通过游标的方式来遍历select查询的结果集，然后对每行数据进行处理。
此时我们需要使⽤游标，通过游标的⽅式来遍历select查询的结果集，然后对每⾏数据进⾏处理。
视图v$sql,v$sqlarea,v$sqltext,v$sqltext_with_newlines 是几个经常容易混淆的视图，主要是提供library cache中当前缓存的sql语句的信息。这几个视图都可以提供当前有关sql语句的具体信息，但稍有差异。本文主要描述其差异并给出实例。
索引是若干数据行的关键字的列表，查询数据时，通过索引中的关键字可以快速定位到要访问的记录所在的数据块，从而大大减少读取数据的I/O次数，因此可以显著的提高性能
没有涉及高级话题 适合有一点T-SQL知识 但想深入了解T-SQL的人看 我觉得例子有很大的借鉴意义 如果对哪篇文章有疑问, 可以在文章下留言 我会尽快回复的 真诚的希望能和朋友们讨论也希望高人多批评 一:简单的语法知识 1:定义变量给变量赋值 2:if和else 3:begin和end 4:两种case语句 5:循环 http://www.cnblogs.com/liulun/articles/1359567.html 二:简单的增 删 改 查和一些相关子句 1:update 2:insert 3:select 4:delete 5:where子句 6:order by子句 7:distinct关键字 8:group by 聚集函数 和 having子句 http://www.cnblogs.com/liulun/articles/1343417.html 三:复杂一点的查询 1:inner join 2:outer join 3:full join cross join 4:union 5:子查询返回单个值 6:子查询返回多个值 7:any some 和 all 8:外部查询和内部查询 9:派生表 http://www.cnblogs.com/liulun/articles/1346166.html 四:约束 1:类型 2:命名 3:主键约束 4:外键约束 5:unique约束 6:check约束 7:default约束 8:禁用约束 9:规则 10:默认值 http://www.cnblogs.com/liulun/articles/1343466.html 五:create drop alter 1:create 2:drop 3:alter http://www.cnblogs.com/liulun/articles/1343451.html 六:视图 1:创建视图 2:删除和修改视图 3:视图加密 http://www.cnblogs.com/liulun/articles/1373449.html 七:存储过程与用户自定义函数 1:存储过程的简单创建\修改与删除 2:存储过程的输入参数和输出参数 3:用户定义函数 http://www.cnblogs.com/liulun/articles/1362542.html 八:触发器 1:什么是触发器 2:一个简单的触发器 3:针对触发器的相关操作 4:使用触发器记录操作情况 5:视图上的触发器 6:触发器相关函数 http://www.cnblogs.com/liulun/articles/1372964.html 九:全文索引 1:简要介绍全文索引 2:全文索引的相关操作 3:全文目录的相关操作 4:全文查询语法 5:综合实例 http://www.cnblogs.com/liulun/articles/1368655.html 十:游标 1:什么是游标 2:创建一个简单的游标 3:游标的作用域 4:游标的滚动 5:静态游标 6:键驱动的游标 7:动态游标 http://www.cnblogs.com/liulun/articles/1373352.html 附件: T-SQL中常用的函数 http://www.cnblogs.com/liulun/articles/1346212.html T-SQL学习笔记CHM版 https://files.cnblogs.com/liulun/T-SQL学习笔记.rar
游标中有个指针，当打开游标的时候，才会执⾏游标对应的select语句，这个指针会指向
1 使用SET NOCOUNT ON 选项： 缺省地，每次执行SQL语句时，一个消息会从服务端发给客户端以显示SQL语句影响的行数。这些信息对客户端来说很少有用。通过关闭这个缺省值，你能减少在服务端和客户端的网络流量，帮助全面提升服务器和应用程序的性能。为了关闭存储过程级的这个特点，在每个存储过程的开头包含“SET NOCOUNT ON”语句。 2 正确使用UNION和UNION ALL： 许多人没完全理解UNION和UNION SELECT是怎样工作的，因此，结果浪费了大量不必要的SQLServer资源。当使用UNION时，它相当于在结果集上执行SELECT DISTINCT。换句话说，UNION将联合两个相类似的记录集，然后搜索重复的记录并排除。如果这是你的目的，那么使用UNION是正确的。但如果你使用UNION联合的两个记录集没有重复记录，那么使用UNION会浪费资源，因为它要寻找重复记录，即使你确定它们不存在。 所以如果你知道你要联合的记录集里没有重复，那么你要使用UNION ALL，而不是UNION。UNION ALL联合记录集，但不搜索重复记录，这样减少SQLServer资源的使用，从而提升性能。 3 尽量不用SELECT * ： 绝大多数情况下，不要用 * 来代替查询返回的字段列表，用 * 的好处是代码量少、就算是表结构或视图的列发生变化，编写的查询SQL语句也不用变，都返回所有的字段。但数据库服务器在解析时，如果碰到 *，则会先分析表的结构，然后把表的所有字段名再罗列出来。这就增加了分析的时间。 4 慎用SELECT DISTINCT： DISTINCT子句仅在特定功能的时候使用，即从记录集中排除重复记录的时候。这是因为DISTINCT子句先获取结果集然后去重，这样增加SQLServer有用资源的使用。当然，如果你需要去做，那就只有去做了。 当如果你知道SELECT语句将从不返回重复记录，那么使用DISTINCT语句对SQLServer资源不必要的浪费。 5 少用游标： 任何一种游标都会降低SQLServer性能。有些情况不能避免，大多数情况可以避免。所以如果你的应用程序目前正在使用TSQL游标，看看这些代码是否能够重写以避免它们。如果你需要一行一行的执行操作，考虑下边这些选项中的一个或多个来代替游标的使用： 使用临时表 使用WHILE循环 使用派生表 使用相关子查询 使用CASE语句 使用多个查询 上面每一个都能取代游标并且执行更快。 如果你不能避免使用游标，至少试着提高它们的速度，找出加速游标的方法。 6 选择最有效率的表名顺序： SQLSERVER的解析器按照从右到左的顺序处理FROM子句中的表名，因此FROM子句中写在最后的表（基础表driving table）将被最先处理，在FROM子句中包含多个表的情况下，必须选择记录条数最少的表作为基础表，当SQLSERVER处理多个表时，会运用排序及合并的方式连接它们。首先，扫描第一个表（FROM子句中最后的那个表)并对记录进行排序；然后扫描第二个表（FROM子句中最后第二个表)；最后将所有从第二个表中检索出的记录与第一个表中合适记录进行合并。 例如: 表 TAB1有 16384 条记录，表 TAB2 有5条记录，选择TAB2作为基础表 (最好的方法)： select count(*) from TAB1 a, TAB2 b 选择TAB1作为基础表 (不佳的方法)： select count(*) from TAB2 a, TAB1 b 如果有3个以上的表连接查询，那就需要选择交叉表（intersection table）作为基础表，交叉表是指那个被其他表所引用的表。 7 使用表的别名(Alias)： 当在SQL语句中连接多个表时，请使用表的别名并把别名前缀于每个Column上，这样可以减少解析的时间并减少那些由Column歧义引起的语法错误。 8 SARG你的WHERE条件： ARGE来源于"Search Argument"（搜索参数）的首字母拼成的"SARG"，它是指WHERE子句里，列和常量的比较。如果WHERE子句是sargable（可SARG的），这意味着它能利用索引加速查询的完成。如果WHERE子句不是可SARG的，这意味着WHERE子句不能利用索引（或至少部分不能利用），执行的是全表或索引扫描，这会引起查询的性能下降。 在WHERE子句里不可SARG的搜索条件如"IS NULL", "<>", "!=", "!>", "!<", "NOT", "NOT EXISTS", "NOT IN", "NOT LIKE"和"LIKE '%500'"，通常（但不总是）会阻止查询优
前段时间新项目上线为了赶进度很多模块的功能都没有经过详细的测试导致了生成环境中的数据和实际数据对不上，因此需要自己手写一个数据库脚本来更新下之前的数据。（线上数据库用是SQL Server2012）关于数据统计汇总的问题肯定会用到遍历统计汇总，那么问题来了数据库中如何遍历呢？好像并没有for和foreach这种类型的功能呀，不过关于数据库遍历最常见的方法当然是大家经常会想到的游标啦，但是这次我并没有使用游标，而是通过创建临时表的方式来更新遍历数据的。
在Java数据库编程中，经常需要执行SQL查询并处理查询结果。ResultSet（结果集）是Java JDBC中用于表示查询结果的关键类之一。通过遍历ResultSet，我们可以访问和操作从数据库中检索的数据。本文将详细介绍如何使用JDBC来遍历ResultSet，以及在遍历过程中的注意事项。
sqlite3 以上两个是主流的关系型数据库，我们观察之后发现，它们与我们熟知的Excel好像也没有什么不同。关系型数据库里面放的都是一张张的表，就如同Excel中的工作簿。就算不熟悉Excel，但每一张表也都是我们从小到大所熟悉的那种表结构，例如课程表、值日表之类的。
关于 JDK 的集合类的整体介绍可以看这张图，本篇博客我们不系统的介绍整个集合的构造，重点是介绍 ArrayList 类是如何实现的。 1、ArrayList 定义 ArrayList 是一个用
MySQL 中最简单使用序列的方法就是使用 AUTO_INCREMENT 来定义序列。
这个是数据存储介质本身的查询实现原理决定的，分页查询场景，是按照某个顺序进行查询，分页靠后的查询请求，需要将按照该顺序排序的之前所有页的数据给排除掉，然后取对应页数据返回。该问题瓶颈主要就是排除掉之前页数据这里，比如DB（MySQL）和ES（elasticsearch）都存在该问题。
📦个人主页：楠慧 🏆简介：一个大二的科班出身的，主要研究Java后端开发 ⏰座右铭：成功之前我们要做应该做的事情，成功之后才能做我们喜欢的事 💕 过客的你，可以给博主留下一个小小的关注吗？这是给博主最大的支持。以后博主会更新大量的优质的作品！！！！ 一、MySQL存储过程和函数 1.存储过程和函数的概念 存储过程和函数是 事先经过编译并存储在数据库中的一段 SQL 语句的集合 2.存储过程和函数的好处 存储过程和函数可以重复使用，减轻开发人员的工作量。类似于java中方法可以多次调用 减少网络流量，
这个SQL语句列表为每个表提供了SQL查询和其他操作的记录，包括插入、更新和删除。 这些SQL语句链接到一个查询计划，该链接提供冻结该查询计划的选项。
视图（View）是一种虚拟存在的表。视图中的数据并不在数据库中实际存在，行和列数据来自定义视图的查询中使用的表，并且是在使用视图时动态生成的。
Crystal Reports 是世界上被用的最多的报表工具。尽管 VFP 已经有了内建的报表编辑器，但许多 VFP 程序员还是使用 Crystal 的原因之一，就是因为它支持子报表。子报表就是运行在一个报表中的报表。子报表最常见的用途是为一个父表生成多个子表的报表。
那么优化自然是要针对SQL中性能较差的部分进行优化，因而这部分我们先讲解如何分析其性能差异
采用scoll滚动搜索，scoll搜索会在第一次搜索的时候保存一个当时的视图快照，之后只会基于该旧的视图快照提供数据搜索，这个期间数据变更，用户是看不到的，每次发送scoll请求，需要指定一个scoll参数，指定一个时间窗口，每次搜索请求只要在这个时间窗口内完成就可以了。
对于大量的数据而言，我们尽量避免使用 from+size 这种方法。这里的原因是 index.max_result_window 的默认值是 10000，也就是说 from+size 的最大值是1万。搜索请求占用堆内存和时间与 from+size 成比例，这限制了内存。 假如你想 hit 从 990 到 1000，那么每个 shard 至少需要 1000 个文档。 使用 from and size 的深度分页，是非常低效的，因为排序的结果必须从每个分片上取出并重新排序最后返回 10 条。这个过程需要对每个
游标（Cursor）是处理数据的一种方法，为了查看或者处理结果集中的数据，游标提供了在结果集中一次一行遍历数据的能力。 游标也是一种面向过程的sql编程方法，所以一般在存储过程、函数、触发器、循环处理中使用。
alter proc cursor_pr_UpUser @NoteUserId int as begin transaction declare @NLId int declare @NPLId int –创建用户所对应的日志游标cursorNLId，将日志id放入@NLId游标中 declare cursorNLId cursor for select NoteLogId from NoteLogs where NUId=@NoteUserId open cursorNLId fetch next from cursorNLId into @NLId
Transaction，是指作为一个基本工作单元执行的一系列SQL语句的操作，要么完全地执行，要么完全地都不执行。
前文回顾： 一个执行计划异常变更的案例（上） 上篇文章我们说了，绑定变量实际是一些占位符，可以让仅查询条件不同的SQL语句可以重用解析树和执行计划，避免硬解析。绑定变量窥探则是第一次执行SQL硬解析时，会窥探使用的绑定变量值，根据该值的分布特征，选择更合适的执行计划， 其缺点在于如果绑定变量列值分布不均匀，由于只有第一次硬解析才会窥探，所以可能接下来的SQL执行会选择错误的执行计划。 有时可能我们需要查看某条SQL使用了什么绑定变量值，导致执行计划未用我们认为最佳的一种。 方法一：10046 使用level
查询速度慢的原因很多，常见如下几种： 1、没有索引或者没有用到索引(这是查询慢最常见的问题，是程序设计的缺陷) 2、I/O吞吐量小，形成了瓶颈效应。 3、没有创建计算列导致查询不优化。 4、内存不足 5、网络速度慢 6、查询出的数据量过大（可以采用多次查询，其他的方法降低数据量） 7、锁或者死锁(这也是查询慢最常见的问题，是程序设计的缺陷) 8、sp_lock,sp_who,活动的用户查看,原因是读写竞争资源。 9、返回了不必要的行
存储引擎Storage Engine：MySQL中的数据、索引以及其他对象是如何存储的，是一套文件系统的实现。
同事提了个统计需求，MySQL某个库60%的表都有个isdel字段(char(1))，值是0或1，现在要检索该数据库所有存在isdel字段且isdel=‘0’的表的记录数，举个例子，执行如下的count操作，
在 Web 开发中，处理大量数据是非常常见的。但是，如果一次性返回所有数据，不仅会增加服务器的负担，而且还会影响客户端的响应时间。为了解决这个问题，分页被广泛应用于 Web 应用程序中，特别是在 RESTful API 中。
假设你在阅读一本包含数万页的巨幅小说，这就像数据库中的大型结果集。显然，你不可能立刻记住这本书的所有内容。这就像你的程序不可能一次性把大型结果集加载到内存中。那么，你怎么做呢？你可能会使用一个书签（游标）来追踪你当前阅读到了哪一页。
游标的设计是一种数据缓冲区的思想，用来存放SQL语句执行的结果。游标是一种能从包括多条数据记录的结果集中每次提取一条记录的机制。 尽管游标能遍历结果中的所有行，但一次只指向一行。 游标的作用就是用于对查询数据库所返回的记录进行遍历，以便进行相应的操作。
作者：weberhuangxingbo11 原文：https://blog.csdn.net/weberhuangxingbo/article/details/80694045
继续研读JDK的源码，在比较HashMap和ConcurrentHashMap的不同之处发现了一个细节——关于Iterator的实现的不同，其实HashMap和ConcurrentHashMap还有更多不同的地方，这也是面试经常问到的问题，有一篇文章我觉得讲的很好了，Java进阶（六）从ConcurrentHashMap的演进看Java多线程核心技术。 Iterator是一种设计模式，在Java Collection Framework中经常作为容器的视图(view)，大多数时候只支持删除、不支持增加，提供统一的接口方法等特点。在Java Collection Framework的Iterator实现中大多数是fast-fail方式的，而支持并发的容器数据结构则没有这个限制。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
