汇总篇：http://www.cnblogs.com/dunitian/p/4822808.html#tsql 概 述：http://www.cnblogs.com/dunitian/p/60413
“ 从Redis的安装到项目集成的两篇文章中，我们已经简单的了解到何如去用Redis的，再然后通过Redis和Mysql的查询性能对比和项目中如何合理运用Redis这两篇文章，又大致的明白为什么我们要用Redis以及Redis存在的一些问题。那么今天我想说一说我对Redis的一个感悟吧。能力有限，欢迎批评(反正关注后才能留言批评)。”
首先我们来看下什么是Mycat: MyCat：开源分布式数据库中间件, 这里定义的很简单, 就是分布式数据库的中间件. 其实Mycat 是可以时mysql进行集群的中间件, 我们可以对mysql来分
看到好些人在写更新缓存数据代码时，先删除缓存，然后再更新数据库，而后续的操作会把数据再装载到缓存中。然而，这个是逻辑是错误的。
写公众号说实话挺久了，也因此认识了很多的朋友，咨询什么的都有，总之，或多或少的帮助到过一些人。最近想了好久，我往后应该写一些什么类型的文章？
看到好些人在写更新缓存数据代码时，先删除缓存，然后再更新数据库，而后续的操作会把数据再装载的缓存中。然而，这个是逻辑是错误的。试想，两个并发操作，一个是更新操作，另一个是查询操作，更新操作删除缓存后，查询操作没有命中缓存，先把老数据读出来后放到缓存中，然后更新操作更新了数据库。于是，在缓存中的数据还是老的数据，导致缓存中的数据是脏的，而且还一直这样脏下去了。 我不知道为什么这么多人用的都是这个逻辑，当我在微博上发了这个贴以后，我发现好些人给了好多非常复杂和诡异的方案，所以，我想写这篇文章说一下几个缓存更新的
看到好些人在写更新缓存数据代码时，先删除缓存，然后再更新数据库，而后续的操作会把数据再装载的缓存中。然而，这个是逻辑是错误的。试想，两个并发操作，一个是更新操作，另一个是查询操作，更新操作删除缓存后，查询操作没有命中缓存，先把老数据读出来后放到缓存中，然后更新操作更新了数据库。于是，在缓存中的数据还是老的数据，导致缓存中的数据是脏的，而且还一直这样脏下去了。
什么是NoSQL？ 关系型数据库代表MySQL。 非关系型数据库就是NoSQL。 对于关系型数据库来说，是需要把数据存储到库、表、行、字段里，查询的时候根据条件一行一行地去匹配，当量非常大的时候就很耗费时间和资源，尤其是数据是需要从磁盘里去检索。 NoSQL非关系型数据库存储原理非常简单（典型的数据类型为k-v）（key-value），不存在繁杂的关系链，比如mysql查询的时候，需要找到对应的库、表（通常是多个表）以及字段。 NoSQL数据可以存储在内存里，查询速度非常快。 NoSQL在性能表现上虽然能优
在之前我用了 3 篇文章的篇幅来介绍了用 Python 操作 MySQL 数据库，今天呢，我们再来介绍另一种可以用 Python 操作的数据库 MongoDB。
恩，准备进入正题了！最近一段时间没有怎么更新公众号，主要就是在做爬虫教程的一些准备工作，看看爬虫需要用到那些技术，然后做个计划出来,确定一下学习课程中缝,这不今天就先列出一些玩爬虫需要的准备工作!
很多新入职的小朋友可能和现在的我一样，对数据库的了解仅仅停留在建库建表增删改查这些操作，日常工作也都是用封装好的代码，别说底层原理了，数据库和系统之间是如何工作都不是很懂。
本项目基本目标：在猫眼电影中把top100的电影名，排名，海报，主演，上映时间，评分等爬取下来
老感觉phpmyadmin这东西一直在爆洞，前段时间刚好碰到一个有phpmyadmin和数据库密码，4.8.3的版本，潜意识的以为这种大家看烂了最新版应该很安全了，还是太菜了。
本系列文章将整理到我在GitHub上的《Java面试指南》仓库，更多精彩内容请到我的仓库里查看
本系列文章+代码案例时对爬虫的内容学习概括，希望更多的人知道如何使用c#进行简单爬虫项目的开发，并不存在恶意工具部分电商网站的观念。分享的的代码中对网页爬取都做了休眠等待（200-500）毫秒的限制，希望大家不要恶意使用。
今天我们来说说MySQL存储引擎，作为从事数据分析行业的朋友老说，我们不必细究MySQL存储引擎到底什么，我们了解就行了。
最近整理一个爬虫系列方面的文章，不管大家的基础如何，我从头开始整一个爬虫系列方面的文章，让大家循序渐进的学习爬虫，小白也没有学习障碍.
这篇文章是我最近刚做的一个项目，会带领大家使用多种技术实现一个非常有趣的项目，该项目是关于苹果机（iphoneX）的销售数据分析，是网络爬虫和数据分析的综合应用项目。本项目会分别从天猫和京东抓取iphoneX的销售数据（利用 Chrome 工具跟踪 Web 数据），并将这些数据保存到 Mysql 数据库中，然后对数据进行清洗，最后通过 SQL 语句、Pandas 和 Matplotlib 对数据进行数据可视化分析。我们从分析结果中可以得出很多有趣的结果，例如，大家最爱买的颜色是，最喜欢的是多少G内存的iphoneX等等，当然本文介绍的只是一个小的应用，时间够的话如果大家刚兴趣可以进一步进行推广。
MySQL 估计就是俺的主战场了，看来得多收藏一些 MySQL 的技术教程才行。正愁没啥东西可以写，就先转载一篇超简单的 MySQL 主从复制的配置教程好了。 怎么安装 mysql 数据库，这里不说了
一直想开发或者找一个开源的软件，功能就类似看云一样，用来搭建属于一套自己的文档管理系统，将自己平常的东西集中化管理，形成一个手册。于是找到了mindoc这样一款不错的文档管理系统软件。本文大致介绍一下如何安装，基本的功能介绍。
之前和大家分享过java爬虫框架 Jsoup，可还是要敲代码才能爬取东西，运营产品还是没法直接用，时不时来找大叔我爬些数据做分析，烦得很。
4、基本数据类型,基本二，字符串，列表，元组，字典，集合
事情的发生时这样的，在很久很久以前，SQL SERVER 有一个字段类型叫timestamp， 对比其他数据库都没有的 row version 自动化管理的东西。这个东西厉害的地方，虽然看上去可能是一个时间字段，但实际上不是，只要你对SQL SERVER 表的任意一行进行变动，那你放心那个字段的值一定会自动变化，这样你就可以通过这个字段，在程序里面先将这行的 timestamp值取出来，然后根据业务逻辑，如果需要过段时间你再去这一行变化或曾经变化过吗？之间与现在的timestamp字段值进行比对，那妥妥的能告诉你，这行的数据任意字段是否变化过，有人说MYSQL也有timestamp ，那个字段是通过时间来update 只要这个行变动过就触发timestamp 更改时间就可以了，当然datetime也行，早期版本不行。
在学习了python基础后，一心想着快速入门爬虫，因为我就是为爬虫而学的python,所以就找了这个豆瓣电影来爬取。好了，废话不多说，进入正题 1.找到网页并分析网页结构 首先进入豆瓣电影Top250
即在一个功能模块中新增其他功能，比方说你要下楼取个快递，你同事对你说帮我也取一下呗，你就顺道取了。在工作中如果系统中有些包和类中没有使用AOP，例如日志，事务和异常处理，那么就必须在每个类和方法中去实现它们。 代码纠缠每个类和方法中都包含日志，事务以及异常处理甚至是业务逻辑。在一个这样的方法中，很难分清代码中实际做的是什么处理。AOP 所做的就是将所有散落各处的事务代码集中到一个事务切面中。
在前面的压力测试过程中，主要关注的是对接口以及服务器硬件性能进行压力测试，评估请求接口和硬件性能对服务的影响。但是对于多数Web应用来说，整个系统的瓶颈在于数据库。
所有 MySQL 命令的列表：注意，所有文本命令必须在一行的开头，并且以分号“;”结束
1、最早的数据分析可能就报表 目前很多数据分析后的结果，展示的形式很多，有各种图形以及报表，最早的应该是简单的几条数据，然后搞个web页面，展示一下数据。早期可能数据量也不大，随便搞个数据库，然后SQ
1、在sql server中建立触发器，当某些条件满足时，取用户的AD信息，通过sql server的链接服务器，给相关用户发送邮件。
随着大数据的爆红，数据分析师这个职位也得到了越来越多的关注，千千万万懂些大数据技术的少年们都渴望成为高大上的“大数据科学家”，可是，你们真的准备好了吗？ 1、最早的数据分析可能就报表
可以看到我们使用 <properties resource="db.properties"/> 引入了我们的数据据库的配置文件，然后这个标签有两个属性 ： resource 和 uri 第一种直接是引用项目下的文件。第二个就是引用网络路径的和我们本地文件系统的资源。
MyBatis笔记二：配置 1.全局配置 1.properites 这个配置主要是引入我们的 properites 配置文件的： 12345678910111213 <properties resource="db.properties"/><environments default="development"> <environment id="development"> <transactionManager type="JDBC"/> <dataSource type
最近在学数据库系统概论，以前建表都是直接用workbeach，但是作为一个计算机专业的学生，我觉得能敲的时候就少点，所以分享一个自己用命令创建数据库和表的过程，希望对一些人有点用！
之前一篇文章已经谈到了数据库集群之主从集群也就是读写分离，也提到了读写分离其实只是分担了访问的压力，但是存储的压力没有解决。
前段时间发现了一个好玩的东西，一个python的第三方库itchat，它的功能很强大。只要你扫一下它所生成的二维码即可模拟登陆你的微信号，然后可以实现自动回复，爬取微信列表好友信息等功能。基于这个第三方库，写了个两百行的代码。
首先springboot最亮眼的特点就是简单，其次也是入门级的微服务，同时springBoot提供了一整套的微服务。
松哥原创的 Spring Boot 视频教程已经杀青，感兴趣的小伙伴戳这里-->Spring Boot+Vue+微人事视频教程
“ 在软件系统中,IO速度比内存速度慢,IO读写在很多情况下会是系统的瓶颈，我们也知道Redis的查询速度比直接查数据库要快，因为Redis将数据存在内存中，而Mysql的查询是执行IO操作。那么他们之间到底有多大的差距呢？”
本文记录了我在实际工作中关于数据库操作上一些小经验，也是新手入门golang时我认为一定会碰到问题，没有什么高大上的东西，所以希望能抛砖引玉，也算是对这个问题的一次总结。
MYSQL 的慢查询一般是开发人员和DBA，获取糟糕的SQL和可能缺少索引的一种方法，这样的方法已经伴随了MYSQL 一致到了MYSQL 5.7，但是否我们可以有其他的方法来获取这样的可用性的信息，进而减少对SLOW LOG的依赖，这是一个可以探讨的问题。（这里不是要替代，而是抱着学习和探索的心态，也抱着顺应发展的一种心态）
开源地址：https://gitee.com/tianyalei/md_blockchain
在对于爬取数量数量较少时，我们可以将爬虫数据保存于CSV文件或者其他格式的文件中，既简单又方便，但是如果需要存储的数据量大，又要频繁访问这些数据时，就应该考虑将数据保存到数据库中了。目前主流的数据库有关系性数据库MySQL，以及非关系性数据库MongoDB和Redis等。这里我先来讲讲MySQL。
对于一个做后台不久的我，起初做项目只是实现了功能，所谓的增删改查，和基本查询索引的建立。直到有一个面试官问我一个问题，一条sql查询语句在mysql数据库中具体是怎么执行的？我被虐了，很开心，感谢他。于是开始了深入学习mysql。本篇文章通过
InfluxDB 数据模型将时间序列数据组织到存储桶和测量中。一个桶可以包含多个测量值。测量包含多个标签和字段。
当面试官问:"网站高并发怎么做?"时,该怎么回? 在高并发下,我们(初级程序员)能做什么? 一:mysql方面 mysql方面,我们主要要从以下几点去考虑: 1:索引 mysql其实没有想象中的那
领取专属 10元无门槛券
手把手带您无忧上云
