首页
学习
活动
专区
工具
TVP
发布

进击的Coder

专栏成员
559
文章
1325227
阅读量
200
订阅数
一个比 SQLite 还好用的数据库,诞生了!
众所周知,很多小微型应用程序都需要一些数据处理和计算能力,但如果集成一个数据库就显得太沉重了,正因如此,小巧轻量的 SQLite 才会被广泛应用。
崔庆才
2023-12-13
5470
你知道 Python 其实自带了小型数据库吗
DBM(DataBase Manager)是一种文件系统,专门用于键值对的存储,最初是在 Unix 平台实现,现在其它平台也可以用。对于 KV 模型,DBM 提供了一个轻量级、高效的存储解决方案。
崔庆才
2023-12-13
2730
微信为什么使用 SQLite 保存聊天记录?
这是「进击的Coder」的第 694 篇技术分享 作者:Markus Winand 原文:https://modern-sql.com/blog/2019-01/sqlite-in-2018 “ 阅读本文大概需要 9 分钟。 ” SQLite 是一个被大家低估的数据库,但有些人认为它是一个不适合生产环境使用的玩具数据库。事实上,SQLite 是一个非常可靠的数据库,它可以处理 TB 级的数据,但它没有网络层。接下来,本文将与大家共同探讨 SQLite 在过去一年中最新的 SQL 功能。 SQLite “只
崔庆才
2022-07-18
2.1K0
阿里二面被问 MySQL 架构源码,11:00 进去的,11:05 就出来···
前两天看到字节一个老哥写的帖子,提到高阶开发者必须掌握的技能,其中他明确提出了“精通 MySQL”。 为啥 MySQL 对开发人员如此重要? 第一,不管你去面试哪家公司,数据库是必问项,而 MySQL 使用范围广,无论如何是避不开的; 第二,你对 MySQL 掌握的越深入,意味着你能做的事情越多。 实现业务功能,要懂基本的 SQL 语句; 性能优化,那么索引、引擎就要摸透; 想分库分表,主从同步机制、读写分离你就得了解; 安全方面,你得知道权限、备份、日志等等; 涉及到云数据库,就得懂源码及瓶颈。 我在面
崔庆才
2022-05-10
5530
一个 yyds 方向,薪资大幅度碾压 Java 开发!
数仓技术应对关系型结构化数据游刃有余,但对于多元异构数据,却爱莫能助。最近行业大佬都在聊怎么部署数据湖,这波操作未来走向如何? 数据湖技术能够实现全量数据的单一存储,通常存储原始格式的对象块或者文件。不管是传统数仓承载的结构化数据还是半结构化数据、非结构化数据、二进制数据等任意类型的数据,数据湖都可以轻松实现采集、存储和分析。 更为人性化的是,数据湖可根据企业的业务需求提供可大可小的弹性扩充,数据可在治理规则下自由流动,采用统一的存储引擎,支持多模式计算引擎,可以运行从控制面板和可视化到大数据处理、实时分
崔庆才
2022-03-08
5330
Python 3.9,来了!
过去一年,来自世界各地的开发者们一直在致力于 Python3.8 的改进。Python 3.9 beta 版本已经存在了一段时间,第一个正式版本于 2020年 10 月 5 日发布。
崔庆才
2020-10-30
2K0
干货|这可能是最全的高并发、高性能、高可用解决方案总结
在计算机中,缓存是存储数据的硬件或软件组件,以便可以更快地满足将来对该数据的请求。存储在缓存中的数据可能是之前计算结果,也可能是存储在其他位置的数据副本。
崔庆才
2020-09-18
1.7K0
硬货来了!轻松掌握 MongDB 流式聚合操作
信息科学中的聚合是指对相关数据进行内容筛选、处理和归类并输出结果的过程。MongoDB 中的聚合是指同时对多个文档中的数据进行处理、筛选和归类并输出结果的过程。数据在聚合操作的过程中,就像是水流过一节一节的管道一样,所以 MongoDB 中的聚合又被人称为流式聚合。
崔庆才
2019-10-08
4.7K0
教你实现一个可视化爬虫监控系统
本文并不是讲解爬虫的相关技术实现的,而是从实用性的角度,将抓取并存入 MongoDB 的数据 用 InfluxDB 进行处理,而后又通过 Grafana 将爬虫抓取数据情况通过酷炫的图形化界面展示出来。
崔庆才
2019-09-04
3K1
会 Python 就能年薪 40w?答案早就写在 JD 上了...
现在的职场竞争越来越激烈,不学上一两门新技能,保持自己知识更新,很容易被年轻后辈超越。有些人选择学一门外语,有些人选择学习职场上为人处事的能力。
崔庆才
2019-08-06
5380
到底什么是数据中台?
最近可能大家听到“数据中台”这个词越来越频繁了,有时候我跟一些朋友聊起来,也是都在说这个,但是一直不知道这到底是个什么。最近就看到这篇文章,觉得说的还挺好的,分享给大家看看,希望大家看完能对数据中台有一些认识。
崔庆才
2019-07-25
19.7K0
使用 Python 分析 14 亿条数据
你用 Python 处理过的最大数据集有多大?我想大概不会超过上亿条吧,今天分享一个用 Python 处理分析 14 亿条数据的案例。
崔庆才
2019-05-24
7380
time date datetme timestamp 傻傻分不清楚
时间格式对于任何一个工程师来说都是绕不开的知识,爬虫工程师同样如此。爬虫工程师要将不同网站的相同类型内容存放在同一个数据表当中,常见的有:
崔庆才
2018-12-27
2.3K1
让我大吃一堑的前后分离 web 站模拟登录
scrapy 模拟登录相信大家都会,而且非常的熟练。但是技术一直在进步(尤其是前端领域),近几年前后端分离的趋势越来越明显,很多 web 站都采用前后端分离的技术。以前保存用户身份信息靠 Cookie,那前后分离这种技术组合靠什么校验用户身份呢?
崔庆才
2018-12-26
1.2K0
Python操作Redis,你要的都在这了!
Redis是一个基于内存的高效的键值型非关系型数据库,存取效率极高,而且支持多种存储数据结构,使用也非常简单。本节中,我们就来介绍一下Python的Redis操作,主要介绍RedisPy这个库的用法。 1. 准备工作 在开始之前,请确保已经安装好了Redis及RedisPy库。如果要做数据导入/导出操作的话,还需要安装RedisDump。 2. Redis 和 StrictRedis RedisPy库提供两个类Redis和StrictRedis来实现Redis的命令操作。 StrictRedis实现
崔庆才
2018-06-25
33.8K0
Scrapy框架的使用之Scrapy入门
接下来介绍一个简单的项目,完成一遍Scrapy抓取流程。通过这个过程,我们可以对Scrapy的基本用法和原理有大体了解。 一、准备工作 本节要完成的任务如下。 创建一个Scrapy项目。 创建一个Spider来抓取站点和处理数据。 通过命令行将抓取的内容导出。 将抓取的内容保存的到MongoDB数据库。 二、准备工作 我们需要安装好Scrapy框架、MongoDB和PyMongo库。 三、创建项目 创建一个Scrapy项目,项目文件可以直接用scrapy命令生成,命令如下所示: scrapy st
崔庆才
2018-06-25
1.3K0
Python操作MongoDB看这一篇就够了
MongoDB是由C++语言编写的非关系型数据库,是一个基于分布式文件存储的开源数据库系统,其内容存储形式类似JSON对象,它的字段值可以包含其他文档、数组及文档数组,非常灵活。在这一节中,我们就来看看Python 3下MongoDB的存储操作。 1. 准备工作 在开始之前,请确保已经安装好了MongoDB并启动了其服务,并且安装好了Python的PyMongo库。 2. 连接MongoDB 连接MongoDB时,我们需要使用PyMongo库里面的MongoClient。一般来说,传入MongoDB的
崔庆才
2018-06-25
22.8K0
Python操作MySQL存储,这些你都会了吗?
在Python 2中,连接MySQL的库大多是使用MySQLdb,但是此库的官方并不支持Python 3,所以这里推荐使用的库是PyMySQL。 本节中,我们就来讲解使用PyMySQL操作MySQL数据库的方法。 1. 准备工作 在开始之前,请确保已经安装好了MySQL数据库并保证它能正常运行,而且需要安装好PyMySQL库。 2. 连接数据库 这里,首先尝试连接一下数据库。假设当前的MySQL运行在本地,用户名为root,密码为123456,运行端口为3306。这里利用PyMySQL先连接MySQL
崔庆才
2018-06-25
1.7K1
Docker 微服务教程
Docker 是一个容器工具,提供虚拟环境。很多人认为,它改变了我们对软件的认识。 站在 Docker 的角度,软件就是容器的组合:业务逻辑容器、数据库容器、储存容器、队列容器......Docke
崔庆才
2018-06-25
1.1K0
轻松获得海量稳定代理!ADSL拨号代理的搭建
我们尝试维护过一个代理池。代理池可以挑选出许多可用代理,但是常常其稳定性不高、响应速度慢,而且这些代理通常是公共代理,可能不止一人同时使用,其IP被封的概率很大。另外,这些代理可能有效时间比较短,虽然代理池一直在筛选,但如果没有及时更新状态,也有可能获取到不可用的代理。 如果要追求更加稳定的代理,就需要购买专有代理或者自己搭建代理服务器。但是服务器一般都是固定的IP,我们总不能搭建100个代理就用100台服务器吧,这显然是不现实的。 所以,ADSL动态拨号主机就派上用场了。下面我们来了解一下ADSL拨号
崔庆才
2018-06-25
10K2
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档