AI 显然是最近几年非常火的一个新技术方向，从几年前大家认识到 AI 的能力，到现在产业里已经在普遍的探讨 AI 如何落地了。
前言一次巡检过程中发现数据库使用内存有些过量，innodb_buffer_pool_size 设置值为 20G ，但实际物理内存消耗为 37G ，总虚拟内存消耗达 42G ，直接导致监控报警，于是开启了一次内存使用探究之旅...14769 mysql 15 0 42.1g 37g 4792 S 58.1 79.5 25660:41 mysqld innodb_buffer_pool_size 只设定了 20G...[root@abc ~]# grep innodb_buffer_pool_size /etc/my.cnf innodb_buffer_pool_size = 20G[root@abc ~]# 加上其它七七八八的参数总量也绝不会超过
最近在已有数据库服务器上又新建了4个数据库实例，目前一共有9个数据库实例。环境搭好以后做检查的时候。根据反馈，有个job报如下的错误。...查看数据库process的值，一看还真是，当时只设置了150，这个job平均要占用100多个session,其他的一些环境加进来，肯定不够。.../dev/vx/dsk/vgusgsPT301/lvol6 20G 8.5G 11G 44% /opt/app/oracle/db1 /dev/vx...20G 11G 8.7G 56% /opt/app/oracle/db4 用top查看空余内存，也还有不少。...也难怪新加的第3个数据库实例没有问题，23000+9000=32000，刚好占完了，一点都没剩下。
作者：任仲禹，爱可生数据库高级工程师，擅长故障分析和性能优化。 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。 本文约 5000 字，预计阅读需要 15 分钟。...引言 OceanBase 单机集中式集群（即单机版，后文不再称“单机集中式集群”）是OceanBase 推出的极简数据库架构，区别于分布式集群架构，单机版无多副本和扩缩容能力，适用于开发测试环境及数据安全性要求不高的业务系统...检查和启动数据库 确认 observer 程序在目标机器安装成功。...启动 OceanBase 数据库。 obd cluster start obtest 启动完成后，使用 root 登录数据库（默认登录 sys 租户）进行创建业务租户等操作。...注意：为减少不同服务器之间误差，本次测试 MySQL 和 OB 数据库都在同一台服务器上进行测试，测试交替进行，MySQL 测试完毕后就关闭 mysqld 服务，启动 OB 数据库进行测试。
大体的变更如下： Change Processes from 10000 to 18000 Change PGA from 10G to 20G Change Buffer Cache from 20G...，查看数据库的负载，没有发现什么问题。...过了一会回来的时候，连接数据库时发现数据库一下子特别慢，敲一个命令都得等好一会儿才能返回结果。 简单实用top查看系统情况，发现剩余进程只有500M左右了。...这个时候还是得靠日志，数据库启动的时候会产生一些hugepage相关的信息。 正常情况下，如果hugepage设置正常，可以从数据库的日志中我们发现如下的一段内容。...昨晚的变更如下： Change Processes from 10000 to 18000 Change PGA from 10G to 20G Change Buffer Cache from 20G
摘要：最近项目组里来了很多新人，对linux分区及各种应用使用的分区不了解，导致测试数据库时突然发现某一个分区被写满了，不得不重装OS.实在看不下去了，特此分享我的一些利用LVM实现动态扩容的心得，希望对大家有帮助...5.查看当前逻辑卷的空间状态，如下图：/ 50G、/var 200G、/home 100G、swap 20G ? ?...此时卷组‘cl’有20G空余空间，及/dev/sdb1,将其全部扩展至/home ?...11.此时20G磁盘虽已扩展至 /home，但并没写入文件系统；进入/etc/fstab确认 /home文件系统—>ext4 ? 12.写入文件系统，使扩容生效 ?...总结：安装os时选择LVM，当跑数据库发现分区不够用时，即可按此法实现动态扩容，而不破坏分区内原有文件，更不用重装系统，妈妈再也不用担心我分区大小够用了！
之前的推文已经分享了数据库优化的方法，链接为https://mp.weixin.qq.com/s/6Atzk9UKPJRxxAs0nsKBXg 。...install sysbench sysbench --version 1.2 准备测试文件 生成后续需要使用的测试文件，block大小为16k（MySQL DBA都懂的，哈哈），创建4个文件，合计20G...[root@mha1 ~]# sysbench fileio --file-num=4 --file-block-size=16384 --file-total-size=20G prepare sysbench.../s 4.3 随机读 [root@mha1 ~]# sysbench fileio \ > --time=180 \ > --threads=24 \ > --file-total-size=20G...特别注意：磁盘IO的调度算法还需要根据磁盘情况、数据库类型、数据库架构、业务场景（OLTP、OLAP等）等各种场景进行区分，不同的场景调度算法也要调整，不可一概而论。
故事背景 数据库明细 说在前面： 数据库： MongoDB集群 4个分片节点 分片节点规格： 16核 / 32G CentOS 7.4 64位 数据目录所在磁盘: 300G 49G 252G 17% /...--r-- 1 root root 20G Jul 30 23:50 shard.log.2018-07-30 -rw-r--r-- 1 root root 20G Jul 31 23:50 shard.log...--r-- 1 root root 20G Jul 30 23:50 shard.log.2018-07-30 -rw-r--r-- 1 root root 20G Jul 31 23:50 shard.log....2018-07-31 -rw-r--r-- 1 root root 20G Aug 1 23:50 shard.log.2018-08-01 -rw-r--r-- 1 root root 20G...总结 mongodb日志轮询的问题 echo > log会往文件头部插入\n即16进制的0a 在数据库正常运行中，对log文件是加了锁的，强制执行echo > log是无法进行覆盖的，会将所有的数据全部置为
请注意：卷会因为文件系统而产生一些额外开销 df -BG Filesystem 1G-blocks Used Available Use% Mounted on /dev/root 20G 2G 18G...tmpfs 1G 0G 1G 0% /run/lock tmpfs 1G 0G 1G 0% /sys/fs/cgroup tmpfs 1G 0G 1G 0% /run/user/1000 /dev/sdc 20G...nextcloud/ 使用Docker Compose配置Nextcloud Nextcloud提供了一个官方docker-compose.yml文件，它的用处是在运行Nextcloud容器时将数据保存到数据库...: always 启动Docker Compose配置： docker-compose up -d 你应该把Linode的公共IP地址端口8080开放给Nextcloud 创建管理员帐户时，打开存储和数据库的下拉菜单...dev/shm tmpfs 1G 1G 1G 2% /run tmpfs 1G 0G 1G 0% /run/lock tmpfs 1G 0G 1G 0% /sys/fs/cgroup /dev/sdc 20G
------------操作说明------------ Linux系统： 阿里云CentOS 7.1（20G） 操作工具： SecureCRT...7.0 待挂载的数据盘： 24G 分区目标： 先分4G作为CentOS7.1系统的交换空间，剩余20G作为普通物理空间 1 查看当前Linux系统分区信息 由于阿里云主机默认系统盘大小为...20G，通过命令df -h可以看到分区/dev/xvda1挂载在当前CentOS7.1系统的根目录/下面，系统本身占用了2.1G空间。...[root@typecodes ~]# df -h Filesystem Size Used Avail Use% Mounted on /dev/xvda1 20G 2.1G.../ 512 bytes 3 开始将磁盘进行分区 按照先前设定的目标，将磁盘/dev/xvdb划分成两个区：一区用于CentOS7.1系统的交换空间，二区就是普通的Linux物理空间，用作仓库存放备份的数据库文件
server3:/dir3 server4:/dir4 四 GlusterFS案例部署 4.1 实验环境 操作系统 IP 主机名 硬盘数量 centos 7.4 20.0.0.100 node1 sdb：20G...sdc：20G sdd：20G sde：20G centos 7.4 20.0.0.12 node2 sdb：20G sdc：20G sdd：20G sde：20G centos 7.4 20.0.0.27...node3 sdb：20G sdc：20G sdd：20G sde：20G centos 7.4 20.0.0.30 node4 sdb：20G sdc：20G sdd：20G sde：20G centos...7.4 20.0.0.10 node5-client sdb：20G sdc：20G sdd：20G sde：20G 4.2 关闭防火墙与selinux 各节点关闭防火墙与核心防护 [root@node1
0 20G 0% /dev run 20G 1.6M 20G 1% /run /dev/nvme0n1p9 144G 41G 95G...31% / tmpfs 20G 0 20G 0% /dev/shm tmpfs 4.0M 0 4.0M 0% /sys/fs/...cgroup tmpfs 20G 69M 20G 1% /tmp /dev/nvme0n1p1 300M 31M 269M 11% /boot/efi tmpfs...0 20G 0% /dev run 20G 1.6M 20G 1% /run /dev/nvme0n1p9 144G 41G 95G...31% / tmpfs 20G 0 20G 0% /dev/shm tmpfs 4.0M 0 4.0M 0% /sys/fs/
我们测试中固定配置： -filename=tstfile 指定测试文件的name -size=20G 指定测试文件的size为20G -direct=1...-runtime=1 -group_reporting -name=mytest done #测试单个文件 fio -filename-testfile -size=20G -direct=1 -...-runtime=1 -group_reporting -name=mytest done #测试单个文件 fio -filename-testfile -size=20G -direct=1 -...-runtime=1 -group_reporting -name=mytest done #测试单个文件 fio -filename-testfile -size=20G -direct=1 -...-runtime=1 -group_reporting -name=mytest done #测试单个文件 fio -filename-testfile -size=20G -direct=1 -
适合比如一个跑在3~5个节点上的应用，或者适合一个小型的数据库，会使用更少的存储，这里20G，那里20G，这种情况下，支持每节点30个容器，而Portworx Enterprise是每节点100个容器，
支付宝爆发了数据泄露丑闻，超过20g的支付数据资料被支付宝前员工从系统中窃取出去，并出售给第三方，后被媒体曝光。...“支付宝内鬼盗卖用户信息被抓凡客被指是最大买家”相关事件的前后动态： 1，据报道，阿里巴巴旗下支付宝的前技术员工李明，利用工作之便，在2010年分多次在公司后台下载了支付宝用户的资料，资料内容超20G。...这些电商从业人员会选择一些付费的“情报工具”，通过搜索引擎、数据库等技术，对淘宝店进行数据分析，比如你店铺的竞争对手做了哪些直通车广告，用了哪些关键词，效果如何，以及行业分析、店铺分析、宝贝分析、买家搜索等...举个例子，比如卖女性内衣的，如果手上有一个数据库，得知喜欢在网上买内衣的女性消费者，她们购物的频次如何，价格区间如何，消费规律如何，喜欢什 么品牌等 等，如果知道了这些信息，我就可以提炼出更多的信息...李明离职前从支付宝下载的数据多达20G以上，只要通过一些软件录入数据库再予以专业分析的话，基本上可以将所有支付宝、淘宝用户的消费习惯尽收眼底。“这些用户信息，都是可以带来钱的，可以变现的。”
local[50]") \ .config("spark.executor.memory", "10g")\ .config("spark.driver.memory", "20g...查询语句 spark.sql(""" show partitions 表名 """).show() Hive中 # 显示表分区： hive> show partitions table_name; 数据库中
pre_page_sga boolean FALSE sga_max_size big integer 20G...sga_target big integer 20G SQL> show parameter pga NAME...当然数据库层面没有任何的异常，也没有限制sga无法设置成功之类的问题。听起来倒也相安无事。...查看v$dynamic_components得到的信息如下： catest的内存组件大小为：2G+18G=20G $sh showbuffer.sh [oracle@scycard2 dbm_lite...这个时候问题就来了，为什么能够设置sga,pga为一个较高的值，而且数据库中似乎能够验证通过。 这个地方也就只能用kernel层面才可以说清了。
defaults 0 0） mount -a df -h LVM逻辑卷的扩展 一、卷组有足够的剩余空间 1.直接扩展逻辑卷空间 lvextend -L 20G.../dev/systemvg/mylv （注：原10G加到20G，可直接写20G，也可写为+10G） 2.扩展文件系统 resize2fs /dev/systemvg/mylv...---xfs_growfs（xfs文件系统） 二、卷组没有足够的剩余空间 首先扩展卷组 vgextend systemvg /dev/vdc6 扩展逻辑卷空间 lvextend -L 20G
墨墨导读：某客户单位数据库出现异常，大致现象是：数据库状态是open的，但是其中一个数据文件无法访问，本文分享排查原因与解决问题的整个过程。...2019", line 1071 ORA-00942: 表或视图不存在 ORA-02063: 紧接着 line (起自 BM_SJJH) alter database datafile 11 resize 20g...Completed: alter database datafile 11 resize 20g Wed Apr 29 03:10:15 2020 Corrupt Block Found CONT =...由于这里文件只有1个，大小20g左右，通过dd 拼接即可。...当然，其他数据库比如MySQL、PostgreSQL除外。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
云直播
