腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

阿dai_linux

专栏作者

250

文章

591991

阅读量

41

订阅数

hadoop xml mapreduce 大数据存储

概述 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放

2020-01-27

5770

MySQL编码引发的两个问题原

存储数据库云数据库 SQL Server sql

先讲一下写该文章的原因，首先，工作中又遇到一条很熟悉的MySQL报错信息 Cause: java.sql.SQLException: Incorrect string value:Cause: java.sql.SQLException: Incorrect string value… （emoji表情存储导致），原因是MySQL的字符集导致的；其次，因为一直听说数据库变更可能锁表，但是一直不知道到底哪些操作会导致锁表。所以今天对相关知识做一个系统的整理。

2019-05-14

2.6K0

存储数据库 sql 数据安全

一．RAID定义 RAID(Redundant Array of Independent Disk 独立冗余磁盘阵列)技术是加州大学伯克利分校1987年提出，最初是为了组合小的廉价磁盘来代替大的昂贵磁盘，同时希望磁盘失效时不会使对数据的访问受损失而开发出一定水平的数据保护技术。RAID就是一种由多块廉价磁盘构成的冗余阵列，在操作系统下是作为一个独立的大型存储设备出现。RAID可以充分发挥出多块硬盘的优势，可以提升硬盘速度，增大容量，提供容错功能够确保数据安全性，易于管理的优点，在任何一块硬盘出现问题的情况下都可以继续工作，不会受到损坏硬盘的影响。

2019-04-03

7170

磁盘管理——逻辑卷lvm 原

操作流程：磁盘分区-->创建物理卷-->划分为卷组-->划分成逻辑卷-->格式化、挂载-->扩容。

2019-04-03

8490

DAS、NAS、SAN存储技术的比较转

存储流计算 Oceanus tcp/ip

网络储存设备 (Network Attached Storage，NAS)，是一种专门的资料储存技术的名称，它可以直接连接在电脑网络上面，对不同操作系统的使用者提供了集中式资料存取服务。

2019-04-03

3.2K0

inode、block和磁盘性能的关系原

理解inode，要从文件储存说起。　　文件储存在硬盘上，硬盘的最小存储单位叫做"扇区"（即：Sector）。每个扇区储存512字节（相当于0.5KB）。　　操作系统读取硬盘的时候，不会一个个扇区地读取，这样效率太低，而是一次性连续读取多个扇区，即一次性读取一个"块"（block）。这种由多个扇区组成的"块"，是文件存取的最小单位。"块"的大小，最常见的是4KB，即连续八个 sector组成一个 block。　　文件数据都储存在"块"中，那么很显然，我们还必须找到一个地方储存文件的元信息，比如文件的创建者、文件的创建日期、文件的大小等等。这种储存文件元信息的区域就叫做inode，中文译名为"索引节点"。　　block中存储的就是文件的实际数据，比如说，照片，视频，音频等等，但是有一点需要注意！就是inode当中不包含文件名！一个文件的文件名，存储在上级目录的block中！　　其实inode和block之间的关系就像是一本书一样，inode是一本书的目录，一本书会有很多内容，一个知识点或者一个故事会占很多页，一个block就相当于书中的一页内容。

2019-04-03

3.1K0

硬件设备——磁盘相关原

磁盘的组成：主要由盘片、机械手臂、磁头、与主轴马达所组成。而数据的写入其实是在盘片上面。盘片上面又可细分出扇区（Sector）与柱面（Cylinder）两种单位，其中扇区每个为512bytes那么大。假设磁盘只有一个盘片，那么盘片如图所示：

2019-04-03

6190

Dell R420服务器手动安装centos7系统系列问题

存储 centos linux https 网络安全

当你使用Maccopy大文件时应该会遇到如下提示： “相对于卷宗的格式，‘****’文件太大，无法拷贝。“

2019-04-03

3.1K1

Redis介绍与安装原

云数据库 Redis memcached 存储编程算法

查看到有两个版本的Redis，豁然开朗，将原始版本（Redis v3.2.11），清除Redis v3.2.11（make clean），并删除/user/local/redis。然后重新安装Redis v4.0，但是另一个问题出现了、安装路径变了，无法直接执行redis-server命令，于是进行如下操作：

2019-04-03

8840

使用 MegaCLI 检测磁盘状态并更换磁盘原

MegaCLI使用方法：http://blog.51cto.com/daixuan/1863567

2019-04-03

3.9K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态