开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

什么叫做数据冗余 ( Data Redundancy )?

数据冗余是指在一个数据存储系统中，相同或相似的数据被重复存储的现象。这种现象可能导致存储空间的浪费，同时也可能增加数据管理的复杂性。数据冗余可以通过数据备份、归档等方式来减少，但可能会增加数据存储的成本和复杂性。

相关搜索:为什么管理者应该防范数据库冗余？为什么data Studio不聚合数据？处理异常和防止冗余的最佳数据库模式是什么？为什么在执行data.append(更多数据)时会迅速崩溃？或data = data1 + data2 cleaned_data和普通数据有什么不同？- django 为什么控制不在req.on(" data "，data => {})中进行；我正在尝试处理POST方法数据 pandas_datareader.get_data_yahoo函数返回什么类型的数据？什么是数据，AlphaVantage Api文档中的meta_data部件为什么python在加载数据集".load_data()“时失败为什么我不能用load_data()方法加载mnist数据集？d3.request.get中' data‘参数的数据类型是什么？从firestore获取数据时，有没有什么理由不立即调用data()？我使用tf.data.TFRecordDataset读取tfcord，为什么我读取的数据不正确在vue.js中访问“数据”时，this.example和this.$data.example有什么不同为什么data.table解嵌嵌套时间随特定数据集行数的平方增长？在TensorFlow2.0中迭代无限重复的tf.data数据集的正确方法是什么当使用Spring/JPA并使用data.sql插入初始数据时，为什么ID列不能自动递增？为什么在向Google Data Studio添加数据源时会将其添加到Google Drive？为什么Spring data抛出java.sql.SQLException: ResultSet来自更新。无数据。关于执行原生mysql查询如果我需要在某些参数更改后重新加载数据，在MVVM中使用Live data的正确方式是什么？

相关搜索:

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

kafka Disks and Filesystem（磁盘和文件系统）

转载请注明来源地址：http://www.cnblogs.com/dongxiao-yang/p/5206631.html

02

干货！大数据专业词汇整理，不知道容易被别人喷晕！

摘要总结：本文介绍了大数据领域的一些专业词汇，包括数据存储、数据仓库、数据湖、数据集市、元数据管理、数据质量管理、数据治理、数据生命周期管理、数据安全和数据隐私等。同时，文章还探讨了大数据技术如何帮助金融机构提升效率，降低成本，并分析了大数据技术在证券、银行、保险等行业的具体应用。

06

OEA ORM 框架中的冗余属性设计

OEA 框架提供了多种方式来优化分布式数据查询的性能，本篇将会说明如何以声明 OEA 冗余属性的方式，来实现轻量级的数据冗余，以减少关联查询次数及网络数据传输量，提高分布式应用程序性能。冗余属性功能说明 OEA 冗余属性在框架层面提供了一种易用的机制，把指定冗余路径的关系对象中的属性值复制到本对象中，以解决关联查询、关联数据量等性能问题。应用开发人员只需要简单的定义一个冗余属性，而框架会自动完成对冗余属性的赋值、更新操作。 ORM 中的 N+1 问题示例在进销存示例中，采购订单的列表界面中，每一行采购订

09

ASM变迁以及总结（10G--＞19C）

从10G开始，出现GRID网格工具，ASM不支持存放OCR和Voting Disks，需要使用OCFS或者OCFS2。

02

何谓“反范式化”？

关注「前端向后」微信公众号，你将收获一系列「用心原创」的高质量技术文章，主题包括但不限于前端、Node.js以及服务端技术

03

Oracle 20c 新特性：文件组模板

Oracle 20c 提供了文件组模板新特性。如果没有文件组模板，则要更改自动创建的文件组的属性，则在创建关联文件后必须手动更改属性，这会触发不必要的重新平衡。文件组模板功能提供了更好的选择。

02

Oracle 12c ASM专题｜Flex磁盘组到底有多Fexible？

原文链接 https://martincarstenbach.wordpress.com/2017/08/22/12-2-new-feature-the-flex-asm-disk-group-part-4/ 译者周天鹏 Flex Disk Group属性前三部分我分享了关于ASM Flex Disk Group、File Group和Quota Group如何强制对存储空间进行限制的实验结果。但是我还没有测试修改磁盘组属性会产生什么效果。我所关心的属性都是数据保护级别相关的，正如官方文档中所讨论的

06

【DB笔试面试704】在Oracle中，ASM是什么？它有哪些优点？

ASM（Auto Storage Management，自动存储管理）是一种用于管理磁盘的工具。ASM是Oracle为了简化数据库的管理而推出来的一项新功能，这是Oracle自己提供的卷管理器，主要用于替代操作系统所提供的LVM，它不仅支持单实例，同时对RAC的支持也是非常好。ASM可以自动管理磁盘组并提供有效的数据冗余功能。使用ASM后，DBA不再需要对Oracle中成千上万的数据文件进行管理和分类，从而简化了DBA的工作量，可以使得工作效率大大提高。ASM支持Data Files，Online Log Files，Control Files，Archived Logs，RMAN backup sets等文件。

01

初识glusterfs

工作中经常发现公司机房里有些服务器上的硬盘空间不足，但还存在一些服务器上有很多空余空间，所以一直在想如何高效利用这些硬盘空间的问题。最初的解决方案是NFS，即在有空余空间的服务器上开启NFS服务器，然后需要硬盘空间的服务器通过NFS挂载过去。用过一段时间后发现存在以下问题：有空余空间的服务器数量还很多，得作好记录哪个服务器由于什么用途export了哪些目录出去了，export的目录被谁挂载了。 NFS文件共享方式不存在数据冗余存储，主要依靠底层的存储技术如RAID来保证数据的安全。后来在深度实践KVM这

04

ASM 翻译系列第十八弹：ASM Internal ASM file number 5

原作者：Bane Radulovic 译者：魏兴华审核：魏兴华 ASM file number 5 本章讲述ASM的5号文件，5号文件是ASM的模板目录，包含了磁盘组中所有的文件模板的信息。有两种类型的模板：一种是系统自带的，一种是用户创建的，默认的模板（系统自带的）已经包含ASM的所有文件类型，创建文件时会根据文件类型自动匹配，用户创建的模板只会在用户特别指定时会使用。每一个模板包含了如下的一些信息： ● 每个模板的名称（对于默认模板它的名称其实就是文件类型） ● 文件冗余度（默认是

06

Oracle 12c系列(三)｜存储资源隔离 Flex Diskgroup

作者姚崇出品沃趣技术在12cR2版本中，我们可以在一个ASM Diskgroup提供不同的冗余级别和配额给不同的数据库使用。提到Quota会让人立即想到创建用户在表空间上的配额限制，其实有点类似。 Flex磁盘组中文件的冗余是灵活的，并允许在数据库级别进行存储管理。你可以以数据库为粒度在磁盘组内做配额限制，并且你可以给不同的文件组定义不同的冗余度（即不同的数据库、PDB可以有不同的冗余度）。换句话说就是，你可以在同一个flex磁盘组里建两个库，数据库1是Normal冗余度，数据库2是Hig

09

Juniper SRX通用手册

在设备作为集群连接之后，一个设备上的插槽编号会发生变化，因此接口编号也会发生变化。两个节点中每个槽的槽号使用以下公式确定：

03

新数仓系列：MongoDB关键能力和特性梳理

最近看一本书，铃木敏文的《零售的哲学》，里面提到一个很有意思的观点，711核心使命是提供便利，围绕便利场景，提供一系列食品、ATM服务等，而不是和超市去PK货物品种。联想到常见的NOSQL数据库和传统关系型数据的区别也有点类似；传统关系型数据库发展了几十年，就像超市一样，功能非常多，非常完善，也是进入到各个行业中去。NOSQL从一出生就是带着解决关系数据中的某些场景的不突出/不擅长的使命。另外一些新数据库又思考着突破NoSQL的场景的限制，想着同时解决OTLP/OLAP，也有诞生了NewSQL或者HTA

06

SIMATIC PCS 7 V8 OS冗余客户机/服务器结构配置

对于规模较大的系统，通常使用客户机/服务器结构。在这种结构中有一个或者多个服务器负责AS数据采集，归档和报警信息的处理，从性能考虑，服务器一般不提供操作员界面。在整个网络中，最多可以容纳18个（对）服务器，每个（对）服务器可以连接40个客户机（如果客户机使用多屏操作，则每一个屏幕算作一个客户机）。

03

案例分析：程序媛记一次特殊的“故障”处理

作者 | 兰珊，多年数据库服务经验、主要服务于政府、电网等企。擅长数据库升级、迁移、故障处理。

02

数据库服务：数据库表空间扩容

http://www.enmotech.com/services/service.html（专业数据库服务）

04

segRDA: 分段冗余分析

Title: segRDA: An R package for performing piecewise redundancy analysis

03

数仓分层理论_多元分层理论

在实际工作中，数仓分层、元数据管理、数据质量管理一直是一个持续优化的过程，我们公司业务也是在持续的做数仓的优化工作，在数据治理这方面还是欠缺很多的经验的。下面先简单整理了一下第一个理论部分的相关笔记。

03

问题：未清空磁盘被添加到磁盘组触发坏块

导读：当我们生产系统中遇到ASM磁盘组容量快被耗尽时，添加磁盘扩容是处理该问题较为常用的手段之一，几乎每个专业的DBA都操作过。但是设想一下，如果添加到ASM磁盘组的磁盘没有提前被清空，会出现什么样的情况呢？本文分享一起客户近期碰到的未清空磁盘被添加到磁盘组触发坏块（Read datafile mirror）的案例，在此提醒大家注意。

01

GlusterFs使用解析，关于新版本部分Volume模式废弃！！

##本文纯手工制作，转载请注明出处！且不可转载为收费，技术共享无边界，作者范体贴。

00

软考高级：冗余阵列的独立磁盘

RAID（独立磁盘冗余阵列）是一种将多个硬盘驱动器组合成一个单一逻辑单元的数据存储虚拟化技术，主要目的是提高数据的可靠性、安全性或性能。下面是对常见的RAID模式的概述和比较：

00

最新技术选型解决方案列表

2 目标 2.1 产品目标 2.1.1 SaaS 2.1.1.1 免安装 2.1.1.2 多租户 2.1.1.3 流量计费

04

完全图解RAID存储技术：RAID 0、1、5、6、10、50、60

本文篇幅有点长，介绍的非常全面，可以不夸张的说全网找不到第二篇那么详细了，强烈建议在阅读前先收藏，以防后期找不到了！

完全图解RAID存储技术：RAID 0、1、5、6、10、50、60

本文篇幅有点长，介绍的非常全面，可以不夸张的说全网找不到第二篇那么详细了，强烈建议在阅读前先收藏，以防后期找不到了！

03

【数据库设计和SQL基础语法】--数据库设计基础--数据规范化和反规范化

数据规范化通过一系列的步骤和规则，将数据库设计得更加合理和有序，以满足数据库的存储和维护需求。

01

ASM 翻译系列第四十弹：理解ASM中 REQUIRED_MIRROR_FREE_MB和USABLE_FILE_MB的含义

原作者：Harald van Breederode 译者：魏兴华审核：魏兴华 DBGeeK社区联合出品原文链接：https://prutser.wordpress.com/2013/01/03/demystifying-asm-required_mirror_free_mb-and-usable_file_mb/ 在我的课上一个经常被问到的问题是ASM如何计算磁盘组REQUIRED_MIRROR_FREE_MB和USABLE_FILE_MB的值，这个问题的答案跟很多复杂问题的答案一样：要

构建和维护星球最强对象存储系统的一点微小经验

截至 2023 年，Amazon S3 自 2006 年上线以来，已经 17 岁了。在开始之前，我们首先看下Andy Warfield 给出的一组数据，来感受下星球最强的对象存储已经到了什么量级：

03

组合多个GSE数据集进行meta分析不妨先去冗余

所以作者开发这个R包: DupChecker: a bioconductor package for checking high-throughput genomic data redundancy in meta-analysis

03

理解 ASM 中 REQUIRED_MIRROR_FREE_MB和USABLE_FILE_MB 的含义

有人经常被问到的问题是ASM如何计算磁盘组REQUIRED_MIRROR_FREE_MB和USABLE_FILE_MB的值，这个问题的答案跟很多复杂问题的答案一样：要看情况。

01

数仓一般性总结

数据越冗余越难保证数据一致性，分布式存储就是这样，但是维度退化到事实表后相当于预聚合了，所以查询分析效率高。

03

ASM 翻译系列第二十八弹：ASM INTERNAL Partnership and Status Table

原作者：Bane Radulovic 译者：邱大龙审核：魏兴华 DBGeeK社群联合出品 Partnership and Status Table Partnership and Status Table简称PST表包含了一个磁盘组中所有磁盘的相关信息-磁盘号，磁盘状态，partner的磁盘号，心跳信息和failgroup的信息（11G及以上版本）。每个磁盘的AU 1是为PST表预留的，但是并不是每一个磁盘都有PST表的信息。 PST count 在external冗余的磁盘组中只有一份

06

ASM 翻译系列第十一弹：高级知识 Offline or drop?

原作者：Bane Radulovic 译者：庄培培审核：魏兴华 DBGeeK社群联合出品 Offline or drop? 当一个ASM磁盘不可用时，ASM会把它从磁盘组里移除，对吗

04

串口通信(二) 数据校验

串口通信中的数据传输过程中，可能会受到多种干扰和误差，如电磁干扰、信号衰减、信号失真等。这些干扰和误差可能会导致数据的丢失、损坏、重复或错位等问题，从而导致数据传输错误。因此，在串口通信中引入校验机制是必要的，它可以检测数据传输过程中出现的错误或损坏，从而保证数据的正确性和完整性。

01

关系型数据库设计浅谈

简称概念模型，是面向数据库用户的现实世界的模型，主要用来描述世界的概念化结构，它使数据库的设计人员在设计的初始阶段，摆脱计算机系统及DBMS的具体技术问题，集中精力分析数据以及数据之间的联系等，与具体的数据库管理系统（Database Management System，简称DBMS）无关. 最常用的是实体联系模型（Entity Relationship Model).

01

数据库设计

数据模型（Data Model）是数据特征的抽象，包括数据的结构部分、数据的操作部分和数据的约束条件。

02

软考高级架构师：数据库-非规范化的关系模型会引发一些常见问题

在数据库设计中，非规范化的关系模型会引发一些常见问题，包括数据冗余、更新异常、插入异常和删除异常。为了让这些概念更易于理解，我们可以把数据库中的数据比作一个超市的库存清单。让我们逐一解释这些问题，并举例说明它们的区别。

00

自动存储管理ASM

https://docs.oracle.com/cd/B19306_01/server.102/b14231/storeman.htm#ADMIN036

03

三范式详解

在数据库设计中，三范式（3NF）是一种关系型数据库设计规范，通过消除数据冗余和依赖，旨在提高数据库的数据存储效率和数据完整性。本文将深入讨论数据库的三范式，包括每一范式的定义、优点以及在实际数据库设计中的应用。

01

数据库逻辑设计

针对这个问题，我们怎么破呢？我们对上面这个表拆分为3个表：学生表、课程表、学生课程关系表。其中，学生表和课程表只有一个主键，而学生课程关系表有一个复合主键（学生编号，课程），分数完全依赖于这个复合主键，因此符合第二范式。

DG、ADG、OGG的解析

以oracle 11G版本为准进行解析 Data Guard Architecture Overview (Data Guard架构概述) Data Guard provides the management, monitoring, and automation software to create and maintain one or more synchronized copies of a production database to protect Oracle data from failures, disasters, human error, and data corruptions while providing high availability for mission critical applications. Data Guard is included with Oracle Database Enterprise Edition. Data Guard提供管理，监视和自动化软件，用于创建和维护生产数据库的一个或多个同步副本，以保护Oracle数据免受故障，灾难，人为错误和数据损坏，同时为关键任务应用程序提供高可用性。 Data Guard包含在Oracle数据库企业版中。 Active Data Guard Functionality Overview (Active Data Guard功能概述） Active Data Guard is an option license for Oracle Database Enterprise Edition. Active Data Guard enables advanced capabilities that that extend basic Data Guard functionality. These include:

03

Oracle ASM 磁盘组基础知识整理（收藏版）

为什么要写这么一篇基础知识呢？还是有那么一点点原因的，不是胡编乱造还真是有真实存在的事件的，前两周里因一套生产环境数据库磁盘不足无法对其进行表空间扩容，需要向存储岗申请存储资源，当存储岗划好资源加完存储时，操作系统岗对其进行扫盘以及权限处理时忘记对 RAC2 节点的磁盘进行属主的设置。

在Ceph集群中数据的可靠性和高可用性的机制和算法

01

Amazon Aurora 深度探索（二）

本文介绍了亚马逊Aurora数据库实例的存储架构设计，重点在于Aurora如何通过存储层实现数据冗余和自动容错，以确保数据库服务的持续可用性和弹性。Aurora将存储与计算分离，支持多租户，具有水平扩展能力。同时，Aurora还通过存储虚拟化技术实现数据冗余和自动容错，以确保数据库服务的持续可用性和弹性。

01

Hive一次更新多个分区数据方案

场景订单数据之类的业务表，因为有状态要更新，比如订单状态，物流状态之类的，需要同步很久之前的数据到Hive. 如何同步时在Hive中进行操作一次更新多个分区内的数据? Hive 操作设置Hive动

01

RAID配置：确保数据安全性

🐱 猫头虎博主再次为你服务！在数据中心、企业服务器或家用NAS中，RAID配置是确保数据安全性和性能的关键。如果你想对RAID有更深入的了解，这篇文章正是你所需要的。我为你提供了一个完整的RAID配置指南，详细介绍各种RAID级别以及其应用场景。🖥️

01

MySQL冗余数据的三种方案 | 架构师之路

一，为什么要冗余数据互联网数据量很大的业务场景，往往数据库需要进行水平切分来降低单库数据量。水平切分会有一个patition key，通过patition key的查询能够直接定位到库，但是非patition key上的查询可能就需要扫描多个库了。此时常见的架构设计方案，是使用数据冗余这种反范式设计来满足分库后不同维度的查询需求。例如：订单业务，对用户和商家都有订单查询需求： Order(oid, info_detail); T(buyer_id, seller_id, oid); 如果用buyer

05

数量生态学冗余分析（RDA）分析植物多样性物种数据结果可视化|数据分享

冗余分析（redundancy analysis，RDA）是一种回归分析结合主成分分析的排序方法，也是多因变量（multiresponse）回归分析的拓展。从概念上讲，RDA是因变量矩阵与解释变量之间多元多重线性回归的拟合值矩阵的PCA分析。

01

多对多业务，数据库水平切分架构一次搞定

本文将以“好友中心”为例，介绍“多对多”类业务，随着数据量的逐步增大，数据库性能显著降低，数据库水平切分相关的架构实践。一、什么是多对多关系所谓的“多对多”，来自数据库设计中的“实体-关系”ER模型，用来描述实体之间的关联关系，一个学生可以选修多个课程，一个课程可以被多个学生选修，这里学生与课程时间的关系，就是多对多关系。二、好友中心业务分析好友关系主要分为两类，弱好友关系与强好友关系，两类都有典型的互联网产品应用。弱好友关系的建立，不需要双方彼此同意：用户A关注用户B，不需要用户B同意，此时用

06

数量生态学冗余分析（RDA）分析植物多样性物种数据结果可视化|附代码数据

冗余分析（redundancy analysis，RDA）是一种回归分析结合主成分分析的排序方法，也是多因变量（multiresponse）回归分析的拓展。从概念上讲，RDA是因变量矩阵与解释变量之间多元多重线性回归的拟合值矩阵的PCA分析（点击文末“阅读原文”获取完整代码数据）。

02

MySQL性能管理及架构设计（二）：数据库结构优化、高可用架构设计、数据库索引优化

1. 减少数据冗余：（数据冗余是指在数据库中存在相同的数据，或者某些数据可以由其他数据计算得到），注意，尽量减少不代表完全避免数据冗余；

01

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭