首页
学习
活动
专区
工具
TVP
发布

超级架构师

欢迎关注公众号:超级架构师。 分享交流企业架构,业务架构,应用架构,技术架构,企业数字化转型等
专栏作者
872
文章
1178606
阅读量
114
订阅数
【企业安全】企业安全系列第 1 部分 — 数据治理
随着各个企业对云的适应程度不断提高,安全性在实施中占据了前列,安全架构团队开始在架构审查委员会中发挥关键作用。不同种类的云——公共云、混合云需要围绕应用程序及其处理的数据制定更严格的规则。业务部门希望在给定时间点对其数据进行 360 度可视化。那么,安全团队最关心的是什么?是的,数据!那么我们能做些什么让他们不担心呢?实施数据治理。
首席架构师智库
2022-09-26
1.4K0
【私有云架构】Cloudstack 与 OpenStack:哪个更适合您?
创建云管理平台是因为云计算几乎已成为大多数日常业务使用的必需品。CloudStack 与 OpenStack 之争并不是很重要,而是在控制大量数据的高级云管理平台之间进行选择。
首席架构师智库
2022-07-29
1.8K0
【数据治理】什么是数据治理模型?
数据治理是识别组织的关键数据并确保数据质量和数据安全的过程。它还涉及从公司数据中提取价值以提高业务绩效。
首席架构师智库
2022-05-18
9060
【数据架构】面向初创公司的现代数据堆栈
“为工作使用正确的工具!” 这句话一开始听起来很简单,但在实际方面实施起来却非常复杂。 早期的初创公司发现很难选择生态系统中可用的各种工具,因为它们的数据将如何演变是非常不可预测的。 需要现代数据堆栈 在过去 10 年中,软件行业在以下方面有所增长: 计算能力:AWS、Google Cloud 等公共云提供商以标准市场成本提供巨大的计算能力。 数据源:物联网生态系统、智能设备的兴起导致每天产生的数据量呈指数级增长。2020 年,地球上的每个人每秒产生约 1.7MB 的数据。 业务利益相关者的数据素养:
首席架构师智库
2022-03-25
7080
【数据湖】在 Azure Data Lake Storage gen2 上构建数据湖
介绍 一开始,规划数据湖似乎是一项艰巨的任务——决定如何最好地构建数据湖、选择哪种文件格式、是拥有多个数据湖还是只有一个数据湖、如何保护和管理数据湖。并非所有这些都需要在第一天回答,有些可能通过反复试验来确定。构建数据湖没有明确的指南,每个场景在摄取、处理、消费和治理方面都是独一无二的。 在之前的博客中,我介绍了数据湖和 Azure 数据湖存储 (ADLS) gen2 的重要性,但本博客旨在为即将踏上数据湖之旅的人提供指导,涵盖构建数据湖的基本概念和注意事项ADLS gen2 上的数据湖。 数据湖规划
首席架构师智库
2022-03-08
8010
【数据湖】Azure 数据湖分析(Azure Data Lake Analytics )概述
在本文中,我们将探索 Azure 数据湖分析并使用 U-SQL 查询数据。 Azure 数据湖分析 (ADLA) 简介 Microsoft Azure 平台支持 Hadoop、HDInsight、数据湖等大数据。通常,传统数据仓库存储来自各种数据源的数据,将数据转换为单一格式并进行分析以做出决策。开发人员使用可能需要更长时间进行数据检索的复杂查询。组织正在增加他们在云基础架构中的足迹。它利用了云基础设施仓库解决方案,例如 Amazon RedShift、Azure Synapse Analytics(A
首席架构师智库
2022-03-08
9450
【容器云】Calico 组件架构
Calico 组件 下图显示了 Kubernetes 的必需和可选 Calico 组件,具有网络和网络策略的本地部署。 Calico 组件 Calico API server Felix BIRD confd Dikastes CNI plugin Datastore plugin IPAM plugin kube-controllers Typha calicoctl 云编排器的插件 Plugins for cloud orchestrators Calico API 服务器 主要任务:让您直接使
首席架构师智库
2022-03-08
1.9K0
【数据湖仓】数据湖和仓库:Databricks 和 Snowflake
是时候将数据分析迁移到云端了。我们比较了 Databricks 和 Snowflake,以评估基于数据湖和基于数据仓库的解决方案之间的差异。 在这篇文章中,我们将介绍基于数据仓库和基于数据湖的云大数据解决方案之间的区别。我们通过比较多种云环境中可用的两种流行技术来做到这一点:Databricks 和 Snowflake。 正如我们在上一篇文章中了解到的,数据分析平台可以分为多个阶段。上面,我们可以看到一张图片,大致了解了管道中 Snowflake 和 Databricks 的角色。在这里,我们可以将工具分
首席架构师智库
2022-03-08
2K0
【数据湖仓】数据湖和仓库:范式简介
是时候将数据分析迁移到云端了——您选择数据仓库还是数据湖解决方案?了解这两种方法的优缺点。 数据分析平台正在转向云环境,例如亚马逊网络服务、微软 Azure 和谷歌云。 云环境提供了多种好处,例如可扩展性、可用性和可靠性。此外,云提供商有大量的原生组件可供构建。还有多种第三方工具可供选择,其中一些是专门为云设计的,可通过云市场获得。 工具自然倾向于强调自己在分析集成中的作用。当您尝试选择最佳工具集时,这通常会令人困惑。在这篇文章中,我们将详细介绍许多工具的优缺点。 这是一个由三部分组成的系列文章的第一篇,
首席架构师智库
2022-03-08
5280
【数据湖架构】Hitchhiker的Azure Data Lake数据湖指南
数据湖漫游指南 文件大小和文件数 文件格式 分区方案 使用查询加速 我如何管理对我的数据的访问? 我选择什么数据格式? 如何管理我的数据湖成本? 如何监控我的数据湖? ADLS Gen2 何时是您数据湖的正确选择? 设计数据湖的关键考虑因素 术语 组织和管理数据湖中的数据 我想要集中式还是联合式数据湖实施? 如何组织我的数据? 优化数据湖以获得更好的规模和性能 推荐阅读 问题、意见或反馈? Azure Data Lake Storage Gen2 (ADLS Gen2) 是用于大数据分析的高度可扩展且经济高
首席架构师智库
2022-03-08
8600
「机器学习」DVC:面向机器学习项目的开源版本控制系统
DVC的建立是为了使ML模型具有可共享性和可复制性。它设计用于处理大型文件、数据集、机器学习模型、度量以及代码。
首席架构师智库
2022-01-25
1.4K0
【PostgreSQL架构】PostgreSQL的最佳群集高可用性方案
如果您的系统依赖PostgreSQL数据库并且您正在寻找HA的集群解决方案,我们希望提前告知您这是一项复杂的任务,但并非不可能实现。
首席架构师智库
2021-02-04
9.2K0
「分布式架构」最终一致性:暗示的切换队列
在这个博客系列中,我们将探讨最终的一致性,如果没有合适的词汇表,这个术语很难定义。这是许多分布式系统使用的一致性模型,包括XDB Enterprise Edition。为了理解最终的一致性,我们需要知道两个概念:暗示切换队列和反熵,这两个概念都需要特别注意。
首席架构师智库
2021-01-05
3620
「云网络安全」云网络安全101:Azure私有链接和私有端点
Azure提供了两个类似但不同的服务,允许虚拟网络(VNet)资源私下连接到其他Azure服务。Azure VNet服务端点和Azure私有端点(由Azure私有链接提供支持)都通过允许VNet流量不通过internet与服务资源通信来促进网络安全,但它们之间存在一些区别。这个由三部分组成的博客系列详细介绍了这两种服务。
首席架构师智库
2020-12-18
6.1K0
「前端架构」Redux vs.MobX的权威指南
大型应用程序的前端管理是最难解决的问题之一。虽然有几种方法可以解决状态管理问题,但Redux和MobX是两个最流行的外部库,用于解决前端应用程序中的状态管理问题。在这篇文章中,我们将研究每个库以及它们是如何匹配的。
首席架构师智库
2020-11-06
1.5K0
「数据仓库技术」怎么选择现代数据仓库
我们用过很多数据仓库。当我们的客户问我们,对于他们成长中的公司来说,最好的数据仓库是什么时,我们会根据他们的具体需求来考虑答案。通常,他们需要几乎实时的数据,价格低廉,不需要维护数据仓库基础设施。在这种情况下,我们建议他们使用现代的数据仓库,如Redshift, BigQuery,或Snowflake。
首席架构师智库
2020-09-17
5K0
「文档数据库之争」MongoDB和CouchDB的比较
MongoDB和CouchDB都是基于文档的NoSQL数据库类型。文档数据库又称mdocument store,通常用于存储半结构化数据的文档格式及其详细描述。它允许创建和更新程序,而不需要引用主模式。移动应用程序中的内容管理和数据处理是可以应用文档存储的两个字段。
首席架构师智库
2020-09-08
5.5K0
「图型计算架构」GraphTech生态系统2019-第1部分:图型数据库
这篇文章是关于GraphTech生态系统的3篇文章的一部分,截至2019年。这是第一部分。它涵盖了图形数据库环境。第三部分是图形可视化工具。
首席架构师智库
2020-07-20
5760
【第二部:容器和微服务架构】(3)Docker应用程序中的状态和数据
在大多数情况下,可以将容器视为流程的实例。进程不保持持久状态。虽然容器可以写入其本地存储,但假设实例无限期地存在,就像假设内存中的单个位置是持久的一样。您应该假设容器映像(如进程)具有多个实例,或者最终将被终止。如果它们是由容器编排器管理的,则应该假设它们可能会从一个节点或VM移动到另一个节点或VM。
首席架构师智库
2020-07-18
7020
「首席架构师看无服务器」openwhisk 经典使用案例
OpenWhisk提供的执行模型支持各种用例。以下各节包括典型示例。有关无服务器体系结构,示例用例,优缺点讨论和实现最佳实践的更详细讨论,请阅读Martin Fowler博客上的Mike Roberts优秀文章。
首席架构师智库
2019-12-27
1.3K0
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档