首页
学习
活动
专区
圈层
工具
发布
首页标签分布式

#分布式

分布式系统(distributed system)是建立在网络之上的软件系统。由于软件的特性,分布式系统具有高度的内聚性和透明性。

OceanBase 常用 SQL 语句及分区和分片介绍

用户8568070

有一段时间没有更新 OceanBase 相关文章了。前段时间一方面忙着其他事情,另一方面兴致来了,又连续写了一周的 GaussDB 博客。从今天开始,重新回到 ...

13010

MaaS平台技术栈之Ray

宅蓝三木

Ray 是一个面向 Python 的分布式计算框架,最初作为 UC Berkeley RISELab 的研究项目发展而来,如今已演进为覆盖数据加载、分布式训练、...

11110

从单点 AI 辅助到分布式 AI 研发部门:用一组 MacBook Air 组建"数字研发军团"的思考与尝试

无叶生花

过去一年,我和大多数人一样,把 AI 编程助手当成一个 IDE,架构设计、需求分析、研发代码、解释报错、写单测。它很好用,但本质是串行的:我一个人串起需求、前端...

18331

两地三中心双活怎么选?Shared-Disk与Shared-Nothing底层原理与压测对比

底层玩家老张

上个月帮客户做双活选型。核心交易系统要替换Oracle,数据量不大,两三百G。客户提了三个要求。两个机房同时对外服务,故障切换不能丢数据,容量要撑五年。供应商给...

14310

分布式数据库选型决策框架:数据量、一致性、运维能力三维度评估

这个DBA有点耶

去年,某能源集团的核心交易系统在业务高峰期遭遇了一次“惊魂时刻”——并发请求突破特定阈值后,单机架构的锁竞争导致响应延迟从50ms飙升到3秒以上,系统触发熔断,...

17110

金融核心业务数据库怎么选?5大硬指标 + 集中式/分布式路线全解析

数据库小学妹

先说一个常被搞混的概念。“金融数据库”和“金融数据终端”听起来像一回事,实际差着十万八千里。金融数据库是银行转账、基金清算背后那个管数据存取和交易的数据库管理系...

17210

集群与分布式区别:社区团购订单库三年升级,何时该升级

数据库小学妹

朋友小林做社区团购,他的订单库从一台破服务器,一路升级到分布式,整整用了三年。三年里,同一个问题他问了我三次:"集群与分布式,现在要不要上?"

17910

腾讯云服务器部署分布式爬虫对接代理IP实现百万级数据采集方案

永不掉线的小白

采用Master-Worker分布式架构+中心化代理IP调度,依托腾讯云弹性算力,实现任务拆分、分布式爬取、IP轮换、数据聚合存储,解决单机采集性能瓶颈。整体分...

17010

强化学习训练上云:分布式 GPU 集群的容器化实践

hollyx

分布式训练任务的性能不仅取决于单个节点的计算能力,还受到节点间网络拓扑的影响。TKE 针对分布式作业优化了资源分配和拓扑感知调度能力。当调度器为一个多节点训练任...

20510

国产化替代进入深水区:核心系统数据库替换的四个决策关卡

数据库小学妹

国产化替代,是通过自主创新实现技术和产品的自主可控,用国产软硬件体系替代被国外垄断的基础设施。芯片、操作系统、中间件、数据库这条链路,都要从"能用别人的"变成"...

29110

RDMA 高性能网络在 AI 训练中的应用:TKE 如何保障分布式训练效率

hollyx

RDMA 远程直接内存访问技术通过绕过 CPU 内核实现节点间高速数据传输,显著降低大规模 AI 分布式训练的通信延迟。腾讯云容器服务 TKE 提供统一 GID...

21110

微服务架构下的分布式日志追踪:从采集到根因定位

克劳德2048

摘要: 微服务架构中,一次用户请求可能跨越数十个服务节点,故障定位难度成倍增加。本文介绍如何通过 Trace ID 实现分布式日志关联追踪,结合 CLS 的检索...

16810

国产数据库选型实战:集中式/分布式/云原生路线对比与四步决策框架

数据库小学妹

前段时间公司要做国产数据库选型,领导让我负责一个政务系统的信创替换项目,从三四十款国产数据库里挑一个。翻遍了厂商官网,参数一个比一个好看,承诺一个比一个响亮,每...

29210

OceanBase三节点集群纯命令部署

用户8568070

官方推荐通过 OCP 部署 OceanBase 集群,或者使用 obd 来部署(类似于 tidb 的 tiup),由于 ocp 需要通过 OAT 或 obd ...

16610

深入内存优化:如何防止分布式爬虫在长时运行中导致的内存暴涨?

jackcode

重启,跑了一个小时,又炸了。看 Grafana 曲线,内存像楼梯一样一格格往上走,中间偶尔 GC 回落一点,但总体趋势是不回头地涨。我盯着那条曲线看了十分钟,心...

11010

集中式数据库选型避坑指南:缓冲池瓶颈排查、分布式事务代价与三年TCO对比

数据库小学妹

上周有个朋友找到我,说公司要上新系统,CTO拍板用分布式数据库,理由是"集中式太老了,迟早被淘汰"。我问他日均多少笔交易、数据量多大、需不需要跨地域部署,他愣了...

16210
领券