文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

首次揭秘双11双12背后的云数据库技术！| Q推荐

从 2009 年到 2021 年，从千万交易额到千亿交易额，双 11 已经开展了 12 年。如今，每年的双 11 以及一个月后的双 12，已经成为真正意义上的全民购物狂欢节。...是什么样的数据库撑起了 2021 年的双 11 双 12 的稳定进行？...《数据 Cool 谈》第三期，阿里巴巴大淘宝技术部双 12 队长朱成、阿里巴巴业务平台双 11 队长徐培德、阿里巴巴数据库双 11 队长陈锦赋与 InfoQ 主编王一鹏，一同揭秘了双 11 双 12 背后的数据库技术...在逛的过程中，消费者往往会选择多个商品后才会下单，所以逛的流量远远要比下单的流量高。当有千百万个消费者一起在逛的时候，会数量级地放大数据库读链路的查询压力。...事实上为了保证稳定，往年双 11 为了保证大促高峰能够平稳地过去，在一些计算量比较大或者稳定性风险比较高的地方就会实行降级策略，确保能够平稳度过流量高峰。

52.6K50
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    ISO 50015能源验证标准如何落地？MyEMS用开源技术给出答案

    在“双碳”目标驱动下，企业能源管理的精细化已成为刚需。ISO 50015作为国际公认的能源绩效测量与验证（M&V）标准，为企业提供了科学评估节能效果的标尺。而如何将这一标准落地？...标准推荐使用多元回归分析（ANCOVA模型）或工程仿真（条款5.8），并要求模型需通过R²值、p值等统计指标验证（条款7注1）。...不确定性管理需量化至少12类不确定性来源（条款7），包括测量设备误差（条款7.l）、数据采集频率（条款7.g）、模型偏差（条款7.i）等。...不确定性分析模块蒙特卡洛模拟：集成R语言统计包，对12类不确定性源进行10,000次随机抽样（条款7），生成95%置信区间的节能量分布图。...三、典型应用场景某工厂空压机改造项目数据采集：通过MyEMS实时采集电耗、功率、电流、累计流量、瞬时流量、压力、温度等128个参数（条款5.9），数据频率1分钟/次（超标准建议）。

    37710

    ISO 50015 落地指南：MyEMS 如何破解企业能源管理精细化难题

    在 “双碳” 目标加速推进的当下，企业能源管理的精细化不仅关乎减排成效，更直接影响成本控制与市场竞争力。...标准推荐使用多元回归分析（ANCOVA 模型）或工程仿真（条款 5.8），并要求模型需通过 R² 值、p 值等统计指标验证（条款 7 注 1）。...不确定性管理需量化至少 12 类不确定性来源（条款 7），包括测量设备误差（条款 7.l）、数据采集频率（条款 7.g）、模型偏差（条款 7.i）等。...动态调整机制：当生产班次变化（静态因素变更）时，自动触发非例行基线调整（条款 3.16），避免人工干预。...某工厂空压机改造项目数据采集：通过 MyEMS 实时采集电耗、功率、电流、累计流量、瞬时流量、压力、温度等 128 个参数（条款 5.9），数据频率 1 分钟 / 次（超标准建议）。

    35110

    沉浸式媒体

    我们可以称之为沉浸式或浸入式的媒体。作为一种体验，人们对这方面的需求，或者愿望可以追溯到很远。广义上来说，通过音视频的技术，产生身临其境的感觉，就叫做浸入式的媒体。...前面就是采集部分，这部分并不是MPEG本身研究的范畴。采集完以后，投影展开虽然不会制订在标准里，但它跟标准是相关的。简单地像地图那样的展开， 我们都知道那样的效率不是很好，还有很多其他的办法。...那么整体传输的流量是非常大的，怎么才能够非常有效地在现有网络上逐步实现？需要一个有效的解决方案。另外就是延时问题。...当然，流量和延时可以有一定的互换性，如果传的东西非常多，可能延时就容易解决一些，转头的时候信息都能有。但是如果说没有那么大的流量，可以在FOV里传的质量非常高，而在其他地方，不需要传那么高质量。...不仅采集呈现，存储与传输，也有很大的挑战，压缩编码这部分仍然是会非常重要的，国际标准组织在这方面可能还是会发挥很大的作用。

    2.3K30

    干货 | 数据为王，携程国际火车票的Sharding-Sphere之路

    这个问题，在互联网环境下，也比较严重，比如在一些促销活动中，订单量会有一个明显的飙升，这时候各个数据库不能达到分摊流量的效果，只有一个库在接收流量，会回到分库分表之前的状态。...根据实现方式的不同，可以分为代理和非代理方式，下面列举了一些业界常见的中间件，如下表（截至于2021-04-08）： 我们为什么最终选择了 Sharding-Sphere 呢？...是否是名师打造，是否是行业标杆 更新迭代频率，最好是更新相对频繁，维护较积极的 流行度问题，偏向于流行度广、社区活跃的中间件 性能问题，性能能满足我们的要求 使用成本 学习成本、入门成本和定制改造成本 弱浸入性...，对业务能较少浸入 现有技术栈下的迁移成本，我们当前技术栈是SSM体系下 运维成本 高可用、高稳定性 减少硬件资源，不希望再单独引入一个代理中间件，还要考虑运维成本 丰富的埋点、完善的监控 四、...对于此类问题，通常推荐做法是，可以适当增加因子，在订单号中，存储创建年份信息，这样就可以知道对应那个表了；也可以年份适当进行延伸，比如每5年一次分表，那么这样调整后，一个group内的表应该相对很少，可以极大加快查询效能

    2K20

    面试如何保证数据一致性问题

    三.如何解决数据不一致 基本上使用Cache-Aside Pattern模式可以解决大部分场景，但是我们其实还可以优化，达到弱一致性,以及最终一致性的效果 延时双删策略 删除缓存重试机制 读取binlog...异步删除缓存 延迟双删策略,先删除缓存,再更新数据库,然后等待1秒,再次删除缓存,这个等待时间要根据业务处理时间适当调整,这样就是为了读请求带来的脏数据，可以再第二次删除掉,清除脏数据 删除缓存重试机制...，不管是使用双删策略,还是Cache-Aside Pattern模式,如果第二步删除失败，都可能带来数据不一致问题, 因此我们就可以在删除的时候重复删除，当我们删除失败的时候,我们可以把删除的key放入到消息队列中...,然后消费消息队列的key,直到删除操作成功, 取binlog异步删除缓存,使用消息队列虽然可以，但是他会浸入我们的业务逻辑，因此我们可以采用binlog日志进行解耦重复删除，如下图 我们可以使用某种机制采集数据库的...binlog异步删除 如果是一主多从,采集所有的从库，可以收到一条消息，删除一次，也可以收到最后一台机器的binlog,再进行删除

    1.5K31

    探索知识图谱解决AI幻觉问题

    →直接返回答案智能推荐"买了A的人通常也关注B"关系挖掘金融风控中的"隐性关联企业"可视化探索交互式关系网络图知识卡片搜索结果右侧的"知识面板"完整工具链搭配方案（推荐入门组合）展开代码语言：TXTAI...（免费）可视化：Neo4jBrowser/yFiles应用开发：Python+Neo4jPythonDriver【企业级生产版】适合大规模、高可用数据采集：Flink+Kafka（实时流）信息抽取：自研模型...您目前已超2.5GB，本月额外费用12元。"..."刘阿姨不懂"标准资费"是多少，继续追问通话时长12分钟，问题没完全解决，刘阿姨决定去营业厅使用后：刘阿姨在微信客服输入："我这个月流量快用完了，再上网怎么算钱？"..."追问建议：✓测量双侧血压✓询问疼痛性质（撕裂样？）

    41700

    灾备运维方案

    ，异常即时告警监控报警响应≤15分钟平均≤8分钟告警分级推送（平台+短信+邮件）事件响应(工作时间）≤30分钟平均≤12分钟驻场团队即时响应事件响应(非工作时间）≤2小时平均≤40分钟7×24移动电话+...二线专家待命变更管理响应工作≤30分钟/非工作≤2小时满足变更单线上流转变更未正常完成≤1次/月目标0次变更方案评审+回退预案设备维护响应≤4小时平均≤2.1小时备件库前置+厂商服务通道客户经理定期沟通...日常常态化运维体系‌智能巡检机制‌：每日自动巡检300+关键指标，覆盖存储同步状态、链路带宽、备份任务成功率，AI预测故障预警准确率达92%，日均提前识别隐患12处。‌...灾备网络与链路运维‌冗余链路保障‌：主备数据中心采用双运营商物理分离专线，核心业务配置“专线+专线”双路由，普通业务搭配“专线+5G/互联网”混合链路，避免单条链路故障导致同步中断。‌...实战验证标准‌：整中心故障场景下，同城灾备中心接管60%业务流量，异地灾备资源池支撑峰值访问，数据恢复完整度需达到100%。

    11600

    零基础搭建免费IP代理池：从原理到实战的保姆级指南

    其核心价值体现在三个维度：突破反爬限制（通过轮换IP避免目标网站封禁）、提升访问效率（分散请求降低单IP压力）、保障业务稳定性（应对突发流量和IP失效）。...PROXY_FETCHER = [ "freeProxy01", # 内置12个采集源 "freeProxy02", # 可扩展自定义采集方法 ] # 高级配置 MAX_FAIL_COUNT...response.json().get("data", []): yield f"{item['ip']}:{item['port']}" 四、核心模块实现原理 4.1 调度系统架构 采用双进程架构实现采集与服务的解耦...诊断流程： 检查Redis中proxy:available集合大小 查看最近24小时代理验证日志 运行telnet 手动验证 解决方案： 增加采集源（推荐列表见附录） 缩短验证周期...对于日均请求量超过10万级的场景，推荐使用Kubernetes进行容器化部署，实现弹性扩缩容。

    2.3K10

    一文看懂2026十大新兴网络安全威胁：DDoS攻击识别与一站式防护

    传统规则漏检率超 40%，防护必须升级到"行为+模型"双驱动。2. T 级超大规模常态化2025 互联网史上最大带宽 31.4 Tbps、最大包速率 14,100 Mpps 双被刷新。...、运营商客户Nexusguard12+ Tbps按干净流量支持跨国企业、出海业务Cloudflare全球 Anycast免费不限量支持互联网企业、SaaSOgCloud DDoS 安全防护超大网络容量按干净流量计费...，全球防护带宽低至 1.98 USD/Mbps支持中小企业、出海企业、无IT专业人员数据来源：各厂商公开服务案例与官网（2025 年 12 月采集），仅作行业能力参考。...中小企业虽非首要目标，但作为产业链节点、AI 算力供应链、出海前端，已成为攻击者"顺手牵羊"对象。2025 中国境内年度最大攻击峰值也已达 2.78 Tbps。...月采集）

    1.2K10

    Apache Pulsar 在微信大流量实时推荐场景下的实践

    导语 本文整理自 8 月 Apache Pulsar Meetup 上，刘燊题为《Apache Pulsar 在微信的大流量实时推荐场景实践》的分享。...本文介绍了微信团队在大流量场景下将 Pulsar 部署在 K8s 上的实践与优化、非持久化 Topic 的应用、负载均衡与 Broker 缓存优化实践与 COS Offloader 开发与应用。...微信的业务场景包括推荐业务、风控、监控系统、AI 平台等。数据通过 SDK 和数据采集方式接入，经由 MQ、Kafka、Pulsar 消息中间件，其中 Pulsar 发挥了很大的作用。...非持久化 Topic 中数据不会进入 Managed Ledger，而是直接发送给消费者。在大流量场景中，非持久化 Topic 由于不需要与 Bookie 交互，对集群的带宽压力会明显降低。...非持久化 Topic 在大流量实时推荐场景中有应用，但具体的应用场景必须满足“可容忍少量数据丢失”的要求。

    1.4K20

    大规模电商价格监控系统的隧道代理部署：技术实践与避坑指南

    这场教训背后，暴露出传统价格监控的致命缺陷：依赖人工采集的数据延迟超过12小时，等发现价格异常时，市场已被蚕食殆尽。...3.2 跨境电商的合规突围 某跨境监控平台需同时抓取亚马逊美国、欧洲、日本站数据，但面临三大难题： 地理限制：日本站要求访问IP必须位于本土 语言障碍：德国站需要处理德语价格标签 支付封锁：部分站点检测到非本地信用卡即封禁...：当某节点故障时，0.5秒内自动切换备用路由 4.2 量子加密时代来临 2026年将迎来隧道代理的代际升级： 量子密钥分发（QKD）：某银行测试显示，使用QKD加密的代理通道，数据截获风险降至10^-12...5.2 技术架构缺陷 某"双11"监控项目崩溃原因分析： 单点故障：所有流量经过单个代理节点，当QPS突破10万时系统崩溃 IP池污染：使用被电商平台标记的"脏IP"，导致封禁率高达60% 延迟失控：未优化加密算法...5.3 成本失控案例 某中小监控平台的教训： 隐性流量成本：购买的"不限流量"套餐实际存在QPS限制，超量后单价暴涨4倍 IP复用率低：未实施预测性IP切换，导致IP浪费率达75% 维护成本高昂：自建代理集群需要专职运维团队

    56010

    让服务器运行在最适宜温度下，元脑InManage打通IT与动环智能管理

    动环监控系统利用遍布数据中心的温湿度传感器、电流电压传感器等监测设备，实时采集环境、动力设备、制冷设备等运行数据，基于数据分析结果预测设备故障和环境变化趋势，联动调控空调、电源、冷却塔等非IT设备，提高其能源使用效率...元脑 InManage全新升级 双平台统一纳管，能效与稳定性双提升针对数据中心整体节能降耗和系统高效稳定运行的挑战，元脑InManage数据中心智能管理平台进行了全新升级，以"AI+一体化"为核心理念，...、清洗和融合，确保了数据的准确性和及时性，实现核心参数的毫秒级采集与关联分析，助力实现从服务器风扇、整机功耗调优，到数据中心空调、冷量、流量等的全方位精准调控，避免了传统运维管理模式中由于数据单一和滞后导致的控制误差和延迟...// AI精准调控，数据中心更节能在实现IT和动环双平台统一纳管的基础上，升级后的元脑InManage数据中心智能管理平台可通过对制冷系统、供电系统等同步进行AI精准调控，实现非IT设备的能耗优化，从而推动数据中心整体节能降耗...针对液冷数据中心，该平台实现了动态流量优化，相比于传统运维的分散式数据分析模式，该平台可基于服务器芯片功耗与液冷回路压力数据，通过采用多目标优化算法，精确控制系统冷却液流量，计算出系统在不同运行环境下的最优流量分配方案

    92610

    HTTPS代理企业级出站Web访问与数据采集的安全可运营基座

    面向企业的出站 Web 访问与数据采集，安全与可运营缺一不可。HTTPS 代理以 CONNECT 隧道与端到端 TLS 为核心技术，构建清晰的加密边界，实现可策略化、可审计、可扩展的访问控制。...一句话价值主张以 CONNECT + TLS 端到端模型交付可治理的出站通道；以全球住宅 IP 与高可用托管网络支撑高并发、跨地域的数据访问与采集 [1][3]。...[1][4]专业支持：专家团队支持、API 与用户名密码双认证，降低集成成本 [2][7]技术原理：CONNECT 与 TLS 构建可治理边界CONNECT 隧道机制CONNECT 是 HTTP 协议中用于建立到目标主机与端口的隧道方法...：使用 CONNECT 隧道，端到端 TLS，基于域名与端口实施策略与审计 [6][7]Socks5（Socket Secure version 5）适用场景：通用 TCP/UDP 流量技术特点：适配非...HTTP 协议与特定客户端，提升协议覆盖面 [4]选型建议场景类型推荐协议理由Web 抓取、广告核验、搜索与价格监测HTTPS 代理策略维度清晰，观测维度成熟应用专有协议、需要 UDP 的测试与上报Socks5

    40710

    腾讯NDR网络威胁检测与响应：产品架构与商业价值解析

    核心技术属性与商业差异化： 产品摒弃了传统的侵入式防护，在网络边界采用非侵入式的旁路部署与镜像流量方式，不改变企业原有网络架构。...内网横移检测（针对内网安全运维人员）： 弥补传统安全在内网流量防护上的缺失。专注检测东西向流量威胁，精准发现内网渗透行为，提供提前感知与快速响应能力，避免灾难性事件扩散。...功能框架 产品架构涵盖从流量采集到处置的全链路，分为三大核心模块： 深度检测（威胁检测）： 采集交换机流量探针数据，通过机器学习、TAV引擎、规则引擎、哈勃沙盒进行多维检测，覆盖E-mail安全、DNS...开箱即用与灵活定制双核驱动： 预置包括重保监控、密码安全、勒索病毒、数据泄露等多个实战化分析专题视图，效果开箱即用；同时开放自定义策略引擎和白名单机制，灵活适配企业特定需求。 4....Forrester：腾讯安全NDR方案在《The Network Analysis and Visibility Landscape, Q1 2023》中获得认可和推荐。

    37210

    双头加热管：两端出线的管状电加热元件-程业电热科技

    30%-50%（如Φ12mm双头管可承载20A电流，单头管仅15A）。...以Φ12mm×500mm的加热管为例：双头管成本约80-120元，单头管成本约120-180元；同等功率下，双头管所需数量更少（如10000W加热需求，双头管需2根5000W管，单头管需3根3500W管...3.4 实验室与科研：精密仪器的“恒温基石”鼓风干燥箱：实验室样品干燥需100-300℃恒温，双头管配合风机形成强制对流，温度均匀性可达±2℃；恒温水浴锅：双头管浸入水中，通过调节功率实现室温至100℃...四、双头加热管的选型与避坑指南 4.1 关键参数：决定性能的核心指标表面负荷（W/cm²）：双头管推荐表面负荷≤25W/cm²（单头管可更高），过高会导致氧化镁粉烧结、发热丝熔断；工作温度：金属外壳最高耐温...4.2 材质选择：适配环境的“隐形密码”外壳材质：10#钢（低碳钢）：低成本，需表面镀锌/镀铬防氧化，适用于干燥非腐蚀环境；304不锈钢：通用型，食品、医药行业首选；310S不锈钢：高温型（耐温1200

    67100

    烟雨黑帽SEO群站CMS独立站群-百度权重站系统+Google独立站

    Google1、适合个人Google SEO出海，批量全自动写文章自动发布维护独立站；2、适合品牌Google独立站出海，Google外贸的流量目前需求非常大；3、通过Google AdSense或跨境供应链实现流量变现...百度1、适合批量做百度权重站，养好的站可卖可出租，适合养域名、做权重、做流量。2、适合大量关键词流量排名，期望获得百度流量的客户。...使用chatgpt耗时5-7秒【推荐使用gpt】。4.新增带图模板功能。2025.6.1升级1.增加栏目页相关词。2.优化生成速度。3.优化后台。4.优化图片标签页缓存逻辑。...2.标签页相关搜索关键词，从百度接口，增加必应必应标签：{必应双标题}{必应十标题}{必应十标题无链接}D：模板增加到100套原创手工模板。...12.增加新闻采集验证。13增加AI批量写关键词。支持根据指定关键词批量写大量相关关键词。14.增加AI写文章模型语言、热度、温度参数自定义。15.优化文章内链自动化匹配量。

    59810

    MyEMS 核心功能拆解：数据采集、能耗分析、智能调控如何落地？

    在 “双碳” 目标与企业降本需求的双重驱动下，能源管理系统（EMS）已从 “可选配置” 变为工业、商业建筑、园区等领域的 “刚需工具”。...工业场景：重点采集 “生产用能 + 辅助用能” 双维度 —— 生产端（如机床、空压机、加热炉的电流、电压、功率因数）、辅助端（车间照明、中央空调、循环水泵的能耗与运行状态），同时关联生产数据（如产量、班次...个月的平均能耗）和业务数据（如产量、客流量），生成 “能耗基准”（如某生产线的 “单位产品能耗基准” 为 0.5 度 / 件），后续若实际能耗超出基准 10%，系统自动触发 “异常预警”。...MyEMS 的落地核心是 “关联业务场景，找到隐性浪费”：能耗趋势分析：对比 “同条件下” 的能耗差异（如某商场周一与周五的客流量相近，但周五能耗比周一高 15%，分析发现周五空调设定温度比周一低 2℃...:00、14:00-17:00），非关键生产设备功率降低 20%”）；算法优化调控：针对复杂场景（如中央空调系统），采用 “PID 控制算法” 或 “机器学习模型” 实现动态优化 —— 例如，通过历史数据训练模型

    53210
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券