性能问题是数据库中最重要也是最迫切要解决的问题之一,随着业务的发展和数据的不断加增,用户对于系统的响应速度的要求越来越高。而归根结底就是要提高数据库系统的性能。对于大部分的DBA来说,性能优化并不是一件容易的事情,造成性能问题的原因多种多样,在现实中,优化过程也会受到重重阻碍,随着云时代的到来以及自动化智能化运维的发展,那么云时代的DBA该如何优化数据库的性能呢? 在今年的数据技术嘉年华上,我们邀请了来自国内外各大企业的性能优化专家,从不同的角度分析云时代数据库性能优化的技术与技巧。 重点嘉宾与主题抢先一
12月14日,腾讯云与知数堂联合举办的3306π年会·深圳站在腾讯滨海大厦举行,腾讯云TDSQL首席架构师张文和腾讯云高级产品经理刘迪受邀分享,和与会者共同探讨数据库的行业应用和AI时代下未来数据库运维的发展趋势。 关注“腾讯云数据库”官方微信,回复“1214”即可下载本文分享的PPT。 张文在主会场分享了TDSQL在银行传统核心系统的应用实践。银行的核心系统相当于银行的大脑,所有和钱有关的交易都需要经过核心系统,完成资金的清算核算。换句话说核心系统需要和其他所有关于钱的系统打交道,因而它的业务逻辑也最
机器之心原创 作者:徐丹 11 月 11 日零点刚过 26 秒,天猫双十一订单峰值产生,58.3 万笔 / 秒。 11 月 1 日零点至 11 月 11 日零点 30 分,今年整个双十一成交额破 3723 亿,实时成交额超过 1 亿元的品牌超过 300 个。 这是今年阿里交出的双十一成绩单。不断增长的订单数据背后,今年的消费体验也出现了很多变化,付款不再卡顿、快递速度极快… 盛大的消费狂欢过去后,来盘点一下,阿里用什么技术撑住了双十一? 一、阿里双十一技术发展史,从去 IOE 说起 从最底层来说,支撑双十一
持续集成的意义和实践 不管是敏捷开发的快速迭代,还是重构系统,我们都将频繁的编译代码、部署、测试,也就是所谓的集成。如果我们的系统集成效率太低,那么快速的迭代可能变成慢速的迭代,重构系统的频率也会大大降低。有一些项目,每一次集成,都要最少经历两三个小时,如果不顺利的话,搞一个通宵都未必能完成。 “发版本”是很多程序员和运维管理人员的常见加班原因。对于这个问题,很多小型公司开始的时候,并没有给与足够的重视,认为这些事情不过是程序员或者运维的本分工作之一,也是最日常的工作。真正得到出问题了,才发现重要性。 在任
编者说明:在2018数据库大会上,招商银行的资深数据库架构师周伟,分享了招行金融科技数据开放平台的建设经验。这个主题引起了现场听众的广泛关注,我们在此整理发布出来,以其让更多用户能够借鉴到招商银行的成功经验(关注本公众号,回复:2018DTCC ,可以在根目录下找到本文PPT)。
大型国有银行,整体核心的系统都是大机+DB2 这样的传统架构;针对现在的互联网金融业务快速扩张的需求,传统的架构面临着比较大的挑战。
什么是弹性伸缩? 弹性伸缩(Elastic Scaling)是根据业务需求和策略,自动调整其弹性计算资源的管理服务,达到优化资源组合的服务能力。在业务量上升时增加计算能力,当业务量下降时减小计算能力,
双十一刚刚过去,电商的从业者终于可以喘口气了。这个节日从九年前的光棍节演变成如今电商行业的狂欢节。早几年双十一刚流行的时候,零点订单过多造成网络瘫痪、到了支付环节一键崩溃是常被吐槽的事情。这几年软硬件技术的发展,双十一的购物体验越来越好。让用户扼腕叹息的从“网络崩溃”变成了“今年没抢到”。 如何让用户买的爽?在这问题引导下电商品牌之间的竞争从网络稳定性、物流流程的PK,转到了今年更高级的竞争领域:人工智能和算法的较量。 无论是阿里今年上岗的高精度智能运营机器人天巡,还是一秒自动生成8000张banne
一年一度的双十一购物狂欢节又要来临了,你准备好剁手了吗?我每年都要购买好几百,有时候甚至是一千多的东西。不过以前我还没有考虑过这背后的技术问题,直到最近我做了一个烂项目以及和同事谈论双十一购物效率问题时才思考了一下这个问题。
在【精通高并发系列】的《实践出真知:全网最强秒杀系统架构解密!!》一文中,冰河详细的阐述了高并发秒杀系统的架构设计,也简单提到了如何扣减商品的库存。
2009 年,“双十一”的大幕首次拉开,2010 年总成交额就翻了 18 倍,到了 2011 年更是翻了近 65 倍。以“双十一”为代表的各类电商大促活动直接带动了银行交易频率和数量的大幅增加,对银行系统的弹性扩缩容等能力提出了更高的要求。
大型国有银行,整体核心的系统都是大机+DB2这样的传统架构;针对现在的互联网金融业务快速扩张的需求,传统的架构面临着比较大的挑战,主要集中在四个方面:
最近有一个很深刻的感受,那就是开发的中途被打断,然后重新恢复上下文需要花费更多的时间,而如果中间间隔几天,原来对于这个产品的认知和理解会立马下降,这一点在我接触数据库的过程中感同身受。 数据库的运维工作中,我喜欢啪啦啪啦的敲一大堆的命令,处理问题的时候,手完全能跟上自己的思路,而明显的感受,周一敲命令的手感就差了很多,隔个双十一过年的,会掉下一大截,所以这手艺活的频度还是要保持。 自动化平台的事情,自己开发了几个功能,更多是在平台的基础架构和设计上。从把前后端打通,到后面能建设成一个基本的体系,脑子里
最近几年全链路压测无疑成为了一个热门话题,在各个技术峰会上都可以看到它的身影。一些大型的互联网公司,比如阿里巴巴、京东、滴滴等,都已将全链路压测应用到了生产环境。
经过潜心打磨,结合行业热点 2019年度Gdevops全球敏捷运维峰会 将于5月10日以北京为起点强势启动 展开新一年精彩纷呈的技术巡演! 关于Gdevops全球敏捷运维峰会 国内同时覆盖一线与二线城市的高端技术峰会,会议主题覆盖敏捷运维、AIOps、数据库、云与架构等重点方向。 2016年迄今已成功举办12场,多次巡回北京、上海、广州、杭州、成都等城市,累计参与人次达20000+。 汇聚dbaplus社群数百专家资源,是携手政府、企业共同打造的敏捷运维领域标杆盛会,覆盖从DBA、运维工程师到CXO等所有
虽然备案本身不需要收费,但在过去,备案前大多数都需要先购买一台服务器,而现在,你有了更低成本的选择:通过云开发的云托管服务,可以办理域名备案了!限时推广期间,总包价29.9元购买云托管备案资源包,即可开始备案。
2016年3月18日-19日,由CSDN重磅打造的数据库核心技术与实战应用峰会、互联网应用架构实战峰会将在上海举行。作为SDCC 2016(中国软件开发者大会)系列技术峰会的一部分,活动继续秉承干货实料(案例)为主的内容原则,这两场峰会将邀请业内顶尖的架构师和技术专家,共同探讨高可用/高并发系统架构设计、新技术应用、移动应用架构、微服务、智能硬件架构、云数据库实战、新一代数据库平台、产品选型、性能调优、大数据应用实战等领域的热点话题与技术。 2月29日24点前仍处于八折优惠票价阶段,单场峰会(含餐)门票只需
作者简介:王龙,招商银行数据中心MySQL资深架构师,将MySQL引入招商银行,并从无到有建设MySQL生态,解决了MySQL在银行领域使用的诸多问题。
导言 很高兴参与DevOps时代社区的拆书联盟第一季活动,有幸能与几位DevOps大牛一起解读《DevOps Handbook》一书,这本书作者牛,内容也很牛,就连著名的培训机构把这本书作为DevOp
2022年度Gdevops全球敏捷运维峰会,将于6月17日以广州为起点正式开启! 与大家携手走过的第7个年头,Gdevops始终坚持输出技术干货、传播前沿理念与实战经验。本次广州站峰会,除了致力于帮助大家解决运维、数据库、金融科技等领域的老大难问题以外,Gdevops还希望与产学研界技术同仁一起探索云原生时代、数字化转型背景下的新趋势、新挑战和新解法。 时间:2022年6月17日 地点:广州阳光酒店 指导单位:上海市软件行业协会、上海市计算机行业协会 学术指导单位:中国信息通信研究院云计算与大数据研究所
以上都是从宏观或者广义层面对云计算的理解。那么,在这些概念背后,又隐藏着哪些有趣的技术实现呢?如何架构,使用了什么新技术,又催生了哪些技术的发展?接下来的几篇,我将去了解云计算背后的技术要素。
11月12日凌晨,2020天猫双11落下帷幕,淘宝天猫官方消息,天猫双十一成交额4982亿。媒体报道各不相同,但聚焦的都是4982亿这张照片,它就是天猫双十一向全球提供的唯一窗口--媒体中心的数据大屏。
『目的』满足贯穿从商品展示、搜索、购买、支付等整个流程,电商对于精细化、精准化促销运营的需求,使多渠道(终端)、多区域化营销成为简单易行的配置操作,提升运营能力。
双十一不仅仅是买吃买喝那么简单,其实,还有另外一种玩法。比如,作为技术男的自己,难道不想在双十一搞一些事情吗?搭建一个自己专属的购物商城;比如,新学一门技术,DIY 一个云服务;再比如,参加腾讯云的 11.11 活动,今年据说活动有多重优惠享不停。特别是作为开发者或者运维的小伙伴,可以好好利用这次机会薅一波儿羊毛啦。
如果您恰好在近半个月内访问过本博客,您可能会发现,博客访问速度缓慢,很遗憾,我用了两年多的bandwagonhost的VPS被墙了。 而被封原因或可能为在VPS上搭建的翻墙服务,虽然仅为查询外网资料用,但仍触发了防火墙,通常被封IP会在几天至几个月内恢复,若您无法打开本博客,可百度搜索“9s博客”或“王忘杰”,找到本人在各大媒体的自媒体平台,因平台规则不同,某些文章可能不会被发布。
导语:2019年9月6日,GNSEC 全球新一代软件工程高峰论坛,腾讯技术专家、《技术运营标准》核心编写专家 梁定安(大梁)全面、系统地分享了技术运营标准的七大模块及案例。 新版技术运营标准分别以七大技术运营的维度,提供可量化和可评测的运维能力成熟度检查项,供广大企业的运维同仁参考与自评,找准技术运营能力提升的路径。以下是演讲全文。 梁定安 腾讯技术专家 《技术运营标准》核心编写专家 大家下午好,很荣幸能给大家介绍 DevOps 标准的技术运营模块,技术运营总共有七个模块,核心的起草专家有三名
所有的系统必然会从内部滋生腐朽,尤其是巨大的单体系统。最具腐朽必然特性的大系统,是社会系统。
容器技术提供了一种标准化的交付方式,将应用的代码以及代码环境依赖都打包在一起,成为一个与环境无关的交付物,可以被用在软件生命周期的任何阶段,彻底改变了传统的软件交付方式。
Serverless中文译为“无服务”是一种新兴起的架构模式。它是一种基于互联网的技术架构理念。Serverless不是真的不需要服务器了,而是不用过多的关注服务器。它是指明显或充分地依赖第三方应用或服务来管理服务器端逻辑和状态,可以让你在服务部署级别而不是服务器部署级别来管理你的应用部署,甚至可以让你管理某个具体功能或端口的部署,这就能让开发者快速迭代,更快速地开发软件。
覆盖业务 经过几年时间的改造和推进,到 17年双十一的时候,已经有大量的业务都有了 node 的身影,基本上天猫大部分的 web 页面都是通过 node 渲染出来: 天猫首页、大部分天猫频道页、双十一会场以及所有天猫的活动页面都全部基于 node 应用提供服务。 商品详情、店铺和搜索页等主流程链路上,以及天猫超市和天猫会员等业务线上的页面渲染。 天猫页面搭建平台 web 层基于 node 进行开发,双十一期间在此平台上搭建了超过 1000+ 个双十一相关活动页面。 工作职责 在上述覆盖了 node 的业务
还记得双十一某宝的数据大屏吗?还记得你剁手了多少吗?他每年都在突破,而企业这历史性的时刻用可视化数据大屏是否更有意义?答案是肯定的!那么数据可视化大屏于企业来说有什么重要意义及用处呢?
每年“双11”都是一场电商盛会,消费者狂欢日。今年双11的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。而对技术人员来说,双十一无疑已经成为一场大考,考量的角度是整体架构、基础中间件、运维工具、人员等。
智选SDK一周资讯大事记,将会为您呈现过去一周最受欢迎的SDK资讯、投融资、企业活动、人物访谈和创业故事等信息,让您在最短的时间内了解最火爆的前沿信息。 有米sdk代码窃隐私风波不断,找你妹等256个App被迫下架 ---- 前段时间,诸多APP因为嵌入有米的广告sdk,涉及窃取用户隐私而被下架,曾经风行一时的找你妹等软件APP也赫然在列。而这里提到的有米广告sdk,属于一段代码,用来增加开发者的收入的。利用App的用户量赚取广告费,本身而言是很正常的一件事情,但是这个有米广告sdk不仅为用户显示广告,还偷
阿里江湖中,很多资源和技术,如神龙服务器、OceanBase、POLARDB等等,在开源、自研、云这三架马车上形成协同效应,既是内功也是武器。
数据仓库项目跨功能需求开发不够完善,导致的各种问题,就我个人经验来说,主要体现在数据建模不够标准和ETL日志体系不够完善两个方面,本文会详细介绍一下,如何从跨功能需求的角度,构建标准的数据建模和完善的ETL日志体系。
“数据猿年度重磅活动预告:2020年度金猿策划活动(金猿榜单发布+金猿奖杯颁发+2.0版产业图谱+落地颁奖大会)即将推出,敬请咨询期待!
下面我分享一下如何用 1 个肉夹馍的钱来搭建一套云上的大数据平台。经过本人反复的钻研,发现薅羊毛这件事简直是太简单了。最后买 MySQL 19.9元,流计算 Oceanus(Flink) 1 元,花了二十几块钱,搭建了这样式的大数据系统。
大家好,我是来自中国光大银行信息科技部的王志刚,非常高兴有机会给大家分享一些分布式数据库在光大银行的应用探索。我目前在光大银行银行信息科技部负责数据库管理团队,在加入光大银行之前在三星、索尼爱立信,还有 Oracle 工作过,一直在负责数据库相关的工作。在近十年我和我的团队一直负责光大银行总行的数据库运维,这里面既包括我们的交易型数据库,也包括 MPP,还有 Hadoop 这样的大数据运维。在运维的过程中,我们一直也在思考现在的数据库有哪些问题、面临哪些风险、数据库技术的发展趋势是什么,这一点是很重要的,因为它决定了我们为什么要转向分布式,我们希望分布式能替我们解决哪些问题,它能够解决哪些问题和它不能够解决哪些问题。
描述: 通过前面几篇双十一购物文章,也知道作者最近房屋装修已接近尾声了,趁着双十一入手一波家用电器,对于我这样收入不高的打工人,只能想办法能省则省,某天购买某电器时发现,直播间可以抢优惠券、半价、以及免单,我心♥动了,作为想省钱的资深IT民工必须跟进,根据直播间中活动提示只在当日20-24点,给蹲直播间中已下单人员抽取优惠,然而我比不上前面单身18年的手速了,一个都没抢到。
摘自谢朝阳《5G边缘云计算 规划 实施 运维》 运维是持久战 “三分建设,七分运维”,运维是持久战。 运维的终极目标 好的运维是多要素的融合,包括规范的流程和技术。因此,达到智能化的可靠性(Reliability)、可用性(Availability)、安全性(Security)、可扩展性(Scalability)、易管性(Manageability-Intelligence)—简称RASSM-I—是运维的终极目标(Nirvana)。 运维需要具备的能力
去年8月,国内某大型快递公司S为了应对双十一的快递系统高峰,想学习阿里用全链路压测的方法对系统进行提前检查、优化系统性能。
每年“双 11”都是一场电商盛会,消费者狂欢日。今年双 11 的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。而对技术人员来说,双十一无疑已经成为一场大考,考量的角度是整体架构、基础中间件、运维工具、人员等。
因为现今是一个信息时代,大量的信息都是需要存储并检索的,数据库设计的不好,将会严重影响系统的性能,而这一点往往会被我们的设计人员忽略,他们只知道遵守那些范式而不会结合数据的特性去设计数据库。
领取专属 10元无门槛券
手把手带您无忧上云