最近看到有人说这样一个话题,postgresql 流行不起来,别学,还是某数据库有发展前途,换数据库不如自己加入到开发数据库的行列,改变那个数据库,不就行了。
公司搞淘汰 Oracle 数据库的事情已经搞了好久了,这个事情其实和国内淘宝系搞的去 IOE(IBM、Oracle 和 EMC)是类似的,基本上也是迫不得已,Oracle 的维护成本太高,而公司内部基于 Oracle 数据库的数据仓库,也是问题频出;另一个原因则是 scalability。我相信这两个原因许多人都非常清楚。而这个淘汰,也不是简简单单换一个关系数据库,比如把 Oracle 换成 MySQL,或者换到云上(RDS)。而是有明确阶段性地演进,比如替换到 DynamoDB 这样的 NoSQL 数据库上面去;或者更彻底地,像我们接触到的某个产品,数据本身换到更廉价的存储 S3 上去,元数据才存在 DynamoDB 里,而原本 SQL 执行的运算的部分用 Hadoop 或者 Spark 来完成,这件数据源统一和演进的事情由一个做 infrastructure 的团队来完成。
但是公司业务发展的速度实在太快,来了一个厂商或者应用就要求我们上线一个RDS实例,并且要求实例具备高可用、可扩展能力,随时上线或者下线,领导又要求提高物理硬件资源利用率。业务部门整天催着我们快速提供数据库服务,数据库实例多了后,运维难度和复杂度直线上升。公司IT发展战略朝着微服务和互联网化全面改造,DevOps建设又旨在打通运维和开发部门壁垒,作为DBA运维人员该如何适应这种转型?
本文根据洪斌10月27日在「3306π」技术 Meetup - 武汉站现场演讲内容整理而成。
在刚刚结束的 PingCAP 用户峰会 2023 上,PingCAP 创始人兼 CEO 刘奇分享了题为“创新涌动于先”的演讲, 全面解析了 AI 时代 TiDB 的演进方向,宣布 TiDB Serverless 正式商用,并携手用户代表发布了面向中国企业级用户的平凯数据库 。以下是演讲实录全文,阅读需约 8 分钟。
如今开源软件已经遍地开花,其中独角兽就有估值65亿美元的Mulesoft、估值40亿美元的MongoDB等。IBM去年也以320亿美元收购了Redhat。
最近几年,在所谓“数字化转型”的潮流下,我明显感到,越来越多的传统行业的企业开始自研企业软件,我认为这是企业“数字化转型”的一个巨大误区。
现在的金融投资人士是很拼,跨专业的进行调研产品是否有投资价值,想不入坑看看这个行业是否有前景,本着I am a nobody, 这里就“胡说八道” 一番。
近日,AWS宣布正式推出文档数据库服务:DocumentDB。AWS DocumentDB是一项支持MongoDB工作负载的文档数据库服务,硬怼MongoDB的意思非常之明显。
笔者是一个老程序员,自2002年进入.NET开发领域,一直未曾放弃。期间经历过管理软件公司,互联网公司,有国内企业和外资企业,深感其中的差异,撰写文分析两者的联系和区别,供读者朋友参考。 技
是允许我们处理客户端数据的一系列服务的统称, 主要可以为公司节约计算机的硬件成本.
ETL代表提取、转换和加载。它是从任何数据源中提取数据并将其转换为适当格式以供存储和将来参考的过程。
据外媒报道,西班牙巴塞罗那一家名为Prestige Software的软件公司被发现暴露了全球数百万客户的敏感、隐私和财务数据。尤其是来自Booking.com、Expedia、Agoda、Amadeus、Hotels.com、Hotelbeds、Omnibees、Sabre等几家公司的客户都是此次数据泄露事件的意外受害者。
没有什么办法来复制数据短缺,在云里仍然是这样的。当人们浏览自己的云备份选项时,要仔细看看他的云环境,包括他的云计算供应商的本地备份服务、数据库等等。 回到在虚拟化的全盛时期,优选的备份方法是使用该备份或复制整个虚拟机从管理程序层,例如,采用Veeam云备份,或从Zerto软件复制数据保护的软件。 对于使用基于VMware云的IT部门,这种方法仍然有效。VIF教育是总部设在北卡罗来纳州教堂山分校的全球教育机构,运行了软件即服务(SaaS)和基础设施即服务(IaaS)的混合应用服务。对于其谷歌企业应用套件和Sa
本文作者系Scott(中文名陈晓辉),现任大连华信资深分析师 ,ORACLE数据库专家,曾就职于甲骨文中国。个人主页:segmentfault.com/u/db_perf ,经其本人授权发布。
传统企业分公司IT系统部门 工作第一年作为一个新人菜鸟,也没什么大的目标和方向,就进入了一个传统行业的IT部门做技术支持,每天就是收集公司不同业务部门的业务/功能,进行提炼,最后传递给总部的IT研发部门进行研发,偶尔为公司的同事改下SQL,装个系统,维护一下OA系统,官网的bug; 目标:主要是熟悉这个行业,锻炼了一定的表达和整理能力,对于数据库及数据对于一家公司的重要性有了一定的认识; 软件公司 之后进入了软件公司,算是接触到大学课本上讲到的所有的软件工程的东西,但是更多的是浅尝辄止的皮毛。 公司的业务是
【中国政府以及重要行业不宜采购该操作系统 正寻求国产替换】 倪光南表示:Windows8采用了不安全技术架构的现实,中国政府以及重要行业不宜采购该操作系统。他透露,中国相关企业与机构正在筹建产业发展联盟,争取妥善做好用国产操作系统对XP的替换工作。这个还真替换不了,说实话倪老的心是好的,但是真没法替换,国产操作系统能用吗?这个替换工程太巨大。 【中国有望在五年内成为SAP全球排名第一的市场 SAP的信心从何而来?】 SAP联席CEO兼执行董事会成员孟鼎铭表示:“在软件销售方面,中国有望在五年内成为SAP全球
美国IT服务巨头甲骨文公司24日宣布,将以约4亿美元的价格,收购科技初创公司BlueKai,后者提供的云服务能够帮助市场营销人员了解网上顾客的需求,并向其目标客户群体派发广告;同一天,“蓝色巨人”IBM也宣布收购云数据库服务提供商Cloudant,旨在进一步夯实自己的云服务数据库产品组合。 随着传统数据系统的过时,越来越多的公司开始借助亚马逊的AmazonWeb Services(AWS)、Salesforce.com、Workday等云计算龙头公司的云服务进行数据处理,与此同时,近几年,美国多
高级亚马逊Web服务用户更喜欢自我管理运行在亚马逊弹性计算云上的数据库,而不是数据库即服务产品,至少现在看是这样的。 上周,AWS超级用户在线活动群组创立会议的演示中,关注超级用户如何在AWS上运行数据库。大多数演讲者表示他们在弹性计算云(EC2)上运行类似Cassandra和MySQL这样的自我管理数据库,而不是使用亚马逊的数据库即服务(DBaaS)平台,比如关系型数据库服务(RDS)以及DynamoDB。 然而,一些IT专家在此次活动中也表示有过DBaaS体验,而且一些仍旧在自我管理和DB
很多公司选择AWS作为其IT解决方案,AWS有很多云服务,以下介绍AWS中几类比较重要的服务。
MySQL性能压测或者基准测试看起来很简单,使用sysbench,tpcc工具跑跑拿到数据就好,其实压测是一个技术活儿,尤其是涉及到性能对比的测试,因为不同场景/不同厂商的产品的参数设置不同,测试的结果也不一样。如果不阐明具体的参数配置差异,直接给出压测结果可能给其他人带来误导。
本次分享将介绍Pigsty:PostgreSQL RDS的Me-Better开源替代。Pigsty是如何从可观测性,可靠性,可维护性,可用性,可扩展性与安全性六个维度上,让裸奔的PostgreSQL内核成为全盛状态的六边形战士,以云数据库5%~30%的成本,提供更好的生产级关系型数据库服务(RDS)。
安全公司 Mitiga 最新发现显示,亚马逊关系型数据库服务(Amazon RDS)上数百个数据库正在暴露用户个人身份信息(PII)。 安全研究员 Ariel Szarf、Doron Karmi 和 Lionel Saposnik 在与 The Hacker News 分享的报告中表示,泄露的数据库中包含用户姓名、电子邮件地址、电话号码、出生日期、婚姻状况、汽车租赁信息,甚至是公司登录信息,如此详细的用户数据,为潜在攻击者提供了丰富的“素材”。 亚马逊 RDS 是一项 Web 服务,可以在亚马逊网络服务(
Growth Hacking这个词在过去一两年开始迅速从硅谷传播到国内,也诞生了一系列专注于企业数据分析业务的明星初创公司,如GrowingIO,神策数据,诸葛IO等。Growth Hacking简单的来说就是用数据驱动的方式来指导产品的迭代改进,以实现用户的快速增长,可以看看上面几家数据分析公司披露的客户就知道它有多流行了: GrowingIO客户:有赞,豆瓣,36Kr等 神策数据客户:秒拍,AcFun,爱鲜蜂,pp租车等 诸葛IO客户:Enjoy,罗辑思维等 我司的一个主要产品是面向中小诊所的运营S
强烈推介IDEA2020.2破解激活,IntelliJ IDEA 注册码,2020.2 IDEA 激活码
Percona Everest目前处于alpha阶段,它面向寻求利用私有数据库即服务(DBaaS)的优势,而又不想重新造轮子的组织。
由于平时亏欠家人太多,公司比较人性提前放假两天,所以昨天就从早上为两方的老人忙活,怕他们出去,买了水果,菜,肉蛋,花,老人们很高兴。下午收拾屋子,因为实在和猪窝没有什么两样,整理出7大箱子的垃圾,在搬第三个箱子的时候,把脚扭了。所以原定的计划就都泡汤了,只好好好的在床上度过。
汇总我近几年因项目原因在腾讯云针对serverless(腾讯云SCF)的提交工单最少三百个以上,上至SCF内部运营BUG, 下至腾讯云SDK 均被我找出过致命BUG, 甚至现在出现问题后,我都能直接定位出大致问题出现的原因,且通过工单验证基本是准确的.他们的客服甚至对我都熟悉。
上一周浪潮股市停牌,当时就有证券公司朋友的问,浪潮是不是有什么重要事情要发生,T哥当时的第一反映很可能是年终的收购案,那么最急需的也是迫切的是完整软硬件一体化策略,数据库是浪潮的短板,而此次停牌浪潮很可能与数据库的收购有关。 其实浪潮的高管曾在不同的场合表示,他们要软硬一体化最大的瓶颈在于基础软件的缺失,不过从近两年来浪潮的股市的优异表现上看,以及浪潮要完成千亿的宏伟目标,基础软件的课一定要补,收购自然成为重金在握的浪潮最便捷的到达方式,因此可以预见数据库和中间件将会成为浪潮的必修课。 昨天,浪潮电子
前面两篇谈完了开源软件的发展背景,以及这几年会蓬勃发展的原因,接着来谈究竟开源软件的商业模式如何发展。
业界比较认可的几个分类:SAAS、PAAS、IAAS 1、SAAS(软件即服务) 就是提供一种软件池,池中包括这样那样的内容,就像水电一样可以自由取送,然后按量收费,这是saas的一个宗旨。 saas具有的几个特点: 1)按需使用,客户根据自身的需求来决定使用多少服务以及服务的时间长短。 现在很多公司都提出了这种模式,以租用的方式来销售软件,云邮件,云呼叫等,客户不必关心最终的服务是由什么开发,无论是java,.net,php,只需知道交纳费用就可以享受相应的服务,这就是saas的一个最大的特点。 2)能够
PowerBuilder是1991年推出的,是由大型关系数据库厂商Sybase推出的。如何基于大型关系数据库快速开发基于可视化UI、客户端/服务器局域网模式的企业应用软件,这是Sybase的初衷。
本文从一个行业MIS系统的开发实践,讨论了软件开发平台的选择和应用。首先,作者从项目的实际情况确定了软件开发平台的一些原则:技术成熟兼一定先进性、高效集成的开发工具、开方人员熟练掌握等,随后就系统平台、软件开发平台、数据库平台的选择作了详细论述。之后,作者就开发过程中就保持系统开放性,対数据导入导出、与P3软件集成、WEB查看权限采取了相关措施;就保持系统先时性,提到了多种软件技术舍成及VPN技术两项措施。最后,作者対近期商业应用软件开发平台的主流一微软的.net及J2ee进行了介绍,比较了其优缺点,対今后本部门在软件开发平台的发展方向作了一定的评估。 我公司是大型电源建设项目的专业建设公司,曾以总承包方式承建设了多个电厂,在工程建设过程中逐歩建立了一系列完整、科学的工程管理体系,与此相应的是逐歩建立电力建设项目工程管理信息系统(简称电建MIS),原版本的不足之处是应用模块不多,且多以简单文本为主.
内容概要:2020 年中美贸易摩擦频发,美国对中国的制裁从实物蔓延到了技术领域,降低对国外基础软件的依赖、寻求科技自主的风气盛行,国产基础软件从幕后走到台前,开始发力。
某软件公司开发人员针对CRM(Customer Relationship Management,客户关系管理)系统中的客户信息图表统计模块提出了如图所示的初始设计方案。
最近拼多多的员工猝死事件闹得沸沸扬扬,这场痛心的事件不仅让人们看到了无良企业的冷血残酷,更让很多人深深感受到了程序员内卷的危机感。
Oracle Database,又名 Oracle RDBMS,或简称 Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说 Oracle 数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好、使用方便、功能强,适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的适应高吞吐量的数据库解决方案。
DBA作为一个群体,祖师爷可以追溯到数据库领域的第一位图灵奖获奖者:查尔斯·威廉·巴赫曼(Charles William Bachman,1924年11月11日-2017年7月13日)。
就在5年前,投资者对于开源软件这种商业模式依旧持怀疑态度。他们都认为Redhat就像一片雪花(意指看上去很美腻,但随时可能化为虚无),当时也没有其他开源公司在软件领域获得较为出彩的成绩。
Oracle是现在世界上最大的专门提供办公平台的软件公司之一,另外一家公司就是微软。
2021年8月20日,贵州农信行社数据仓库软硬件采购项目单一来源采购公示发布。 拟采购商品信息:行社数据仓库软硬件(GaussDB数据库及大数据软件License部分) 采用单一来源采购方式的原因及相关说明:大数据平台由贵安迁移至观山湖数据中心时,使用了华为泰山服务器和大数据产品,用于搭建观山湖数据中心大数据平台。现由于数据量增长大数据平台需进行扩容,鉴于后续应用扩展及行社数仓项目建设,为保持服务延续性及前后软硬件产品的一致性,同时考虑到系统兼容性,便于投产后运维,拟继续采购华为系列产品用于扩容大数据平台
在拉斯维加斯举行的黑帽大会(Black Hat 2014)上,一位颇有名声的研究人员称安全专业人士并未对托管在AWS云基础架构上的应用的安全性给予充分的关注,因而AWS用户可能更容易遭受到攻击:隐私信息暴露、模仿AWS EC2实例,甚或更糟。 黑帽大会上在星期三发表的一次演讲中,咨询公司Bonsai Information Security的创始人、开源w3af安全框架的领导者Andres Riancho详细阐明了他为一个“将Web应用托管在AWS基础架构上”的客户提供渗透测试的全经历。 尽管之前Rianc
我在2016年讲过一句话:“开源是基础软件成功的唯一路径。”如果更严谨一点,要给这句话加一个限定词——中国,即“开源是中国基础软件成功的唯一路径”。
微软与甲骨文这两个同时服务美国军方的科技企业,在继2013年组建云计算联盟之后,如今再次组成盟军挑战亚马逊,在共同敌人面前将过往仇恨一笔抹消,足见亚马逊对其巨大威胁。真可谓“没有永远的敌人,只有永远的利益。”
Rinetd是为在一个Unix和Linux操作系统中为重定向传输控制协议(TCP)连接的一个工具。Rinetd是单一过程的服务器,它处理任何数量的连接到在配置文件etc/rinetd中指定的地址/端口对。尽管rinetd使用非闭锁I/O运行作为一个单一过程,它可能重定向很多连接而不对这台机器增加额外的负担。
如今,数十家初创企业和科技巨头正在向酒店、零售店、甚至学校和夏令营销售人脸识别服务。这一业务的兴盛归功于新算法,现在的算法在辨认人脸方面比五年前的更精确。
大家知道 2022 年我又创业了,加入以虎哥 Startup 的 Databend 这个公司担任联创,我也从传统的 OLTP 转战到 OLAP,今年也接触了更多大数据用户。趁着元旦假期整理一下思路,从数据角度和大家聊一下 2022 年数据库发展,这里首先声明这篇文章更多只代表个人观点,大家看看就好,有兴趣后面找机会再交流。
标题中的DBA其实包含两层含义:Database Architect 与 Database Administrator,我在这里都简称DBA了。
马克-to-win:在 软件公司工作的一个常态就是需求经常变动。这是迭代开发的一个主要特征。为了节约成本和生存问题,软件公司一般都采取迭代开发的模式。三个星期为一个周 期,推出一个版本,给客户看。客户提出一堆意见,产品经理根据客户意见和市场竞品分析和自己公司总经理意见及各路考量,再出一版产品需求,之后逼着技术部 门以火箭一般的速度,完成他的需求。马克-to-win:作为技术负责人的我,深知他的需求今天是朝东,明天可能就是朝南,后天也许还朝西,没办法 ,都是客户需要的,领导需要的和市场需要的,还得去干。不但得干,而且还得以最快的速度干。这里看出来没有,就是两点。 一,不断要去改。二来还得快。结论就是必须要用n-tier(层)模式开发。这样我就可以把分工分得很细。需要改动时,可以一步到位,找到需要改动的地 方,而且还可以非常快。刚才其实提了一点n-tier架构,把model细化分成了几层。现在继续把其中的服务层(service)细化,变成 service层调用BO(Business Object)层,BO层调用DO(domain object)层。马克-to-win:这里首先说为什么叫层?比如说:DO层里包含了很多的DO,而不是一个。什么是DO?DO是domain object,又叫领域对象。就是数据库中每个有现实意义的表都对应一个DO。比如多对多关系表在现实就没有意义 (TeacherStudentRelation),DO有自己的业务方法。BO (Business Object)就是现实中个别一个复杂对象或一堆有密切关系的DO对象所代表的抽象无形的有现实意义的概念对象。比如“手”和“ 脚”数据库中有实体表,所以“手”和“脚”都是DO。而“四肢 ”只是概念,没有表对应,是BO。BO也有业务方法。service当中可能有些发Email的方法,或安全编码的方法,这些不涉及数据库,和BO不同 (BO涉及数据库)。当涉及到“手脚并用”时,就调用“四肢”这个BO当中的方法。这个方法当中涉及到“脚”的方法时,就调用“脚”这个DO的方法。 “脚”这个DO里的业务方法涉及到数据库时,就调用Dao中的方法。
领取专属 10元无门槛券
手把手带您无忧上云