首页
学习
活动
专区
工具
TVP
发布

信息化漫谈

专栏作者
153
文章
301380
阅读量
35
订阅数
大数据之日志采集点滴
最近经常在与客户不断交流,每次碰撞总会感觉到火花,例如:某国企信息化用了近20款公有云服务、近20款业务系统的数据库用了同一个物理库、公有云的产品稳定性得到了进一步认可、客户对信息化建设的务实。细细地品味、仔细地思考,今天我们来看一下越来越流行的日志服务在数据中的作用。
希望的田野
2021-02-02
5800
实测影响数据库性能的因素有哪些?
每个女孩都是天使,每个女孩都美丽芬芳。在这个特别的日子里,温馨的女人节骄傲的向我们走来,祝女神节日快乐!
希望的田野
2020-03-10
1.1K0
云上容灾架构设计与方案
随着医疗、大型企业行业上云步伐的加快,上云后的业务系统安全性如何保障成为客户关注的重点。对于医疗、大型企业客户,往往建有自己的数据中心,如何保障极端情况下业务系统的稳定运行?双活、灾备,能帮到我们!
希望的田野
2020-03-10
4.9K0
对网页数据的大数据分析实操案例
日志中包括很多数据,我们今天只用到IP、帐号、访问的网址作为示例。在真实的项目中(如某宝),通过javascript的事件,可以将你在某个商品链接上停留的时间都采集记录一下来。这些日志通过flume脚本采集到HDFS中长期存储起来。
希望的田野
2019-12-24
1.1K0
数据库索引对业务速度影响有多大?
某采用云数据库的网站用户反映业务访问速度很慢,查询一条数据库的数据时间很长,怀疑是云数据库的性能问题,为此引出了今天的讨论课题。
希望的田野
2019-11-28
2.5K0
数据库迁移常见的四种方法
数据的迁移就像搬家,基本每个用过手机的人都做过数据迁移,将旧智能手机中的电话号码、照片、微信聊天记录导入到另一台新的智能手机。因此数据迁移并不神秘。在上云的过程中,因数据的量更大、数据重要性更大、专业性更强,因此在公有云上诞生了“云迁移”这项目服务,在公有云市场也有上百个云服务商专业做“云迁移”服务。今天我们来讲三种常用的云数据库迁移方法。
希望的田野
2019-11-26
24.7K0
云时代的数据中台(一)
近段时间,我们在拜访客户领导层的过程中,明显感觉到客户对于云时代有了新的要求:从省钱提效到希望直接支撑业务。有来自外部的压力、也有来自技术的革新,因此云时代的需求变了,IT架构该如何随之变化?
希望的田野
2019-09-24
8980
图文简述分布式关系数据库(一)
当数据量开始增大,单台数据库服务的IO、IOPS的瓶颈开始出现,业务系统的访问效率开始下降,为此开始出现分布式数据库的概念。以下将逐步讲解从单台数据库向分布式数据库演进的过程。
希望的田野
2019-09-24
5030
图文案例简述云迁移(一)
现在云计算的服务,不仅仅是产品的竞争,对于政府企业等大型客户更关注服务,而云迁移则是服务中的关键环节。以后将简述云迁移的一些门道。
希望的田野
2019-09-24
1.2K0
Linux系列学习精要(四)
随着互联网访问用户的不断增长,单台服务器打遍天下的时间将很快过去,能力再强的服务器也会面临天花板。因此,采用多台廉价X86服务器对外同时提供服务,采用负载均衡进行服务器的业务调度,成为当前应用集群的实现必然之路。如下图。
希望的田野
2019-09-24
3830
图文简述分布式关系数据库(二)
接图文简述分布式关系数据库(一)。上一章最后讲到了读写分离,继续。
希望的田野
2019-09-24
4370
分析Oracle在云上实现高可用的几种实现方式
针对Oracle迁移上云项目,云提供给用户的物理机上加载有三张网卡供用户使用,一张用于跑业务,另外两张可以用于心跳线网络。另外,存储网络是单独的网口,在建设时已由服务商做好配置,不含在这三张网卡内。基于公有云技术,为了组建资源池内部管理控制专网,因此现市面上公有云提供商的IPMI端口,均不能提供出来用于对外访问。
希望的田野
2019-09-24
1.9K0
如果数据库down,业务多久恢复?
墨菲定律,鸡蛋不能放在同一个篮子中。数据库是最重要的资产,出现单点故障确实不可避免,我们应提前做到数据库备份,出现故障时能够快速恢复。
希望的田野
2019-09-24
8310
夏季体验HBase的魅力
因为伪分布式的hbase的依赖于hdfs,因此我将hbase安装好后,首先启动hadoop的hdfs,然后再启动hbase。关闭顺序反之,先关hbase,再关闭hdfs。
希望的田野
2019-09-24
5600
云时代的数据中台(二)
当提到数据中台,系统的架构将发生巨大的变化,将单体的架构变化为松散式的架构,在业内目前的两种松散实现方式有什么优缺点?
希望的田野
2019-09-24
6900
真实案例:帮助某教育用户抵抗黑客
在公有云上,某教育用户开通了一个Windows Server 2008主机,用于近期高考学生使用网站业务。但不幸,开通网站业务不到一天,网站面临无法访问的问题。我们今天来看看究竟出现了什么问题,我们是如何解决的?
希望的田野
2019-09-24
5310
Redis是否可以存图片、视频?
前几天看到某大型家电工厂的工业互联网系统架构图,发现用MongoDB存储图片及视频。那Redis同样也是Json类型的远程数据字典服务器,也可以用于存储图片、视频。实际Redis可以用512MB的空间存储用于存储字符串型的数据。
希望的田野
2019-09-24
9.3K0
测试用物理方式的MySql数据迁移
迁移上云,一般涉及到应用系统及数据库系统,其中数据库系统的迁移是最麻烦的。应用系统的迁移一般采用重新部署或磁盘物理迁移方式,但数据库的迁移方式很多,不同的场景有不同的迁移方式。一般数据库迁移方式有物理、逻辑迁移两种方式,对数据库的迁移讲究中断业务时间最短、数据零丢失。前面,我们讲过到mysqldump进行逻辑迁移,今天我们试一下不同的物理数据迁移方式。
希望的田野
2019-09-24
1.5K0
数据倒换工具 Sqoop (大数据时代的ETL)
在传统的数据编程时代,我们今天听到过ETL(数据抽取、转换工具),可以用来从数据源提取数据,经过数据清洗后,放到数据仓库中,如熟知的Logstash, Flume。在大数据的时代,传统的RDBMS中的结构化数据如何倒向大数据的数据库如HBase中呢?这时侯,会用到Sqoop工具。
希望的田野
2019-09-24
1.1K0
图文分析HA软件实现双机热备的工作(一)
目前数据库服务的双机甚至多机热备的实现方式很多,如Oracle Rac、读写分离、主备、双机HA方式。实现Oracle Rac与双机HA的实现原理类似,在实际的应用中也有不少的场景,今天讲一下通过双机HA如何实现双机数据库热备。在一些项目中,客户提出要求能接通物理机的BMC口(或IPMI口)来实现双机HA,而这样将对云安全带来极大的挑战,真的必须访问物理机的BMC口来实现HA?今天我们来看一看。
希望的田野
2019-09-24
2.5K0
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档