首页
学习
活动
专区
工具
TVP
发布

大数据和云计算技术

专栏作者
298
文章
436767
阅读量
101
订阅数
枪炮、病菌与钢铁
Guns, Germs, and Steel: The Fates of Human Societies,是我一本比较喜欢的书,这本书主要观点就是地理环境决定了人类发展的趋势,有点绝对,但是挺有意思的一本书,推荐看看。 今天这篇文章借用借用 Jared Diiamond 的书名,不讨论书本身。当前的世界格局,俄乌战争、新冠疫情、中美贸易争端,民族主义,不就是枪炮、病菌和钢铁一样一样的。  **俄乌战争** 前面写过几篇文章了,包括《乌克兰局势杂谈》《国与国讲实力,不讲道理》对俄乌的局势有一点点判断,包括对
大数据和云计算技术
2022-04-26
3340
我们什么时候不需要自主可控
俄乌冲突让自主可控更有体感了 从 18 年开始的中美贸易争端,美国封锁了华为的高端芯片,抓了然后又放华为的 CFO ,导致华为一家发展非常好的公司到现在还在为生存奋斗。 俄乌战争的导致的西方对俄国的封锁,让自主可控在中国变得更加有体感了,盲目羡慕美国先进和闭关锁国在当前都是很艰难的。俄罗斯之所以敢于开战,其中粮食,能源可以完全自主是非常关键的因素。 中国的优势在整体制造业,或者更简单一点说其实是在人力资源上的优势,原来是以农民工为代表的劳动力资源,现在渐渐是以大学毕业生为代表的智力资源。 但是中国的制造业,
大数据和云计算技术
2022-04-11
4530
国与国讲实力,不讲道理
前面写了一个《俄乌局势杂谈》,对局势做了一些判断和预测,主要有以下几点,先简单回顾下: 战斗还会持续一段时间。最终以乌克兰让步为止。 对俄罗斯来说,被制裁是必然的,没有什么可选项,俄罗斯的贸易会和中国结合得更加紧密。 中东、欧洲未来和美国不会是铁板一块。美国能玩得转的估计就剩下五眼联盟了。 美英不太可能直接介入直接的战斗,因为俄罗斯不是一个小国家,是第二大核力量大国,美国如果直接介入,基本是第三次世界大战。 俄乌的冲突,会进一步让自由主义看到美国的软弱,美国不会为了小弟折上自己的老本的。所有美国参加的战斗都
大数据和云计算技术
2022-04-06
3020
日常怎么来决策一个产品需求做不做
一个正常的产品肯定首先要有一个非常清晰的产品定位和价值主张,有一个相对清晰的规划和路标。怎么来去制定这个定位和路标,这是一个战略规划的过程,战略规划完成之后还需要通过战略解码来实现上下对齐,战略可以得到很好的执行落地。 有了清晰的路线图之后,一个产品从小做到大,常用到的方法论是 MVP 。(Minimum Viable Product –最简化可实行产品)。MVP是一种产品理论,每次都迭代交付出一个最小功能集,这个集合的功能可以满足用户的基本需求,虽不完善但至少可用。然后逐次迭代做出满足客户预期的产品,直至
大数据和云计算技术
2022-03-21
2400
乌克兰局势杂谈
最近最热点的新闻或者全球的焦点应该是俄乌战争。 俄乌历史上其实是兄弟,同根同源,今天的俄罗斯发源于基辅罗斯,两家加上白俄罗斯是同胞兄弟。所以今天俄乌战斗,有点像大哥(俄罗斯)带着二哥(白俄罗斯)揍三弟(乌克兰)的感觉。 下面一小段这个民族的小历史: 基辅罗斯,正式名称为罗斯(古东斯拉夫语:Рѹ́ськаѧ землѧ,Рѹ́сь,希腊语:Ῥωσία,拉丁语:Ru(s)ia, Rucia, Ruzia, Rut(h)enia,俄语:Киевская Русь,乌克兰语:Ки́ївська Русь,白俄
大数据和云计算技术
2022-03-14
2840
行程卡是怎么记录行程的?
上图是天津市通讯管理局里面明确行程卡使用的是基站数据,那大家会好奇了,为啥基站数据能得出来行程?其实这个和无线通讯的原理是有很大关系的, **无线是用一个个蜂窝来划分区域的,一个蜂窝叫一个小区,所以只要电话在线,就需要注册到一个个小区中去,知道了小区就知道了用户所在的位置。通过小区切换就能计算出用户移动的轨迹,这就是用户的位置数据。** 上面一段是笔者在2016年出版的《大数据架构详解》第一章就提到了,当时对这块的技术其实就已经成熟,可惜没有什么特别好的应用。 我们来重温一下《大数据架构详解》第一章关于电信
大数据和云计算技术
2022-03-03
1K0
Windows Azure Storage 论文阅读
最近读微软一篇比较早的论文,Windows Azure Storage:A Highly Available Cloud Storage Service with Strong Consistency(一个带强一致性能力的高可用云存储服务。) windows azure storag 后面简称 WAS。WAS 支持多模存储,包括 Blobs(用户文件)、Tables(结构化数据)、Queues(消息传输)。 一、下面是 WAS 的架构,主要分三层: 从下到上分别讲: 1、Stream Layer: 这一
大数据和云计算技术
2022-03-03
8450
讲逻辑
人无千日好,花无百日红,企业也一样,每个时代都有就业热点。我映像中,90年代,进入事业单位,肯定是上上之选,那个时候就业还靠分配,也没有什么辞职一说。2000年左右,运营商、外企是当红炸子鸡。在后面是华为替代了运营商,当能当年华为的加班文化,也吓退了更多优秀的人才。在后来互联网兴起,腾讯、阿里就远远的把华为甩在了后面,通过股票取代了现金,也成功造就了一批互联网新贵。随着国家的反垄断,互联网也从天堂跌落人间。俗话说,一鲸落万物生,巨头受打压,还是利好创业公司的。 在过去的 10 年里,比较赚钱的还是房地产、
大数据和云计算技术
2022-03-03
2370
我认知的 DevOps 核心价值
记得刚读大学的时候,热门的专业叫软件工程,这个专业用国外的教程,学费比一般的专业还要贵很多,大概是 1.5 倍以上,因此搞软件从来都是很复杂甚至感觉高大上的一个事情。 后面去读《人月神话》,说实话就记住了一句话,软件开发没有银弹,再次印证软件不好搞。(题外话是,这本书其实对大学在读或者刚从事开发的同学其实门槛有点高的,过于抽象。只有在亲身参与过一些比较大的项目之后才会越来越体会。) 这么多年走来,经历了 CMM 模型,敏捷开发,devops,参与过几千人一起开发的项目,也搞过几个人的小项目,各种角色也都搞
大数据和云计算技术
2022-03-03
5160
云服务厂商人才空心化隐忧
snowflake 成为年度数据库 根据 DB-engine 统计的流行度,2021 年 snowflake 成为年度数据库。年度数据库的标准很简单,就是新增流行度最多的数据库,DB-Engine 对 2021 年度数据库解读是: Snowflake is the database management system that gained more popularity in our DB-Engines 1Ranking within the last year than any of the oth
大数据和云计算技术
2022-03-03
5490
再读李录《文明、现代化、价值投资与中国》:追求真知是核心意义
最近重新读了一下李录的书《文明、现代化、价值投资与中国》,核心内容讲的中心思想有几个方面: - 是文明分三个阶段,史前文明 1.0,农业文明 2.0 ,现代科技文明 3.0;现代文明,通过科技跳出了农业文明的资源瓶颈,通过复利形成永续增长。中国融入了世界,通过中国的组织方式,一样可以完成工业化、现代化; - 价值投资是个思维框架,核心就四个方面:股票是公司所有权、安全边际、市场先生、能力圈。中国相对美国来说价值投资更有机会。 - 李录自己的成长过程,包括怎么走上投资的道路,怎么放弃做空,彻底走上价值投资。个
大数据和云计算技术
2022-03-03
4010
Modern Data Stack 下 Data Integration 生态(下)
上一篇介绍了什么是 modern data stack,这一篇继续来梳理下,在modern data stack 下面常见的产品都有哪些。
大数据和云计算技术
2021-12-30
9060
Modern Data Stack 下 Data Integration 生态(上)
业界流行 modern data stack 的说法,本质上就是将传统的一些工具用 SaaS 化的思路在云上重新再做一遍,从来显著提升客户的使用难度。modern data stack 几大核心是:cloud 、open-source 、SaaS business models。
大数据和云计算技术
2021-12-28
9060
盘点 ARM 芯片 2021年关键进展
传统上认为 ARM 更合适移动设计,更省电;像移动设备上,典型手机上,高通,华为,三星几家有设计能力的芯片厂商,都是 ARM。
大数据和云计算技术
2021-12-18
4800
AWS Re: Invent 2021 新CEO Adam 都讲了些什么
错过了直播的,可以到 youtube 上看 Adam 的主题演讲。本文简单梳理下 Adam 演讲的主要内容,可以看到 AWS 的一些创新趋势。
大数据和云计算技术
2021-12-08
3940
数据思索和应用:数据分析的方法二
这里记录着小编对于数据的一些思考和反思, 希望对大家有所帮助,也希望各位大佬出来指点一二,探讨如何在数据领域更好的应用。
大数据和云计算技术
2021-09-15
2960
大数据和云计算技术周报(第167期)
本文内容讲解了关于网易云音乐基于Flink实时数仓实践,包括实时数仓版本的演进过程,具体实现和最佳实践。
大数据和云计算技术
2020-11-11
2K0
数据思索与应用:数据分析的方法
这里记录着小编对于数据的一些思考和反想, 希望对大家有所帮助,也希望各位大佬出来指点一二,探讨如何在数据领域更好的应用。
大数据和云计算技术
2020-10-22
4340
大数据与云计算技术周报(第161期)
本文主要从以下四个方面介绍:Spark SQL 在字节跳动的应用;什么是分桶;Spark 分桶的限制;字节跳动在分桶方面的优化。
大数据和云计算技术
2020-09-29
6840
大数据与云计算技术周报(第150期)
影响Hive效率的几乎从不是数据量过大,而是数据倾斜、数据冗余、job或I/O过多、MapReduce分配不合理等等。对Hive的调优既包含对HiveQL语句本身的优化,也包含Hive配置项和MR方面的调整。
大数据和云计算技术
2020-07-10
7410
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档