首页
学习
活动
专区
工具
TVP
发布

CSDN技术头条

专栏作者
1128
文章
1394933
阅读量
132
订阅数
大数据计算引擎,选 Flink 还是 Spark?
我是 2018 年 6 月加入公司,一直负责监控平台的告警系统。之后,我们的整个监控平台架构中途换过两次,其中一次架构发生了巨大的变化。我们监控告警平台最早的架构如下图所示:
CSDN技术头条
2019-11-07
2K0
数据库典型架构实践
本文将介绍数据库架构设计中的一些基本概念,常见问题以及对应解决方案,为了便于读者理解,将以“用户中心”为例,讲解数据库架构设计的常见玩法。
CSDN技术头条
2019-08-23
5160
99%的程序员都不知道这项技术!
因为微服务,人们似乎才重新发现了领域驱动设计的价值,可惜的是,对于这样一个在国外 IT 圈享有盛誉并行之有效的设计方法学,国内大多数的技术人员却并不了解,也未曾运用到项目实践中。
CSDN技术头条
2018-10-25
3850
从点线面体谈开发到架构师的转型
我工作十余年,从负责一个模块,到负责一个产品,再到负责整个支付平台的架构设计,包括业务架构、产品架构到应用架构,再到技术架构,是一个从点到面逐渐转型的过程,同样是个“自相似”的现象,我一开始写博客,再到出版《分布式服务架构:原理、设计与实战》,现在它的下册《可伸缩服务架构:框架与中间件》年后在京东首发,云时代架构系列书籍已经初具形态,也体现了从小到大的发展过程。
CSDN技术头条
2018-07-30
4190
浅析:如何构建稳定的系统
作者:Jesper L. Andersen 原文:How to build stable systems 译者:孙薇 准备工作 第一个决策是最简单却最为重要的,属于意识形态的一种:那就是软件是由开发者控制的。开发者需要控制软件,而不是反过来,让管理者、产生负责人控制软件。 唯一能控制软件的人就是编写它们的人。 第二个决策就是必须拥有能够掌控的小型工作单元。先解决整个问题的一小部分,并部署到生产环境中,显然比让整个大型项目挂掉要好得多。将初期的小型工作单元作为后面探索的测试平台。 开发者有责任一直掌控软件,
CSDN技术头条
2018-02-11
8210
专访当当网张亮:深度解读分布式作业调度框架elastic-job
【编者按】互联网从诞生到现在,网站的规模不断扩大,存储和处理的数据量也远远超出了人们的想象,又随着对信息实时性、多媒体需求大幅增长的现象,互联网架构面临越来越大的挑战。CSDN致力于解决这一问题,在刚刚结束的 SDCC 2015中国软件开发者大会上,特举办了架构专场( 上午报报道、 下午报道),以及《程序员》电子刊10月B开设了 架构专题。在接下来也将继续深耕架构师、服务于开发者,推出更多的大牛访谈、知名互联网公司架构实践、技术公开课等,敬请期待。 日前,笔者采访了当当网架构师、当当技术委员会成员张亮,在本
CSDN技术头条
2018-02-11
1K0
58同城沈剑:好的架构源于不停地衍变,而非设计
对很多创业公司而言,随着业务增长,网站的流量也会经历不同的阶段。从十万流量到一百万流量,再从一百万流量跨越到一千万甚至上亿的流量,网站的架构需要经历哪些变化?在“OneAPM 技术公开课”第一期中,58同城的技术委员会执行主席沈剑对此进行了详细剖析。 以下为演讲整理 本次演讲主要会阐述,58同城从小流量、中等规模流量、大流量,到更大的流量过程中,架构是如何演进的?遇到了哪些问题?以及如何解决这些问题? 好的架构不是设计出来的,而是演进出来的 对很多创业公司而言,很难在初期就预估到流量十倍、百倍以及千倍以后网
CSDN技术头条
2018-02-11
1.8K0
吴英昊:电商搜索引擎的架构设计和性能优化
前当当网高级架构师吴英昊对电商搜索引擎的架构进行了深入分享。在演讲中,他首先就电商搜索引擎的特点进行了解析,随后更分享了电商搜索引擎的架构、数据更新、故障恢复等多个方面的内容。 以下为演讲整理 首先,我想说的是电商搜索引擎和普通的搜索引擎有很大的差别,因为电商搜索引擎主要是解决用户要“买什么”,而通用搜索引擎主要是解决用户“搜什么”。比如同样搜索一个词“百年孤独”,电商的搜索肯定是给你推荐这本书的商家,而百度主要是告诉你:《百年孤独》是一本书。 电商搜索引擎的特点 众所周知,标准的搜索引擎主要分成三个大的部
CSDN技术头条
2018-02-11
2.5K0
云安全领域独角兽公司Zscaler不到两月再融资2500万美金
加尼福利亚云安全公司Zscaler在8月初宣布获得由TPG领投的新一轮融资,金额达到1亿美金,也成为价值超过10亿美金云安全企业俱乐部中的一员。 就在不到两月后的今天,该公司再次对外宣布获得了来自Google Capital投资的2500万美元,该公司CEO Jay Chaudhry在接受路透社采访时表示: 谷歌用户和Zscaler用户站在了十字路口。 Zscaler公司近日表明它们为近5000多家客户提供服务,是去年客户数量的2倍。另外,Chaudhry也称,这最后一轮的融资也是公司进军消费级市场之前
CSDN技术头条
2018-02-09
1.4K0
架构设计中的6种常见安全误区
【编者按】国家战略层面的重视与投入,云计算与大数据等技术的深入,“互联网+”驱动下私有云、混合云和公有云的发展,使得安全——软件安全、云计算安全、移动安全、物联网安全、大数据安全等,正在从某一技术领域应用演变为多企业间的全面行动。这也是2015年千人安全大会在北京频办的根本原因。高速发展的背后,是网络安全边界正在被无限拓宽且变得日益复杂的现状。我们可以看到,传统的固定边界在新信息攻防形式下 逐渐无效,Design for Failure、攻击面控制、纵深防御、实时安全情报感知等新安全体系建设开始崭露头角,更
CSDN技术头条
2018-02-09
1.5K0
社交产品后端架构设计
本篇文章会向读者展示几个架构设计的关键点,使一个社交应用能够成为真正的下一代社交产品。以下几个属性将会影响到架构的设计: a)可用性 b)可扩展性 c)性能和灵活性可扩展 目标 a)确保用户的内容数据能够很方便的被其他用户发现和获取. b)确保内容推送是相关的,不仅在语义上,也是从用户设备的角度。 c)确保实时更新生成、推送和分析。 d)尽可能地节省用户的资源。 e)不论服务器负载变化如何,用户体验应保持不变。 f)确保应用整体上是安全的 总之,我们要处理一个相当大的挑战,我们必须处理不断扩大的海量用户
CSDN技术头条
2018-02-09
1.2K0
怎样在初创公司里搭建稳定、可访问的数据基础架构
数据是创立Asana的核心部分,并且每一个团队都依赖他们自己的方式。我们的负责增长的团队依靠事件数据来分析试验结果(对比试验)。我们做很多快速的实验–通常会有很多实验一起跑–让这些互相影响的作用和其他关键度量引导我们需要放弃什么和投入什么。 项目经理,设计师和产品工程师通过分析使用数据来发现不可避免的妥协,比如简洁性对强大性。通过这种方法,我们可以知道什么样的新产品方向能够释放出最多的潜力。 市场部门需要明确在他们的竞争力中的哪个部分能够驱使新用户到Asana。财会部门需要非常可靠的关于总体增长模式的统
CSDN技术头条
2018-02-09
1K0
如何让资费更低?探讨电信运营商的数据变现迷局
在之前“专访Artur Borycki:谈技术创新和电信运营商的大数据”一文中,我们简单探讨过电信运营商在数据变现上的迷局,期间Artur也表示,电信运营商拥有种类繁多,大量的用户消费数据,但是基于监管条例和法律法规的限制,这些数据很难被直接变现,而很多国外运营商已经开始从事跨行业的分析,以服务的方式更合理地将数据变现,从而在带宽微博的利润下获得更好的突破机会。同时,在用户的层面上,既然我们已经进行了数据消费,就像搜索服务一样,电信运营商何时才能让我们享受到更低廉的资费标准,在“2015 Teradata大
CSDN技术头条
2018-02-09
6390
SOA架构设计经验分享—架构、职责、数据一致性
1. 背景介绍 最近一段时间都在做系统分析和设计工作,面对的业务是典型的重量级企业应用方向。突然发现很多以往觉得很简单的问题变得没有想象的那么容易,最大的问题就是职责如何分配。论系统架构设计的最大的问题,其实也就是职责的分配,分配的合理,实现起来就会很柔性,反之就会使架构很混乱。 软件的生命周期大概可以归纳为四个基本的过程,分析、设计、实现、测试,当然这仅仅是一个最为粗略的表示而已。不同的方法论有着不同的使用这几个过程的方式。RUP使用快速迭代的过程,在这个几个子过程中适当的输出一些过程制品,每次迭代都是进
CSDN技术头条
2018-02-09
4890
技术揭秘12306改造(二):探讨12306两地三中心混合云架构
在年前的「技术揭秘12306改造」专题中,一位对12306改造非常关注的技术架构师,他从技术的角度,用科学论证的方式说明12306是如何实现高流量高并发的关键技术。(http://www.csdn.net/article/2015-02-10/2823900)今天,他继续为大家带来第二章:解析12306两地三中心混合云架构。 前言 2015年春节最大的特色就是“摇一摇”,微信红包在春晚摇一摇互动总量超过110亿次,峰值达8.1亿次/分钟,有185个国家传递微信祝福。支付宝钱包在除夕晚上8点达峰值,首页被点
CSDN技术头条
2018-02-09
2.9K0
我是如何向老婆解释MapReduce的?
昨天,我在Xebia印度办公室发表了一个关于MapReduce的演说。演说进行得很顺利,听众们都能够理解MapReduce的概念(根据他们的反馈)。我成功地向技术听众们(主要是Java程序员,一些Fl
CSDN技术头条
2018-02-09
1.4K0
【综述】2014年云大事件回顾:云技术架构、云平台和大数据
2104年对于云来说是特别的一年、变革的一年,这一年中,大小规模的企业终于接受了基于云的IT的必然性,并开始规划未来。Charles Fitzgerald是Platformonomics,LLC高级总监,主要提供咨询服务,曾做过投资者、顾问、创业导师,包括这些企业:Algorithmia、Azuqua、Blockstream、buuteeq(acquired by Priceline)、CoinLab、Exponential Entertainment、Hyperbotic Labs、Indix、Lendi
CSDN技术头条
2018-02-09
6610
如何处理变慢的API?
在开始时表现良好的API会随着时间的推移而导致性能降低。学习如何管理和解决这些性能问题是开发者必须具备的技能之一。 作为一名工程师,你花了很多时间在API上——你要么是为别人构建API,要么是在使用别人的API。使用API既是一门艺术,也是一门科学。工程师们犯的最常见的错误之一就是对性能的思考不够充分。我们希望让事情先做起来,然后再处理性能问题。这很好,但是如果在构建v1的时候能够意识到这一点,你以后就可以避免。如果你使用API的时间够长,我相信你知道刚开始一切都很顺利,但随着时间的推移,API就会变得缓慢
CSDN技术头条
2018-02-08
1.6K0
如何为微服务选择数据库
作者 | Jeff Carpenter, InfoWorld 翻译 | Jackyrong 你的微服务架构需要多种数据模型。你是应该选择混合持久化呢还是多模型数据库? 在过去的十年,大规模的分布式系
CSDN技术头条
2018-02-08
1.4K0
轻博客始祖Tumblr:哈希以支撑2.3万Blog请求/秒
【编者按】Tumblr是目前全球最大的轻博客网站,也是轻博客网站的始祖。当下已有超过1.96亿博客,930亿帖子,每秒2万3千请求。近日,该公司网站可靠性工程师Michael Schenck在HighScalablity上公布了其架构设计。 以下为译文 在Tumblr,blog是网站流量最大的一部分。而在tumblelogs中,高度可缓冲成为一个非常重要的特性。鉴于Tumblr支撑的高views/post比率,做到这一点并不容易,下面一起看向blog支撑部分的架构。 状态 278个员工,6个人负责Tumbl
CSDN技术头条
2018-02-07
9650
点击加载更多
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档