腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
ThoughtWorks
专栏成员
举报
914
文章
780610
阅读量
116
订阅数
订阅专栏
申请加入专栏
全部文章（914）
其他（175）
微服务（96）
腾讯云测试服务（54）
api（52）
安全（43）
企业（41）
编程算法（39）
云直播（37）
自动化测试（33）
数据库（32）
devops（31）
java（30）
sql（27）
开源（27）
网络安全（24）
敏捷开发（24）
自动化（23）
人工智能（22）
测试（22）
javascript（21）
开发（21）
数据（21）
系统（21）
模型（20）
uml（19）
架构设计（19）
运维（18）
大数据（18）
敏捷（18）
设计（18）
深度学习（17）
机器学习（16）
存储（16）
分布式（16）
数据分析（16）
https（16）
工作（16）
软件（16）
工具（15）
神经网络（14）
http（14）
单元测试（14）
微信（14）
数据处理（14）
服务（14）
实践（14）
ios（13）
it（13）
架构（13）
区块链（12）
网站（12）
系统架构（12）
react（11）
html（11）
容器镜像服务（11）
容器（11）
产品（11）
kubernetes（10）
python（9）
scala（9）
css（9）
android（9）
spring（9）
angularjs（8）
github（8）
linux（8）
云计算（8）
ide（7）
git（7）
访问管理（7）
缓存（7）
黑客（7）
软件开发（7）
php（6）
ruby（6）
游戏（6）
windows（6）
数据可视化（6）
效率（6）
性能（6）
node.js（5）
apache（5）
DevOps 解决方案（5）
互联网金融（5）
数据迁移（5）
kotlin（5）
tcp/ip（5）
jenkins（5）
数据结构（5）
性能测试（5）
数据湖（5）
ddd（5）
程序员（5）
对象（5）
管理（5）
函数（5）
比特币（4）
NLP 服务（4）
c++（4）
xml（4）
json（4）
打包（4）
unix（4）
TDSQL MySQL 版（4）
cci 持续集成（4）
数据安全（4）
hadoop（4）
gui（4）
面向对象编程（4）
物联网（4）
nat（4）
腾讯云开发者社区（4）
flutter（4）
迁移（4）
bug（4）
tdd（4）
web（4）
编码（4）
部署（4）
二维码（4）
框架（4）
配置（4）
最佳实践（4）
c#（3）
nosql（3）
access（3）
文件存储（3）
TAPD 敏捷项目管理（3）
serverless（3）
jdk（3）
dns（3）
spring boot（3）
unity（3）
小程序（3）
机器人（3）
安全漏洞（3）
企业组织（3）
kafka（3）
rust（3）
测试策略（3）
汽车（3）
mvp（3）
编程（3）
表单（3）
服务器（3）
行业（3）
接口（3）
面试（3）
前端（3）
日志（3）
软件工程（3）
性能优化（3）
研发（3）
硬件（3）
云镜（主机安全）（2）
负载均衡（2）
数字货币（2）
mac os（2）
swift（2）
c 语言（2）
.net（2）
servlet（2）
vue.js（2）
单片机（2）
mvc（2）
maven（2）
消息队列 CMQ 版（2）
图像处理（2）
金融（2）
渲染（2）
svg（2）
移动开发（2）
shell（2）
spark（2）
jvm（2）
强化学习（2）
erp（2）
推荐系统（2）
npm（2）
rabbitmq（2）
openapi（2）
信息流（2）
任务调度（2）
sdk（2）
功能测试（2）
学习方法（2）
漏洞扫描服务（2）
agent（2）
app（2）
aws（2）
code（2）
data（2）
product（2）
velocity（2）
产品设计（2）
程序（2）
低代码（2）
后端（2）
基础（2）
开发者（2）
科技（2）
苹果（2）
摄像头（2）
生命周期（2）
事件（2）
团队管理（2）
网络（2）
协议（2）
用户体验（2）
优化（2）
重构（2）
LLM（2）
费用中心（1）
私有网络（1）
语音识别（1）
数据挖掘（1）
iphone（1）
go（1）
bash（1）
r 语言（1）
bootstrap（1）
jquery ui（1）
jquery（1）
ajax（1）
typescript（1）
ecmascript（1）
云数据库 SQL Server（1）
postgresql（1）
ruby on rails（1）
svn（1）
struts（1）
tomcat（1）
搜索引擎（1）
ubuntu（1）
windows server（1）
负载均衡缓存（1）
bash 指令（1）
批量计算（1）
日志服务（1）
命令行工具（1）
文字识别（1）
机器翻译（1）
知识图谱（1）
短信（1）
混合云解决方案（1）
电商（1）
医疗（1）
o2o（1）
redux（1）
sass（1）
webpack（1）
互联网医疗（1）
图像识别（1）
mybatis（1）
sql server（1）
jdbc（1）
openstack（1）
pytorch（1）
selenium（1）
gradle（1）
wpf（1）
hbase（1）
webgl（1）
虚拟化（1）
密钥管理服务（1）
内容安全（1）
jupyter notebook（1）
dart（1）
flink（1）
服务网格（1）
数据脱敏（1）
验证码（1）
数据集成（1）
企业推（1）
测试服务（1）
智能客服机器人（1）
项目管理（1）
持续集成（1）
action（1）
add（1）
agile（1）
analytics（1）
bat（1）
behavior（1）
chat（1）
chatgpt（1）
cycle（1）
dashboard（1）
database（1）
default（1）
diagram（1）
difference（1）
document（1）
e2e（1）
edge（1）
evaluation（1）
event（1）
getelementbyid（1）
gherkin（1）
global（1）
google（1）
image（1）
implementation（1）
innerhtml（1）
lambda（1）
less（1）
map（1）
mapping（1）
mesh（1）
microsoft（1）
minimum（1）
mock（1）
network（1）
orientation（1）
photoshop（1）
policy（1）
profile（1）
ps（1）
replace（1）
root（1）
saas（1）
scrum（1）
scss（1）
self（1）
server（1）
service（1）
session（1）
sharing（1）
snapshot（1）
ssl（1）
state（1）
time（1）
tls（1）
ui（1）
volatile（1）
window（1）
版本控制（1）
操作系统（1）
测试工具（1）
插件（1）
产品经理（1）
持续交付（1）
创业（1）
翻译（1）
分布式系统（1）
高并发（1）
工程师（1）
工具软件（1）
工作流（1）
技巧（1）
架构师（1）
加密（1）
监控（1）
兼容性（1）
脚本（1）
解决方案（1）
客户端（1）
浏览器（1）
流量（1）
漏洞（1）
前后端分离（1）
全栈工程师（1）
软件架构（1）
手机（1）
算法（1）
同步（1）
图表（1）
团队协作（1）
网关（1）
线程（1）
项目经理（1）
性能分析（1）
需求分析（1）
隐私（1）
语法（1）
原理（1）
源码（1）
云原生（1）
注解（1）
搜索文章
搜索
搜索
关闭
分布式计算框架状态与容错的设计
flink
大数据
spark
hadoop
存储
对于一个分布式计算引擎（尤其是7*24小时不断运行的流处理系统）来说，由于机器故障、数据异常等原因导致作业失败的情况是时常发生的，因此一般的分布式计算引擎如Hadoop、Spark都会设计状态容错机制确保作业失败后能够恢复起来继续运行，而新一代的流处理系统Flink在这一点上更有着优秀而简约的设计。
ThoughtWorks
2021-04-16
455
0
2015.5 技术雷达 | 平台篇
apache
spark
数据处理
(点击图片可查看大图） Apache Spark（spark.apache.org）作为一种快速和通用的大规模数据处理引擎已取得稳步进展。该引擎基于Scala实现，非常适合于那些在多并行操作之间重用数据工作集的应用程序。它即可以作为一个独立集群，也可以作为Hadoop的YARN集群的一部分来工作。它可以从不同的源来访问数据，比如 HDFS，Cassandra，S3 等。不仅如此，Spark还提供了许多更高级的操作符，以便简化数据并行应用程序的开发。作为一种通用的数据处理平台，它使许多更高级别的工具的开发
ThoughtWorks
2018-04-20
1.2K
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪，探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档
