腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
james大数据架构
高并发分布式负载均衡、Hadoop批处理、Spark流式实时大数据处理架构
专栏成员
举报
241
文章
428272
阅读量
55
订阅数
订阅专栏
申请加入专栏
全部文章(241)
android(63)
sql(23)
html(20)
数据库(18)
java(13)
javascript(13)
mvc(13)
.net(11)
jquery(11)
linux(11)
spring(11)
大数据(11)
容器镜像服务(9)
容器(9)
编程算法(9)
分布式(9)
hadoop(8)
其他(7)
c#(7)
云数据库 SQL Server(7)
kubernetes(7)
tcp/ip(7)
数据处理(7)
微服务(7)
xml(6)
sql server(6)
zabbix(6)
json(5)
eclipse(5)
图像处理(5)
spring cloud(5)
asp.net(4)
css(4)
打包(4)
http(4)
存储(4)
ajax(3)
nginx(3)
网络安全(3)
spring boot(3)
https(3)
系统架构(3)
负载均衡(2)
机器学习(2)
c++(2)
云数据库 Redis(2)
access(2)
tomcat(2)
负载均衡缓存(2)
NAT 网关(2)
es 2(2)
ssh(2)
面向对象编程(2)
jdbc(2)
微信(2)
nat(2)
布局(2)
php(1)
go(1)
nosql(1)
ruby on rails(1)
git(1)
maven(1)
centos(1)
网站(1)
DevOps 解决方案(1)
游戏(1)
开源(1)
运维(1)
shell(1)
spark(1)
html5(1)
jvm(1)
yum(1)
zookeeper(1)
dubbo(1)
udp(1)
jenkins(1)
iis(1)
powershell(1)
数据结构(1)
es(1)
string(1)
接口(1)
数据(1)
数组(1)
注解(1)
搜索文章
搜索
搜索
关闭
分布式文件系统FastDFS如何做到高可用
nginx
数据处理
大数据
分布式
FastDFS是用C语言编写的一款开源的轻量级分布式文件系统。它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。 FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 与Hadoop有什么区别? Hadoop也是一个分布式文件系统,had
欢醉
2018-01-22
2K
0
0基础搭建Hadoop大数据处理-初识
大数据
数据处理
hadoop
在互联网的世界中数据都是以TB、PB的数量级来增加的,特别是像BAT光每天的日志文件一个盘都不够,更何况是还要基于这些数据进行分析挖掘,更甚者还要实时进行数据分析,学习,如双十一淘宝的交易量的实时展示。 大数据什么叫大?4个特征: 体量化 Volume,就是量大。 多样化 Variety,可能是结构型的数据,也可能是非结构行的文本,图片,视频,语音,日志,邮件等 快速化 Velocity,产生快,处理也需要快。 价值密度低 Value,数据量大,但单个数据没什么意义,需要宏观的统计体现其隐藏的价值。
欢醉
2018-01-22
1K
0
备胎的养成记KeepAlived实现热备负载
数据处理
在 入坑系列之HAProxy负载均衡 中已经详细讲过了怎么将高并发的请求按均衡算法分发到几台服务器上做均衡防止单机崩溃。 但这样的话有没有发现所有请求都经过了HAproxy代理,自然当并发量越来越高时HAproxy就成了瓶颈,突发时HAproxy就会挂掉,或HAproxy服务器出现故障,这时外部唯一的请求入口没有了,怎么办?重启是个办法,但还是需要抢修时间,这期间内客户都无法访问损失的锅又得程序猿来背。 这种情况下备胎出现了, Keepalived登场,他可以解决服务宕机自动无缝切换。 K
欢醉
2018-01-22
998
0
0基础搭建Hadoop大数据处理-环境
数据处理
大数据
linux
hadoop
由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知识介绍。 VMware的安装,装好一个虚拟机后利用复制虚拟机的方式创建后面几个虚拟机,省时省力,需要注意的是需要修改每个虚拟机的IP与主机名。 所有虚拟机采用NAT模式上网,而且要保证与物理主机的IP互相能访问。 需要注意的几个问题。nat如果上网首先需要查看物理机(pc机)这个服务器已经启动
欢醉
2018-01-22
1.2K
0
VS 2010一步步开发windows服务(windows service)
数据处理
c#
基于0起步来创建一个服务,做到简单的记录时间日志功能,其具体招行方法可自行添加。 1.创建服务 2.删除默认服务文件 3.添加自己的服务文件 4.更改启动项目 5. 引用 using System.
欢醉
2018-01-22
802
0
Excel导入导出数据库02
数据库
数据处理
excel导入时还要保存字体、其背景颜色等信息时读取方法就要改变: 1 using System; 2 using System.Collections.Generic; 3 using System.Linq; 4 using System.Text; 5 using System.IO; 6 using System.Data.OleDb; 7 using System.Data; 8 using Microsoft.Office.Interop.Excel; 9 u
欢醉
2018-01-22
4.3K
0
Excel导入导出数据库01
数据库
数据处理
主要分为两部份 1.Excel操作类 1 引入 2 using System.Data.OleDb; 3 using System.IO; 4 using System.Collections; 5 6 /// <summary> 7 /// Excel导入导出 8 /// </summary> 9 public class ExcelToData 10 { 11 /// <summary> 12
欢醉
2018-01-22
7.2K
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档