本文旨在给前端同学在进行nodejs服务端项目的架构设计时提供一些基本思路及常见场景的解决方案。开发node服务本质上属于服务端开发的范畴，但由于今时今日nodejs开发各种应用的普及、前端工具链向服务端的延伸等，对前端同学全栈开发能力的要求也日渐提高，故写下此文。由于服务端开发本身是一个非常庞大的话题，本文会结合一些浅显易懂的实例来进行快速覆盖。同时在文章最后，我会以我在公司最近对前端统一打包服务的分布式改造及多节点部署为例子，来结合一些实践进行描述
socket.io 单节点模式是很容易部署的，但是往往在生产环境一个节点不能满足业务需求，况且还要保证节点挂掉的情况仍能正常提供服务，所以多节点模式就成为了生成环境的一种必须的部署模式。
一. 什么是高可用性 服务端，顾名思义就是为用户提供服务的。 停工时间，就是不能向用户提供服务的时间。 高可用，就是系统具有高度可用性，尽量减少停工时间。 停工的原因一般有： 服务器故障。例如服务器宕机，服务器网络出现问题，机房或者机架出现问题等。 访问量急剧上升，导致服务器压力过大。导致访问量急剧上升的原因有： 时间和访问量都可以预见的，例如秒杀活动，售票系统。 时间和访问量都不可以预见的，例如特发性新闻（马航失联的事件） 停工的原因，可以理解为灾难，所以系统的高可用性就是容灾，即应对灾难的能力，系
gitee：https://gitee.com/pythonloser/springboot-minio/tree/master
在之前的博客《什么是大数据?看这一篇就足够了!》中,小菌为大家较为详细的介绍了一些关于大数据的知识。其中提到了大数据的四个特点,即海量化,多样化,快速化和高价值。本篇博客,小菌决定就以快速化这个特点展
序 相关组件介绍 本次分享主要涉及到两个模块console模块和openresty模块。 console模块 即云帮(ACP)控制台模块，为用户提供可视化Web操作界面，监听443端口即可，对证书需求
分布式是指将一个业务拆分不同的子业务，分布在不同的机器上执行，集群是指多台服务器集中在一起，实现同一业务，可以视为一台计算机，一个云计算平台，就是通过一套软件系统把分布式部署的资源集中调度使用。要应对
分布式是指将一个业务拆分不同的子业务，分布在不同的机器上执行，集群是指多台服务器集中在一起，实现同一业务，可以视为一台计算机，一个云计算平台，就是通过一套软件系统把分布式部署的资源集中调度使用。要应对大并发，要实现高可用，既需要分布式，也离不开集群。
使用glusterfs做持久化存储 我们复用kubernetes的三台主机做glusterfs存储。 以下步骤参考自：https://www.xf80.com/2017/04/21/kubernetes-glusterfs/ 安装glusterfs 我们直接在物理机上使用yum安装，如果你选择在kubernetes上安装，请参考：https://github.com/gluster/gluster-kubernetes/blob/master/docs/setup-guide.md # 先安装 gluste
在SocketIO：服务端推送就是这么简单！这篇文章中，我们介绍了SocketIO这款消息推送利器。今天我们来聊下怎么搭建一个生产可用的SocketIO集群。
群集技术就是共同为客户机提供网络资源的一组计算机系统，其中每一台提供服务的计算机，称之为节点。将多台计算机组织起来协同工作模拟一台性能更强大的计算机解决问题。
目前web开发前后端已经算非常的普及了。前后端分离要求我们对用户会话状态要进行一个无状态处理。我们都知道通常管理用户会话是session。用户每次从服务器认证成功后，服务器会发送一个sessionid给用户，session是保存在服务端 的，服务器通过session辨别用户，然后做权限认证等。那如何才知道用户的session是哪个？这时候cookie就出场了，浏览器第一次与服务器建立连接的时候，服务器会生成一个sessionid返回浏览器，浏览器把这个sessionid存储到cookie当中，以后每次发起请求都会在请求头cookie中带上这个sessionid信息，所以服务器就是根据这个sessionid作为索引获取到具体session。
在单台服务器上部署多个节点，一般主要针对的是学习阶段，正式环境一台服务器只会部署一个节点，以实现分布式效果。下面是在单台服务器部署两个节点的方法。
高可用集群，英文原文为High Availability Cluster，简称HACluster，简单的说，集群（cluster）就是一组计算机，它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统 就是集群的节点（node）。 高可用集群的出现是为了使集群的整体服务尽可能可用，从而减少由计算机硬件和软件易错性所带来的损失。如果某个节点失效，它的备援节点将在几秒钟的时间内接管它的职责。因此，对于用户而言，集群永远不会停机。 高可用集群软件的主要作用就是实现故障检查和业务切换的自动化。只有两个节点的高可用集群又称为双机热备，即使用两台服务器互相备份。当一台服务器出现故障时，可由另一台服务器承担服务任务，从而在不需要人工干预的 情况下，自动保证系统能持续对外提供服务。双机热备只是高可用集群的一种，高可用集群系统更可以支持两个以上的节点，提供比双机热备更多、更高级的功能，更能满足用户不断出现的需求变化。
最近的项目中需要做一个定时任务，该项目是一个分布式多节点调度任务，所以里面的定时任务在不同的节点不应该同时进行，应该使用其中一个节点做定时任务，目前寻找的方案为ElasticJob，这个篇章简单介绍一下
DPU/IPU的重要性已经达成了共识。但围绕DPU的定位存在一些争论，不同的公司根据自己技术特点选择不同技术路线。首先我们回顾一下数据中心的问题和技术发展的趋势需求：
《HyperLedger Fabric 开发实战》这本书是一本实践指导书籍，由浅入深，全部动手实践完成后，对 fabric 的基础操作就比较熟悉了。
CAP原则又称CAP定理，指的是在一个分布式云服务器系统中， Consistency（一致性）、 Availability（可用性）、Partition tolerance（分区容错性），三者不可得兼。
多节点的Minio会根据不同的Access_key及Secret_Key来区分不同租户，每个租户可操作对应Server获取Object。Minio Server间可以通过不同的进程模型、容器或是虚拟机来互相隔离。
LAMP 环境通常指Linux 环境下，由Apache+MySQL/MariaDB+PHP 以及其它相关组件组成的网站服务器架构。目前以LAMP组成的Web 应用程序平台广泛被应用，70%以上的访问流量由LAMP提供，所以我们也认同LAMP是最强大的网站解决方案。
Apache Cassandra是一个高度可扩展的开源数据库系统，在多节点设置上实现了出色的性能。
因为公司数据量比较大，一种方法是采用mycat这种数据库中间件的形式。但是感觉不是很方便。后来发现了TiDB打算，可以尝试试用一下。用datax把历史数据转入到TiDB中，然后在TiDB中进行分析。 第一步：现在台式机中的虚拟机中部署起来。 第二步：数据转移 第三部：测试性能，判断是否可用。
读写 分离（Read/Write Splitting）。 1.原理：让主数据库（master）处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库（slave）处理SELECT查询操作。 2.诞生原因： 2.1 为了确保数据库产品的稳定性，很多数据库拥有双机热备功能。也就是，第一台数据库服务器，是对外提供增删改查业务的生产服务器；第二台数据库服务器，仅仅接收来自第一台服务器的备份数据（注意，不同数据库产品，第一台数据库服务器，向第二台数据库服务器发送备份数据的方式不同）。当第一台
What's your worst habit ? Some times , the worst habit is procrastination, the best habit I always
4c8g；centos7.9；防火墙放行 30000~32767；指定hostname
网站最头痛的就是被攻击，常见的服务器攻击方式主要有这几种：端口渗透、端口渗透、密码破解、DDOS攻击。其中，DDOS是目前最强大，也是最难防御的攻击方式之一。
集群是一组协同工作的服务实体，用以提供比单一服务实体更具扩展性与可用性的服务平台。在客户端看来，一个集群就象是一个服务实体，但事实上集群由一组服务实体组成。与单一服务实体相比较，集群提供了以下两个关键特性： image.png 先说区别： 一句话：分布式是并联工作的，集群是串联工作的。 1：分布式是指将不同的业务分布在不同的地方。 而集群指的是将几台服务器集中在一起，实现同一业务。 分布式中的每一个节点，都可以做集群。 而集群并不一定就是分布式的。 举例：就比如新浪网，访问的人多了，他可以做一个群集，前
1、https://www.elastic.co/guide/en/elasticsearch/reference/current/_basic_concepts.html
集群是一组协同工作的服务实体，用以提供比单一服务实体更具扩展性与可用性的服务平台。在客户端看来，一个集群就象是一个服务实体，但事实上集群由一组服务实体组成。与单一服务实体相比较，集群提供了以下两个关键特性：
“ 关键字：服务监控软件 控制软件” 正文：项目监控软件 01 — 一款简而轻的低侵入式在线构建、自动部署、日常运维、项目监控软件 02 — 项目主要功能及特点 创建、修改、删除项目、Jar包管理 实时查看控制台日志、备份日志、删除日志、导出日志 cpu、ram 监控、导出堆栈信息、查看项目进程端口、服务器状态监控 多节点管理、多节点自动分发 实时监控项目状态异常自动报警 在线构建项目发布项目一键搞定 多用户管理，用户项目权限独立(上传、删除权限可控制),完善的操作日志 系统路径白名单模
微软公布了一项开源框架DeepSpeed Chat，这个系统旨在实现模型训练中完整的RLHF流程，预示着高质量类ChatGPT模型的大规模使用时代正式来临。
本文主要探讨了分布式和负载均衡在大型分布式系统中的重要性，以及如何在分布式系统中实现负载均衡。通过引入负载均衡器，可以在高并发情况下，将用户请求分发到多台服务器上，避免单个服务器过载。同时，文章还提到了分布式系统中的数据一致性问题，并针对该问题提出了一种解决方案。此外，文章还介绍了常用的负载均衡算法，并提醒大家在实际应用中要注意均衡策略的选择，避免出现单点故障和性能瓶颈。
简单说，分布式是以缩短单个任务的执行时间来提升效率的，而集群则是通过提高单位时间内执行的任务数来提升效率。
2000 年的时候，Eric Brewer 教授提出了 CAP 猜想，2年后，被 Seth Gilbert 和 Nancy Lynch 从理论上证明了猜想的可能性，从此，CAP 理论正式在学术上成为了分布式计算领域的公认定理。并深深的影响了分布式计算的发展。提出分布式系统有三个指标：
一面二面电话面-->三面四面视频面-->主管电话面-->hr电话面，整个流程下来就两个礼拜。
Elastic stack 俗称 ELK stack，是一组包括 Elasticsearch、Logstash 和 Kibana 在内的开源产品。Elastic Stack 由 Elastic 公司开发和维护。使用 Elastic stack，可以将系统日志发送到 Logstash，它是一个数据收集引擎，接受来自可能任何来源的日志或数据，并对日志进行归一化，然后将日志转发到 Elasticsearch，用于分析、索引、搜索和存储，最后使用 Kibana 表示为可视化数据，使用 Kibana，我们还可以基于用户的查询创建交互式图表。
我们在考虑MySQL数据库的高可用的架构时，如果数据库发生了宕机或者意外中断等故障，能尽快恢复数据库的可用性，尽可能的减少停机时间，保证业务不会因为数据库的故障而中断。与此同时，用作备份、只读副本等功能的非主节点的数据应该和主节点的数据实时或者最终保持一致。当业务发生数据库切换时，切换前后的数据库内容应当一致，不会因为数据缺失或者数据不一致而影响业务。这些都是MySQL高可用方案的基本标准。
另外Elasticsearch入门，我强烈推荐ElasticSearch新手搭建手册和这篇优秀的REST API设计指南 给你，这两个指南都是非常想尽的入门手册。
自从09年阿里开启了双十一活动，近几年各大电商平台的促销活动如火如荼。电商大促期间剧增的流量，对电商平台相关的软件系统也带来了更严峻的挑战。
想必大家应该都有用过API网关，简单的说，API网关就像一个代理转发站，统一接收不同来源的请求，并将它们精准地送到目的地。所以，API网关是一个代理，而且是一个反向代理，那啥是反向代理，为啥不是正向代理，这里有张很有趣的图非常形象。
Docker Swarm是Docker自带的一个集群管理模块。他能够实现Docker集群的创建和管理。
CDN的全称是Content Delivery Network，即内容分发网络。其基本思路是尽可能避开互联网上有可能影响数据传输速度和稳定性的瓶颈和环节，使内容传输的更快、更稳定。通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络，CDN系统能够实时地根据网络流量和各节点的连接、负载状况以及到用 户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上。其目的是使用户可就近取得所需内容，解决 Internet网络拥挤的状况，提高用户访问网站的响应速度。
公司内部 OA 系统要做线上高可用，避免单点故障，所以计划使用2台虚拟机通过 Keepalived 工具来实现 nginx 的高可用（High Avaiability），达到一台nginx入口服务器宕
两个节点可以采用简单的一主一从模式，或者双主模式，并且放置于同一个VLAN中，在master节点发生故障后，利用keepalived/heartbeat的高可用机制实现快速切换到slave节点；
MPP代表"Massively Parallel Processing"，是一种计算机架构，旨在通过分布式处理来实现大规模数据处理和分析。它使用多个处理器或计算节点同时工作，以加快数据处理速度和提高性能。MPP架构通常用于处理海量数据的应用程序，如数据仓库、商业智能和大数据分析。
RabbiMQ是用Erang开发的，集群非常方便，因为Erlang天生就是一门分布式语言，但其本身并不支持负载均衡。
从物理空间概念，Elasticsearch 分布式系统会有 3 个关键点需要学习。本次总结了下面相关内容：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
