以前只在linux上配置J2EE项目执行环境，无非配置下jdk，部署tomcat，再通过docker或者jenkins自动部署上去
之前文章《Linux服务器性能评估与优化(一)》太长，阅读不方便，因此拆分成系列博文：
「 总感觉当下的生活不是想要的，总感觉一路走下去会是一个讨厌的未来，每天睁眼的一瞬间就是懊悔，昨天又浪费掉了...人生没有意义，但是要努力寻找活着的意义--------山河已无恙」
网站的很多性能问题最终都会归结到IO头上，所以说理解iostat命令是非常有必要的。
在这一层咱们主要关注IO ，既然是关注IO，如果IO高应该怎么去分析？怎么定位？
忽然想写个东西，然后发现自己的linux中端口开放问题以及端口占用问题很麻烦，因为我经常用8080端口，如果有一个图形化界面看某个端口被占用以及被什么占用就好了。
更多内容请见原文，原文转载自：https://blog.csdn.net/weixin_44519496/article/details/120583600
iostat主要用于监控系统设备的IO负载情况，iostat提供了丰富的参数给我们查询各种维度的io数据, iostat首次运行时显示自系统启动开始的各项统计信息，之后运行iostat将显示自上次运行该命令以后的统计信息。用户可以通过指定统计的次数和时间来获得所需的统计信息。
监控系统状态 iostat -x 磁盘使用 iotop 磁盘使用 查看磁盘使用情况 在运维工作中，除了查看CPU和内存之外，磁盘的io也是非常重要的一个指标 有时候，CPU和内存有内存，但系统负载就是很高，我们用vmstat命令查看到 b 列或者是 wa 列 较大，这时候就说明磁盘有瓶颈，那么我们就需要更详细的查看磁盘的状态 iostat命令 iostat命令，在查看系统输入输出设备和CPU的使用情况 在安装 sysstat 这个包的时候，就会安装上iostat命令 iosta t和 sar 属于同一
小文件读写的性能瓶颈是磁盘的寻址（随机读写性能更差）,评估的标准是tps。大文件读写的性能瓶颈是带宽，评估的标准是持续的读写速度。Linux可以利用空闲内存作文件系统访问的cache，因此系统内存越大存储系统的性能也越好。
1、今天遇到了需要手动输入http地址打开指定网页的需求，试着做一个用程序打开指定网页的功能，搜了一下，还真有一个现成的例子，稍加改造，实现自己的需求；
1）导包容易出错。尤其Text和CombineTextInputFormat。 2）Mapper中第一个输入的参数必须是LongWritable或者NullWritable，不可以是IntWritable. 报的错误是类型转换异常。 3）java.lang.Exception: java.io.IOException: Illegal partition for 13926435656 (4)，说明Partition和ReduceTask个数没对上，调整ReduceTask个数。 4）如果分区数不是1，但是reducetask为1，是否执行分区过程。答案是：不执行分区过程。因为在MapTask的源码中，执行分区的前提是先判断ReduceNum个数是否大于1。不大于1肯定不执行。 5）在Windows环境编译的jar包导入到Linux环境中运行， hadoop jar wc.jar com.atguigu.mapreduce.wordcount.WordCountDriver /user/atguigu/ /user/atguigu/output 报如下错误： Exception in thread "main" java.lang.UnsupportedClassVersionError: com/atguigu/mapreduce/wordcount/WordCountDriver : Unsupported major.minor version 52.0 原因是Windows环境用的jdk1.7，Linux环境用的jdk1.8。 解决方案：统一jdk版本。 6）缓存pd.txt小文件案例中，报找不到pd.txt文件 原因：大部分为路径书写错误。还有就是要检查pd.txt.txt的问题。还有个别电脑写相对路径找不到pd.txt，可以修改为绝对路径。 7）报类型转换异常。 通常都是在驱动函数中设置Map输出和最终输出时编写错误。 Map输出的key如果没有排序，也会报类型转换异常。 8）集群中运行wc.jar时出现了无法获得输入文件。 原因：WordCount案例的输入文件不能放用HDFS集群的根目录。 9）出现了如下相关异常
1 eclipse中hadoop环境部署概览 eclipse中部署hadoop包括两大部分：hdfs环境部署和mapreduce任务执行环境部署。一般hdfs环境部署比较简单，部署后就 可以在eclipse中像操作windows目录一样操作hdfs文件。而mapreduce任务执行环境的部署就比较复杂一点，不同版本对环境的要求度 高低不同就导致部署的复杂度大相径庭。例如hadoop1包括以前的版本部署就比较简单，可在windows和Linux执行部署运行，而hadoop2 及以上版本对环境要求就比较严格
块是文件系统的抽象，而非磁盘的属性，一般是 Sector Size 的倍数；扇区大小则是磁盘的物理属性，它是磁盘设备寻址的最小单元。另外，内核中要求 Block_Size = Sector_Size * (2的n次方)，且 Block_Size <= 内存的 Page_Size (页大小)。
我们知道单机的端口最多65536，除去系统使用的端口， 留给程序使用的也就6万个端口， 在需要对单机做长连接压力测试的时候，如果要测60W的长连接并发，就得找10台机器，而一般情况下我们并没有这么多的空闲机器去做这种规模的测试，那如何用两台机器模拟百万连接呢？对于TCP的连接，系统用一个4四元组来唯一标识：{server ip, server port,client ip,client port}。这里有两个变量是固定的， server ip与clinet ip。能做文章的也就是两台服务器的端口号了。如果server port 只开启一个端口的话， 那一台client最多也就 6W个连接能连上，多了因为端口的限制无法创建新的连接。如果server端多开几个端口，根据TCP的唯一标识，我们便能够模拟超过6W的连接测试了。处面是具体的代码，项目依赖netty，版本为4.1.25.Final。
root@Kylin104:/home/s3fs-fuse# iostat -d sdm -k 2 -x Linux 4.4.131-20200704.kylin.server-generic (Kylin104) 07/15/2021 _aarch64_ (64 CPU) Device: rrqm/s wrqm/s r/s w/s rkB/s wkB/s avgrq-sz avgqu-sz await r_await w_aw
目前主流的第三方IO测试工具有fio、iometer和Orion，这三种工具各有千秋。
主要用于监控系统设备的IO负载情况，iostat首次运行时显示自系统启动开始的各项统计信息，之后运行iostat将显示自上次运行该命令以后的统计信息。
每个人的生活同样也是一个世界，即使最平凡的人，也得要为他那个世界的存在而战斗。从这个意义
随着公司站点的发展，用户和访问量日益增加，经常会出现数据库主从出现延迟的情况，例如，用户在点击充值页进行充值时，经常会出现充值不到账的情况，针对这个问题，对数据库进行排查，发现，磁盘IO极不稳定，iowait也很高，%util一直在90左右，这说明产生的I/O请求很多，IO已经满负荷，磁盘IO存在瓶颈。所以需要加一块SSD盘，来提高IO处理速度。
be.out也看不出什么有用日志，查看be.WARNING，发现了如下错误，但还不知道如何解决，先记录一下问题
大家好，Node.JS 4.0 发布了，这个流行的服务器端 JS 平台合并了 Node.js 和 io.js 的代码，4.0 版就是这两个项目结合的产物——现在合并为一个代码库。这次最主要的变化是 Node.js 封装了4.5 版本的 Google V8 JS 引擎，与当前的 Chrome 所带的一致。所以，紧跟 V8 的发布可以让 Node.js 运行的更快、更安全，同时更好的利用 ES6 的很多语言特性。
这是 Linux 性能分析系列的第三篇，前两篇分别讲了 CPU 和 内存，本篇来看 IO。
实现思路：获取某目录下的所有jar包，根据最新的修改时间来启动该jar包（当然你也可以写死路径，就连获取也不用了），运用多线程 执行cmd命令同时关闭原程序
运维工程师（Operations）是负责维护并确保整个服务的高可用性，同时不断优化系统架构提升部署效率、优化资源利用率提高整体的ROI的专业人员。他们的基本职责是负责服务的稳定性，确保服务可以7*24H不间断地为用户提供服务。
在做数据库维护的时候，经常会查看操作系统的状态，今天我们说下常见的命令iostat和vmstat。
Linux系统中的 iostat是I/O statistics（输入/输出统计）的缩写，iostat工具将对系统的磁盘操作活动进行监视。它的特点是汇报磁盘活动统计情况，同时也会汇报出CPU使用情况。同vmstat一样，iostat也有一个弱点，就是它不能对某个进程进行深入分析，仅对系统的整体情况进行分析。iostat属于sysstat软件包。可以用yum install sysstat 直接安装。
关于上面的依赖包，如果在Ubuntu下，使用sudo apt-get install * 命令安装，如果在CentOS下，使用sudo yum install *命令来安装。
命令简介 iostat 命令用于统计系统IO状态信息。 语法格式 iostat [options] 选项说明 -c #仅显示CPU使用情况 -d #仅显示设备利用率 -k #显示状态以千字节每秒为单位，而不使用块每秒 -m #显示状态以兆字节每秒为单位 -p #仅显示块设备和所有被使用的其他分区的状态 -t #显示每个报告产生时的时间 -V #显示版号并退出 -x #显示扩展状态 应用举例 查看指定设备的IO状态信息 [root@centos7 ~]# iostat -x /dev/sd
cgroup还有其他一些限制特性，如io，pid，hugetlb等，这些用处不多，参见Cgroupv1。下面介绍下与系统性能相关的io和hugepage，cgroup的io介绍参考Cgroup - Linux的IO资源隔离
iostat命令是Linux系统上查看I/O性能最基本的工具，其全称为 I/O statistics。iostat能统计磁盘活动情况，也能统计CPU使用情况。 iostat属于sysstat软件包，可以通过命令进行安装：
Linux中的sar命令是系统运行状态的统计命令，他讲指定的操作系统状态显示到标准的输出设备中，它的全称是system activity reporter，它可以从多个方面对系统的活动进行报告，包括但不限于：系统磁盘的io状况，cpu当前的效率值，内存使用的情况，进程活动以及文件读写情况等。
照理来说，USB-CAN这种东西应该已经被做的烂大街的工具，国内居然没有一个拿得出手的开源方案。某立功和PCAN动辄2000+的价格也是离谱。淘宝上各种虚拟串口方案、替换dll兼容某立功软件的各种方案....价格都倒是便宜，性能和可靠性嘛.......就不多说了，上位机软件也是烂的一塌糊涂。
由盘片，磁头组成，数据存在盘片的环形磁道上，读写时，磁头移动，定位到数据的磁道，进行数据读写
一、CPU 良好状态指标 CPU利用率：User Time <= 70%，System Time <= 35%，User Time + System Time <= 70%。 上下文切换：与CPU利用
PS：最好是通过代码，自己试一下，了解下百万连接的思路，按照正常是分布式的架构，单机始终是有瓶颈的，100万用户的连接的话单机8g4核轻轻松松，分布式系统就要设计到分布式消息队列，负载均衡，注册中心的概念，推送使用netty方便系统的开发，沾包和拆包的问题方法去解决，而不是自己写一个socket程序很复杂，netty是通过责任链的方式，通过pipline控制之后的步骤。netty的底层是基于NIO，NIO的底层是基于多路复用的机制，多路复用机制是依托于操作系统的，百万连接这个是拼操作系统参数的，java代码是使用的NIO，如果不是使用的NIO，不好意思你达不到，设置到一些系统操作的配置。
Linux系统中的iostat是I/O statistics（输入/输出统计）的缩写，iostat工具将对系统的磁盘操作活动进行监视。它的特点是汇报磁盘活动统计情况，同时也会汇报出CPU使用情况。同vmstat一样，iostat也有一个弱点，就是它不能对某个进程进行深入分析，仅对系统的整体情况进行分析。
iostat是I/O statistics（输入/输出统计）的缩写，用来动态监视系统的磁盘操作活动。
本文介绍了在技术社区中如何从各个维度来评估和监控系统的性能，并通过实例介绍了常见的性能监控指标和工具。
该命令可以显示关于系统各种资源之间相关性能的简要信息，这里我们主要用它来看CPU的一个负载情况。
有时候使用某些api需要使用系统权限，如调用PackageInstaller的相关接口，需要android.permission.INSTALL_PACKAGES权限，该权限系统只会授权给系统应用，此时可以考虑将我们的应用升级为系统应用，升级为系统应用有两种方法：
我们在cpu篇就提到，iowait高一般代表硬盘到瓶颈了。wait的意思，就是等，就像等正在化妆的女朋友，总是带着一丝焦躁。本篇是《荒岛余生》系列第四篇，I/O篇，计算机中最慢的那一环。其余参见：
本文源自 http://www.hollischuang.com/archives/489 写在前面 java作为一门编程语言，在各类编程语言中作为弄潮儿始终排在前三的位置，这充分肯定了java语言的魅力，在实际项目应用中，我们已经无法脱离javaa(Ps当然你可以选择不使用)，但它的高性能，稳定性，扩展性已经深入到每一个java编程工程师的骨髓里，随着时间的推移，我相信更多的项目会加入到java这个大家庭。 然而要想成为一名合格的java工程师并不容易，难于上青天，此话怎讲
java.sql.SQLException: Io 异常: Connection reset 大意看起来应该是连接问题，网上查了一下，说是当数据库连接池中的连接被创建而长时间不使用的情况下，该连接会自动回收并失效，但客户端并不知道，在进行数据库操作时仍然使用的是无效的数据库连接，这样，就导致客户端程序报“java.sql.SQLException: Io 异常: Connection reset” 或 “java.sql.SQLException 关闭的连接” 异常。
# iostat Linux 2.6.32-431.11.25.el6.ucloud.x86_64 (test8_Hadoop_kaf) 07/27/2017 _x86_64_ (4 CPU)
接下来要说的问题是因为这个问题出现在运行时，不能通过编译器在编译期发现，如果不注意这个问题可能在实际应用中出现一些无厘头的问题，别忘了越简单越复杂，所以我们需要在细节问题上杜绝类似问题的发生！
FIO是测试IOPS的非常好的工具，用来对硬件进行压力测试和验证。磁盘IO是检查磁盘性能的重要指标，可以按照负载情况分成照顺序读写，随机读写两大类。
在使用Docker创建了容器之后，大家比较关心的就是如何进入该容器了，其实进入Docker容器有好几多种方式，这里我们就讲一下常用的几种进入Docker容器的方法。
本文以 2 个新增 Redis 原子事件为例，帮助刚接触 ChaosBlade 的社区同学快速入门开源贡献。
登录该服务器后通过iostat -x 1 10查看了相关磁盘使用信息。相关截图如下：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
