Java之旅--Linux&java
Java的生产系统，最常用的是Linux，所以当解决生产系统问题时，理解Linux系统，熟练掌握常用命令，对于解决问题，甚至对从更高层次理解Java，都是很有帮助的。
那么，应该怎么学Linux呢？上周五听了一次高手讲座，对于学习的串联、衔接、进阶，都是很有帮助的，所以分享到这里来。
本次讲座，先走马观花串一遍Linux命令，让其可以辅助我们的工作。但是不仅仅是讲几个命令而已，而是希望能看清楚一些操作系统层面上的事，达到理解和境界思想上的提升。
理解是灵魂，串讲是骨架，然后可以自行丰满血肉，这是目的。
本次讲座，特别适合“有一定理解，但是不深刻，或者恰恰处于进阶边缘”这种情况的人，一讲，一串，醍醐灌顶，理解会立刻深了一层。
1、strace
strace常用来跟踪进程执行时的系统调用和所接收的信号。
strace -T -t -f java Test >out 2>&1
strace -T -t -f p pid
通过这个工具，我们可以看到当Java程序，或者任何一种程序在Linux系统上运行时，实际上都是被分解成Linux API的。
讲这个命令的目的，是提示我们，可以用一种方式，用一种工具，比如strace，去理解我们的程序的运行。
语言，不论在哪种平台运行，最后都是要分解成操作系统API，分解成CPU指令。这是思维的进阶，或者我们忙于日常应用系统的开发，忘记了曾经的本质。
参考文章：
2、进程
pstree 是Linux的进程体系。
ps 是系统某个时刻的进程切面，代表某个时刻有多少个进程在运行。
因为在Linux下，包括进程、Socket等，都是以文件的形式存在的，内存中的。我们可以通过ps找出进程id，然后通过“运行时文件系统”，查看进程的任何信息。
从操作系统层面鉴定进程的信息（路径、jar、连接等），是完全准确的，比从配置文件里面查询准确，也不需要问别人。
ps -ef | grep catalina
cd /proc/60282/fd
可以进一步查看更多内容，比如：
a、写多少日志：ll | grep log
b、启动要那些jar：ll | grep jar
c、看到那些一闪一闪的了吗？那些是socket，代表谁连我了：ll | grep socket
d、对于这些socket句柄，我们可以进一步查看是什么进程：lsof | grep 387084
3、内存+CPU
top，这是应该极熟的Linux命令，是Linux下常用的性能分析工具，能够实时显示系统中各个进程的资源占用状况，其显示的内容，和Windows的任务管理器是一样的。
free ，查看内存使用情况。
我们也可以在Windows下使用jvisualvm，以图形化的方式，查看Java应用的内存，线程，也可以把线程dump下来，比如，Test应用运行方式如下：
java -Dcom.sun.management.jmxremote.port=9998 -Dcom.sun.management.jmxremote.ssl=false -Dcom.sun.management.jmxremote.authenticate=false -Djava.rmi.server.hostname=192.168.80.128 Test
则可以在本地通过jvisualvm监控进程情况，在命令行输入jvisualvm，远程，连接ip地址，之后右键这个远程连接，新建JMX连接，输入端口，则可以监控这个远程java进程了，截图如下：
4、网络
netstat -anop | grep LIST 可以查看，都启动了那些端口，比如：
第六列“2489/mongod”，进程号2489，是mongod进程，在27017端口监听mongo接入。
有的时候，netstat不显示PID和应用，这一般是两个原因：权限不够，或者netstat版本太低，小于1.6，如果是版本太低，可以用：lsof -i:端口号，来找出PID。
参考文章：netstat不显示进程名pid的bug。
netstat -anop | grep EST 可以查看，端口都被谁连着呢，比如：
第4列，代表自己的IP和端口；第5列，对标对方的IP和端口；第6列，代表进程号和启动进程的应用。
其他常用的：
strace -T -t -e network,poll curl www.baidu.com 我们可以看到从我们的机器，到百度的服务器，经过的路由路径
cat /etc/resolv.conf 可以看到域名解析服务器的顺序
cat /etc/hosts The static table lookup for host name(主机名查询静态表)
5、线程
top -p 59851 shift+H，查看59851进程，有多少个线程。
第一列PID，线程ID，换算成16进制，就是线程栈中的NID。
我们可以使用 jstack -l 59851查看，整个进程的信息，也可以使用jstack -l 59851 | grep NID，只看一个线程栈的信息。
很多时候，查看问题的时候，都需要找出占用资源最多的线程，然后查看这个线程的线程栈信息。
这几个步骤，操作起来很容易，其实最最关键的是，线程栈dump下来了，要看得懂。
关于JVM线程的讲解，有一些非常好的文章，如下：
6、GC
Linux下一个进程里面的线程，都是共享内存的，所以当分析内存时 ，要看进程。
jstat -gccause 59851 1000 jstat，即JVM Statistics Monitoring Tool，用于收集HotSpot虚拟机各方面的运行数据
我们不怕YGC，YGC很频繁，很快，系统耗时极短，微妙级，对于用户来说是没有感觉的；
但是FGC要注意，FGC进行的时候，JVM是假死的，只进行FullGC，不处理其他请求，可能会持续几秒，FGC太多，说明YGC回收不了，太多的对象进入老年代，很快占满，系统肯定有问题的。
java -XX:+PrintFlagsInitial ，可以查看JVM的参数配置情况，比如，默认情况下，我们可以看到，Survior：Eden = 1：8，New：Old = 2：1。
jmap -histo 59851 | more Memory Map for Java，生成虚拟机的内存转储快照（heapdump文件）
通过jmap，可以找出系统中可能有安全隐患（比如太多而不能回收）的对象。
通过这些手段，不用分析代码，不用停机，就可以找出问题，解决问题。
jps、jstat、jstack、jmap，这些不是Linux命令，而是JDK写好的放在rt.jar里面的用于辅助诊断的Java APP。
GC是Java程序员的基本功，应该理解的很清晰。
7、dstat和iftop
场景1：演示通过sftp上传文件
可以在top中看到sshd和sftp耗费CPU资源很大，因为sftp是基于sshd的；可以在dstat中看到，receive流量很大。
场景2：演示http请求百度首页，通过ss5代理压测，在ss5机器中，dstat显示的send和recv几乎一样。
和我们通常理解的，应该会有很少的发出数据，和很多的接收数据不一致。原因是：
这种理解不对的，作为ss5代理的机器，既从远端接收到大量数据，同时把接收到的大量数据，转发给它所代理的机器，所以有这个网络现象。
这个时候，我们通过iftop，则可以清楚的看到IP到IP的发出发入数据包。
所以，知道，借助于工具，基于Linux的知识，基于Java的知识，定位问题，找出问题，是很关键的。
iftop 是第三方的，是一个实时流量监控工具：
主要用来显示本机网络流量情况及各机器相互通信的流量集合，如单独同那台机器间的流量大小，非常适合于代理服务器和iptables服务器使用。
官方网站：http://www.ex-parrot.com/~pdw/iftop/。
安装步骤：
yum -y install flex byacc libpcap ncurses ncurses-devel libpcap-devel
wget http://soft.kwx.gd/tools/iftop-0.17.tar.gz #获得软件包
tar zxvf iftop-0.17.tar.gz #解压
cd iftop-0.17 #进入目录
./configure #使用默认配置
make && make install #编译并安装
如果libpcap包装不上的话，需要到http://pkgs.org/自行下载rpm进行安装。
dstat是Linux自带的，可以yum安装。
dstat截图：
iftop截图：
8、“|” 管道。连接、过滤，这是管道的作用，就像连接千家万户的自来水管
管道操作符，按行给数据，一行一给，把上个命令的输出，变成下个命令的输入。
经常使用的参数-c ，类似于 SQL中的group by。
在linux中，要把日志文件，当成数据库表，日志文件也是有行有列的。日志要标准，要有规律，就会很方便的分割查找。
我们可以借助less、more、cat、sort、uniq、grep、awk等命令，很方便的分析日志。
另外，awk是一个强大的文本分析工具，awk在对数据分析并生成报告时，很强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。
9、其他常用命令
df -h 显示磁盘分区使用情况
du -sh /root/temp 显示某个文件夹的大小
find /root/temp -type f -name "*.txt" | xargs grep "main" 在/root/temp目录下，在普通文件中，在扩展名为txt的文件中，查找含有main字符串的行
lsof -l 显示所有的socket句柄
lsof | grep deleted 刚刚rm或者echo冲文件内容后，看看空间有没有释放
sed 文件内容查找和替换
vim 文本编辑器，常用就会熟悉。开始的时候记录最常用的，比如，翻屏：CTRL+U（D），2gg，3dd，3dw，yy，/查找，?查找。
10、学会分析错误的思路
学会错误的模拟重现，会模拟重现就能解决。模拟重现的手段：可以开发一些质量差的代码，把错误做出来。
工具只是帮助我们定位问题的，帮我们记录发生问题时的操作系统切面，要理解这个切面所代表的意义、所隐含的异常，还需要对相关基础知识的深刻了解。比如：
- 用jstat看GC，需要对Java的内存管理、垃圾收集技术深入了解；
- 用netstat看网络，需要对网络知识，特别是TCP，有深入了解；
- 用jstack转储线程栈，需要对Java线程的知识，有深入了解。