It's all about my Shell learning and config. A Linux Server Administrator should Know :) :)
- 使用场景: 将过滤后的日志输出至文件中可以方便查看和查找关键字
- 编辑器内命令非常多，常用的整理如下，如果需要更多，可以参考此链接 VIM命令总结
- vi & vim & view 将文件打开
vi 2019_0123_64006A85FD0E_all.log vim 2019_0123_64006A85FD0E_all.log // vi 与 vim 打开文件其实一致，部分老的设备没有安装vim view 2019_0123_64006A85FD0E_all.log // view方式打开文件是只读模式,如果在编辑后需要保存可以使用 :w! 强制保存 - 进入文件之后有4种模式，一般常用2种：1，正常模式；2，插入模式；打开文件之后默认进入 1-正常模式，此外，无论处于什么模式，均可以通过 键进入正常模式
- 正常模式:
### 正常模式下可以进行查找、替换、设置格式、行号、跳转等一系列不需要内容插入的操作，例如： 0 // 跳转至当前行的首字符 $ // 跳转至当前行的末尾字符 x // 删除光标选择的字符 r // 替换光标选择的字符 u // 回退上一个操作 dd // 删除光标所在行(其实是剪切) yy // 复制光标所在行 p // 将剪贴板上的内容粘贴在光标所在行的下一行 ?stringA // 向上查询 stringA 关键字 n可以向上继续查询，N向下查询 /stringA // 向下查询 stringA 关键字 n可以向下继续查询, N向上查询 /int\> // 向下查询以 int关键字结尾的匹配项 /\<int\> // 向下查询匹配 int 关键字的字符串，全字匹配 :set ignorecase // 查找时忽略大小写 :set noignorecase // 查找时取消忽略大小写 :set nu // 设置文件显示行号 :set nonu // 设置文件取消显示行号 :1 // 跳转至文件的第一行(数字可以任意填写,会跳转至指定行) :%s /stringA/stringB/g // 将文件中的 stringA 字符串全部替换为 stringB 字符串 :16,78 /stringA/stringB/g // 将文件中的 16-78 行区间内的 stringA 字符串全部替换为 stringB 字符串 :set fileformat=unix // 设置文件格式 :q! // 放弃当前文件的编辑并退出该文档 :wq! // 保存当前文件的编辑内容并退出该文档 :w // 保存当前文件的编辑内容 ### 正常模式下还可以进行组合键操作，用以翻页、跳转等，例如: shift + g // 跳转至文件末尾 ctrl + f // 向下翻页 ctrl + d // 向下翻 ctrl + b // 向上翻 ctrl + g // 查看当前文件行数，光标位置百分比 - 插入模式(编辑模式)
### 插入模式进入方法: a 或者 i (append or insert) 在插入模式下就和正常的txt文本编辑器一致，可以输入字符，写代码，写注释等 实际应用过程中可以灵活切换 正常模式 与 插入模式, 通过 <ESC> 按钮和 i 按钮进行切换即可
- 菜鸟教程 // 非常实用的Linux教程，Shell教程
- 快速学习Bash-Vamei // 受益匪浅的博客
- 实用命令
echo xxx // 可以打印出xxx 或者 echo $A 打印出A变量的内容 echo $? // 可以打印出上一个命令执行是否成功,如果为0则成功 touch xxx.cpp // 可以创建一个xxx.cpp空文件 (touch命令可以用来修改文件的时间 -d) man // 可以查看手册中关于某个函数或者命令的解释,标准手册,可以查看 man man cat filename.log // 可以将文件的内容全部打印在屏幕中 nl xxx.cpp // 可以打印出xxx.cpp并且附带行号 more filename.log // 可以将文件的部分内容打印在屏幕上，使用d下翻b上翻q结束 tail -n filename.log // 可以查看文件的末尾n行内容(或者使用tail -n 5 x.log) head -n filename.log // 可以查看文件的首部n行内容 expr 1 + 2 // 可以计算出 1+2 的值(注意*需要添加\转义符) ps -ef | grep xxxx // 可以查看正在工作的进程信息，包含进程ID sed 's/stringA/stringB/g' 1.txt // 可以将文件中的A字符串替换成B字符串后显示(但文件里内容未实际替换 >重定向即可) tar -cvf ~/tmp.tar ~/dir1/*.txt // 可以将~/dir1目录下的所有txt文件打包在~目录下的tmp.tar包中 tar -xvf ~/tmp.tar // 可以将~/tmp.tar解压到当前目录下 tar zxvf ~/tmp.tar -C ~/log // 可以将~/tmp.tar包解压到指定的~/log目录下 gzip xxx.tar // 可以将xxx.tar压缩为.gz格式(大小会改变) gunzip xxx.tar.gz // 可以将xxx.tar.gz压缩包解压 crontab -e // 可以加入定时执行的任务 crontab -l // 可以查看当前系统的定时执行任务 kill 12339 // 可以杀死进程12339 (可以加入-9参数 kill -9 12339) nohup sh xxx.sh & // 可以后台执行xxx.sh，输出会重定向到当前目录的nohup.out或者根目录下的.out文件中 chmod +x start.sh // 可以给start.sh文件赋予执行的权限(rwx 4 2 1 = 7) --- script filename.log // 可以开始记录系统接下来的标准输出信息到文件中(如果要退出，使用 exit 退出) banner hello // 可以打印出一个加大版的hello (部分系统需要apt install sysvbanner) wall hello // 可以在登录的服务器上公告hello，每个登录的用户都会收到一条这个hello信息 diff file_01 file_02 // 可以查看file_01 与 file_02两个文件的区别 diff3 file_01 file_02 file_03 // 可以查看3个文件的区别 wc -l filename.log // 查看文件的行数 使用方法: wc -l x.txt 或者 cat x.txt | wc -l who // 查看当前登录系统的用户并查看信息 vmstat -w // 查看当前系统的硬件信息 iostat // 查看当前系统的io状态，是否有io wait top // 查看当前系统的CPU状态以及正在工作的进程 lsof -i:端口号 // 查看某一端口的占用情况 netstat -tunlp // 查看全部端口的占用情况 netstat -tunlp | grep 端口号 // 查看某一端口的占用情况 curl ifconfig.me // 查看Linux服务器的公网IP curl cip.cc // 查看Linux服务器的公网IP及运营商信息(more) - 常用命令
### find (可以用来查找文件) find ./ -name "*.txt" -type f -print // 查找./目录下所有.txt文件并打印在结果区 find ./ -name "Main" -type d -print // 查找./目录下所有名称为Main的的文件夹 find 命令还有很多种其他用法，上述两种为经常用到的查找文件或者目录的用法 ### grep (可以用来查找关键字) grep keyword xxx.log // 在xxx.log中查找keyword关键字，并打印出匹配行的内容 grep keyword xxx.log | wc -l // 查询出匹配的关键字行数并进行统计行数量 cat xxx.log | grep keyword // 用途同上, 但是会多一步操作，文件太大不要这么做 grep keyword01 xxx.log | grep keyword02 // 查找到keyword01关键字的结果再次查找keyword02关键字 grep -n key -A 2 -B 2 xxx.log // 查找在xxx.log中匹配key关键字的行，并同时将前2行后2行展示 grep key xxx.log | grep -v key01 // 查找在xxx,log中匹配key关键字的行，忽略其中有key01关键字的行 grep -i key xxx.log //不区分大小写地搜索,默认情况区分大小写 grep -w key xxx.log //只匹配整个单词，而不是字符串的一部分（如匹配‘magic’，而不是‘magical’）， grep命令非常强大,并且可以和其他命令组合,使用管道符 | 将结果进行多次过滤 ### awk (行处理器，根据每一行内容进行处理后输出) awk -F ':' '{print $2}' xxx.log // 输出xxx.log每一行以:为分隔符的第2个区域的内容 1:2:3 输出2 awk -F ':' '{print "%-30s%-15s\n",$1,$2}' // 输出第1个域的内容,左对齐30个字符;输出第2个域的内容,左对齐15个字符 awk命令还可以执行代码块操作，这里不做展开，上述这个用法最为实用, 使用 | 管道符组成一串复杂的命令 ### sed (对行做处理, 替换或者删除) sed '10d' test.log // 删除test.log中的第10行 sed -i '$a addLine' big.log // 在big.log的末尾添加一行内容为: addLine sed -i '10 a newLine' big.log // 在big.log的第10行添加一行内容为:newLine(文件特别大,不使用vim打开编辑) ### > or >> (重定向) > ~/tmp/renleilei/2019_0125.log // 创建一个新的文件或者清空原有文件后将输出写入该文件 >> ~/tmp/renleilei/2019_0125.log // 创建一个新的文件或者将文件内容追加到原有文件的最后
-eq 比较两个数是否相等
-ne 比较两个数是否不等
-lt 参数1是否小于参数2
-le 参数1是否小于等于参数2
-gt 参数1是否大于参数2
-ge 参数1是否大于等于参数2
-f 检查某文件是否存在
-d 检查目录是否存在
- find ./ -size +1000c –print (查询当前目录下大于1000字节的文件名，并打印出来)
- find ./ -size +10 –print (查询当前目录下大于10块的文件名，blocks = 512 字节
- find ../ -name "test*" (-print) (能够查询到../(上级目录)中的所有适配test的文件，此处通配符适用)
- find ./ -name 'bxdx_gafe.*.tar' -ctime +2 -type f -exec rm -rf {} ; //删除过期两天的文件，注意单引号
- banner hello （可以打印出一个加大版的hello）
- wall xxxxxx （可以在服务器登录的用户界面显示xxxxx,相当于公告）
- diff filename_1 filename_2 (能够查找两个文件的区别所在)
- diff3 filename_1 filename_2 filename_3 (能够同时查找三个文件的区别所在)
- dircmp [-s] [-d] dir_1 dir_2 (能够查询两个文件夹中相同的文件及同名不同内容的文件)
- wc -l (在命令后使用管道符加之可以显示行数，或者直接使用 wc -l xxx.sh 或者cat xxx.sh | wc -l)
- who | grep username(userIP) 查看当前登录系统的用户并查看以该用户名或者IP登录的人
- vmstat -w （查看计算机的硬件状态）
- iostat （查看计算机的io状态，是否有io wait）
- topas （查看计算机的CPU状态以及正在进行的进程）
- topas 进入之后键盘输入 c/d/n 等，分别对应cpu/disk/net ,可以输入h查看帮助中的各参数
- expr int1 operator int 2 (使用expr命令驱动算数运算符，乘法*需要转义- 通配符转义)
- script /xx/xx/xx.log （使用Linux自带的监视终端屏幕显示，输入及输出）
- more log.txt | grep 'b' (查询并显示log.txt文件中包含b字符的行)
- more log.txt | grep '[Bb]' (查询并显示log.txt文件中包含 b或B 字符的行)
- sed 's/|//g' filename.txt (将filename.txt中的 | 字符替换为空后显示出来，实际文件未替换)
- sed 's/|//g' filename.txt > filename_new.txt （将|字符替换为空后写入到filename_new.txt中）
- if [ -d log ] (该语句可以查看当前目录下是否存在log目录，else为不存在)
- tail -n 10000 filename > ~/tmp/20170622.txt (可以将filename文件中最末尾的1w行写入txt文件中)
- ps -ef | grep ttU110 | wc -l (可以查看ttU110进程目前有多少个)
- ps -ef | grep ttU110 | grep -V grep | awk -F" " '{print $2}' | xargs kill -9 (循环杀死该名所有进程)
ps -ef | grep $1 | grep -V grep >jincheng.txt
cat jincheng.txt | while read LINE
do
proc=`echo $LINE | awk '{print $2}'`
echo $proc
kill -9 $proc
done
- tar -cvf ~/tmp/etc.tar ./etc/* （将当前目录下的etc文件夹下所有文件打包至tmp目录下的etc.tar）
- tar -xvf ./etc.tar （将当前目录下的etc.tar直接解开）
- tar zxvf ./etc.tar.gz -C /log （解压到指定路径）
- gzip xxx.tar （将xxx.tar压缩为 .gz 格式）
- gunzip xxx.tar.gz （将xxx.tar.gz压缩包解压）
- compress -f xxx.tar （将xxx.tar压缩为.Z格式）
- 从服务器 A 连接至服务器 B - ftp 10.129.9.94 //(B's ip) - 输入账号:cbs - 输入密码:spdb1234
- bin（二进制模式传输文件）- cd xxx/xx/xx //可以输入pwd或ls -lrt - get xxx.xx 或者 put xxx.xx
- vim ~/.bashrc 然后加入下面一行 export PS1='[\e[32m][[\e[35m]\u[\e[m]@[\e[36m]\h [\e[31m]\W[\e[32m]][\e[36m]$[\e[m] '
- http://www.cnblogs.com/daizhuacai/archive/2013/01/17/2865132.html （新用户添加、）
- http://blog.chinaunix.net/uid-25436678-id-3853661.html （用户、组）
- http://blog.csdn.net/nyist327/article/details/45056591 （解决tab、退格上下键、环境变量）
- useradd –d /usr/sam -m sam 此命令创建了一个用户sam，其中-d和-m选项用来为登录名sam产生一个主目录/usr/sam（/usr为默认的用户主目录所在的父目录）。 假设当前用户是sam，则下面的命令修改该用户自己的口令：
- passwd Old password:****** New password:******* Re-enter new password:******* 如果是超级用户，可以用下列形式指定任何用户的口令：
- passwd sam New password:******* Re-enter new password:*******
- groupadd basic 添加basic组
- 改变所有者（chown）和用户组（chgrp）命令
chown xiaoming abc //改变abc的所有者为xiaoming
chgrp root abc //改变abc所属的组为root
chown root ./abc //改变abc这个目录的所有者是root
chown ‐R root ./abc //改变abc这个目录及其下面所有的文件和目录的所有者是root
- http://blog.csdn.net/wl_fln/article/details/7258294
- http://blog.csdn.net/lylwo317/article/details/51285404
uname -a //内核版本
lsb_release -a //系统版本 // cat /etc/issue 可以设置登录画面
getconf LONG_BIT //显示64即为64位
/etc/motd //可以添加开机对用户说的话
pkexec chmod 0440 /etc/sudoers
pkexec chmod 0440 /etc/sudoers.d
- 保证 /etc/hosts 中 127.0.0.1后面的 主机名和 /etc/hostname 中一致
- 确认系统已经安装了SSH
rpm –qa | grep openssh
rpm –qa | grep rsync
service sshd restart //重启ssh服务
- 生成秘钥对
ssh-keygen –t rsa –P '' -- 直接回车生成的密钥对：id_rsa和id_rsa.pub，默认存储在 ~/.ssh/` 注意：最后是两个单引号
- 把id_rsa.pub追加到授权的key里
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
- 修改授权key的权限
chmod 600 ~/.ssh/authorized_keys
- 修改SSH配置文件
su - //登陆root用户修改配置文件
vim /etc/ssh/sshd_config //去掉下面的三行的注释（包含yes结尾关于ssh配置的三行）
RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeyFile .ssh/authorized_keys
- 测试连接
service sshd restart //重启ssh服务(root用户才有权限)
exit //退出root用户，回到普通用户
ssh localhost //连接普通用户测试
- 配置远程主机ssh
scp ~/.ssh/id_rsa.pub 远程用户名@远程服务器IP:~/ //将公钥复制到远程服务器的~/目录下
- 配置远程主机ssh，授权客户机登录
（若远程主机未创建ssh，可以执行 ssh-keygen -t rsa - 生成 .ssh/ 并授权 700）
cat ~/id_rsa.pub >> ~/.ssh/authorized_keys //追加公钥到授权key中
rm ~/id_rsa.pub //保险起见，删除公钥
同样在134机器上重复第四步和第五步
service sshd restart //重启ssh服务
-
从客户机输入 ssh 主机IP 即可查看是否已设置成功
-
若配置了ssh之后仍需要输入密码，请按照如下链接中的方式检验是否该服务器目录权限不是默认值
http://zouqingyun.blog.51cto.com/782246/1874410/ll /gafe -ld //此处gafe为你需要登录的服务器用户默认目录 即 /home/gafe
crontab -e //进入编辑器编辑定时任务
30 23 * * * sh ~/crontab_shell/task01.sh //编辑器中加入此23:30会定时执行的任务
crontab -l //启动定时任务
alias cdw=`cd ~/Res`
source ~/.bashrc
ps -A -ostat,ppid,pid,cmd | grep -e '^[Zz]'
-A 参数列出所有进程
-o 自定义输出字段 我们设定显示字段为 stat（状态）, ppid（进程父id）, pid(进程id)，cmd（命令）这四个参数
kill -HUP 12339 //选择先杀子进程，若杀不死再杀父进程 ,重跑 -hup为重跑 SIGHUB[1]
kill -9 12339 //直接杀死该进程
kill [ -s signal | -p ] [ -a ] pid ...
kill -l [ signal ] //使用kill -l 可以显示信号列表
:set fileencoding //查看现在文本的编码
:set fenc=编码 //转换当前文本的编码为指定的编码
:set enc=编码 //以指定的编码显示文本，但不保存到文件中。这里的“编码”常见为gbk utf-8 big5 cp936
:set ff? //查看当前文本的模式类型，一般为dos,unix
:set ff=dos //设置为dos模式,也可以用一下方式转换为unix模式
:%s/^M//g //等同于:set ff=unix
- http://blog.chinaunix.net/uid-26785297-id-3375270.html
- 1, & //例如 sh xxx.sh & ,将这个命令放在后台执行
- 2,ctrl+z //将前台正在执行的任务放到后台执行并暂停
dpkg: error: dpkg status database is locked by another process 解决方法
$ sudo rm /var/lib/dpkg/lock
$ sudo dpkg --configure -a
$ sudo rm /var/lib/apt/lists/lock
- https://www.rails365.net/articles/bu-shu-zhi-zai-a-li-yun-ubuntu-zhu-ji-shang-an-zhuang-ruby-on-rails-huan-jing-liu
- 包含 安装nginx、安装git、安装redis、安装nodejs、安装mysql