日常编程开发技巧之二

Centos 7 卸载系统自带的 NodeJs

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
# 查看已安装的npm
# rpm -qa|grep npm

# 查看已安装的nodejs
# rpm -qa|grep nodejs

# 卸载
# yum -y remove nodejs npm

# 删除残留文件
# rm -rf ~/.npm
# rm -rf ~/.npmrc
# rm -f /usr/bin/npm
# rm -f /usr/bin/node
# rm -rf /usr/lib/node_modules

Linux 批量替换文件内容

1
2
3
4
5
6
7
8
9
10
11
12
13
# 命令格式:sed -i "s/查找字段/替换字段/g" `grep 查找字段 -rl 路径`

# 为了不区分大小写匹配搜索,可以使用 I 参数
$ sed 's/unix/linux/gI' sed-test.txt

# 将当前目录下所有文件中的字符串oldstring替换为newstring
$ sed -i "s/oldstring/newstring/g" `ls`

# 查找当前目录下所有后缀为md的文件,并将文件中的字符串oldstring替换为newstring
$ sed -i "s/oldstring/newstring/g" `find . -name "*.md"`

# 当搜索和替换含分隔符的字符串时,需要用反斜杠 \ 来取消转义
$ sed "s/\/bin\/bash/\/usr\/bin\/fish/g" sed-test.txt

Linux 删除文件中的某行内容

1
2
3
4
5
# 删除文件中的某行内容
$ sed -i '/hello/d' abc.txt

# 查找当前目录下所有后缀为txt的文件,并批量删除文件中的某行内容
$ find . -type f -iname "*.txt" | xargs -I {} sed -i '/hello/d' {}

Linux 批量替换文件名中的字符串

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# 假设原文件名是“stu_102999_5_finished.jpg”,需要替换字符串"_finished"为""空字符串

# 方法一:使用rename改名(支持中文特殊字符的替换)
$ rename "_finished" "" *.jpg

# 使用rename批量改名
$ find . -name "*.avi" | xargs -I {} rename "xxx" "" {}

# 方法二:for循环结合sed替换
$ for file in `ls *.jpg`;do mv $file `echo $file|sed 's/_finished//g'`;done;

# 方法三:for循环加变量部分截取
$ for file in `ls *.jpg`;do mv $file `echo ${file%_finished*}.jpg`;done;

# 方法四:ls结合awk,输出交给bash执行
$ ls *.jpg |awk -F "_finished" '{print "mv "$0" "$1$2""}'|bash

Linux 搜索文件里面的内容

1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 在单个文件中搜索内容,区分大小写
$ grep 'keyword' filename

# 在单个文件中搜索内容,忽略区分大小写
$ grep -i 'keyword' filename

# 在多个文件中搜索内容,忽略区分大小写
$ grep -i 'keyword' filename1 filename2 filename3

# 搜索一个目录下所有文件里面的内容,忽略区分大小写
$ find . -type f -name "*" | xargs grep -i "keyword"

# 搜索一个目录下后缀为 .properties 的文件里面的内容,忽略区分大小写
$ find . -type f -name "*.properties" | xargs grep -i "keyword"

FFmpeg 常用命令

1
2
3
4
5
# 将flv格式的视频转换为mp4格式
$ ffmpeg -i xxxxx.flv xxxxx.mp4

# 按时间戳截取视频片段
$ ffmpeg -i ./SN.mp4 -vcodec copy -acodec copy -ss 00:00:00 -to 00:00:05 ./cutout1.mp4 -y

Hexo 创建草稿

1
2
3
4
5
6
7
8
9
10
11
12
13
# 创建草稿,默认会在source/_drafts目录下生成first-draft.md文件
$ hexo new draft "first-draft"

# 提示:草稿不会被显示在任何页面上,链接也访问不到,也就是说如果想把某一篇文章移除显示,又不舍得删除,可以尝试把它移动到source/_drafts目录之中

# 如果希望强行预览草稿,可以更改_config.yml配置文件中的以下参数
render_drafts: true

# 或者,使用如下方式启动server后预览草稿
$ hexo server --drafts

# 将草稿转成正式文章
$ hexo publish "first-draft"

Linux 压缩 Jpeg 图片

1
2
3
4
5
6
7
8
9
10
11
# 安装软件
# yum install -y jpegoptim

# 指定图片压缩后的大小
$ jpegoptim --size=520k pic.jpeg

# 指定图片压缩质量
$ jpegoptim -m80 pic.jpg --dest pic-2.jpg

# 批量压缩图片
$ find . -name "*.jpg" | xargs jpegoptim

Linux 压缩 Png 图片

1
2
3
4
5
# 安装软件
# yum install -y optipng

# 压缩图片
$ optipng pic.png -out pic-2.png

https://github.com/bugwhine/lookbusy

卸载 UrBackup 服务

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
# 提示:UrBackup的服务之前是通过手动编译的方式来安装

# 查找UrBackup的自启动服务
# systemctl list-unit-files --type=service | grep enabled | grep urbackup

# 停止UrBackup的自启动服务
# systemctl stop urbackup-server.service
# systemctl disable urbackup-server.service

# 删除UrBackup的日志文件
# rm -rf /var/log/urbackup.log

# 删除UrBackup的安装文件
# rm -rf /usr/local/var/urbackup
# rm -rf /usr/local/share/urbackup
# rm -rf /usr/local/bin/urbackupsrv

# 删除UrBackup的配置文件
# rm -rf /etc/default/urbackupsrv
# rm -rf /etc/logrotate.d/urbackupsrv
# rm -rf /etc/systemd/system/urbackup-server.service

# 查漏补缺,将搜索到的文件全部删除掉
# find / -type d -iname 'urbackup'
# find / -type f -iname 'urbackupsrv'

Github 搜索技巧

Github 官方的搜索语法介绍,常用搜索示例如下,当同时使用多个搜索参数时,使用” 空格” 符隔开不同的参数

  • in:name spring // 搜索名字中带有”spring” 的项目
  • in:readme spring // 搜索 readme 中带有”spring” 的项目
  • in:description spring // 搜索描述中带有”spring” 的项目
  • stars:>1000 // 搜索 stars>1000 的项目
  • forks:>1000 // 搜索 forks>1000 的项目
  • pushed:>2020-01-15 // 搜索最近更新于 2020 年 1 月 15 日之后的项目
  • language:Python // 搜索 Python 的项目

Linux 查看硬盘转数

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
# 下载sg3_utils工具的压缩包,官网地址:http://sg.danny.cz/sg/sg3_utils.html
# wget http://sg.danny.cz/sg/p/sg3_utils-1.45.tar.xz

# 解压文件
# tar -xvf sg3_utils-1.45.tar.xz

# 进入解压目录
# cd sg3_utils-1.45

# 编译安装
# ./configure
# make && make install

# 查看硬盘转数
$ sg_vpd --page=0xb1 /dev/sde
Nominal rotation rate: 7200 rpm
Nominal form factor: 3.5 inch

Linux 使用 Sysbench 进行压测

常用的压测工具:ab、stress、sysbench、webbench、jmeter。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
# 压测CPU性能(单核、四核、八核)
$ sysbench --test=cpu --num-threads=1 --max-requests=10000 run
$ sysbench --test=cpu --num-threads=4 --max-requests=100000 run
$ sysbench --test=cpu --num-threads=8 --max-requests=100000 run

# 压测CPU性能(单核、四核、八核),cpu-max-prime 是素数生成数量的上限,threads 是线程数,time 是运行的时间(秒),event 是达到上限的次数(默认值为0,表示不限制上限次数)
$ sysbench cpu --cpu-max-prime=20000 --threads=1 --time=10 run
$ sysbench cpu --cpu-max-prime=20000 --threads=4 --time=10 run
$ sysbench cpu --cpu-max-prime=20000 --threads=8 --time=10 run

# 压测内存性能(随机读写、连续读写)
$ sysbench --test=memory --memory-block-size=1K --memory-total-size=1G --memory-access-mode=rnd run
$ sysbench --test=memory --memory-block-size=1K --memory-total-size=1G --memory-access-mode=seq run

# 压测八线程的共享线程锁
$ sysbench --test=threads --num-threads=1000 --thread-yields=1000 --thread-locks=8 run

# 压测互斥锁
$ sysbench --test=mutex --mutex-num=4096 --mutex-locks=50000 --mutex-loops=10000 run

# 压测磁盘IO(随机读写、连续读写)
$ sysbench --test=fileio --file-num=2 --file-total-size=64M --file-test-mode=rndwr run
$ sysbench --test=fileio --file-num=2 --file-total-size=64M --file-test-mode=seqrewr run

CRT 格式证书转为 PEM 格式证书

1
$ openssl x509 -in example.com.crt -out example.com.pem -outform PEM

系统端口号冲突排查

1
2
3
4
5
6
# 查看当前系统各服务占用的端口号
# netstat -lntup

# 查看占用8080端口的服务
# netstat -anp|grep 8080
# netstat -aon|grep 8080

Centos 6、7 的服务类相关命令

  • Centos 6

    • 注册在系统中的标准化程序
    • 统一的管理方式(常用方法)
      • service 服务名 start
      • service 服务名 stop
      • service 服务名 restart
      • service 服务名 status
    • 查看服务的方法: /etc/init.d/服务名
    • 通过 chkconfig 命令管理服务自启动
      • 查看自启动的服务: chkconfig --list|grep xxx
      • 启用服务自启动: chkconfig --level 5 服务名 on
      • 关闭服务自启动: chkconfig --level 5 服务名 off
  • Centos 7

    • 注册在系统中的标准化程序
    • 统一的管理方式(常用方法)
      • systemctl start 服务名(xxx.service)
      • systemctl stop 服务名(xxx.service)
      • systemctl restart 服务名(xxx.service)
      • systemctl reload 服务名(xxx.service)
      • systemctl status 服务名(xxx.service)
    • 查看服务的方法: /usr/lib/systemd/system/服务名
    • 查看服务的命令
      • systemctl list-unit-files | grep service_name
      • systemctl --type service | grep service_name
    • 通过 systemctl 命令管理服务自启动
      • 启用服务自启动: systemctl enable service_name
      • 关闭服务自启动: systemctl disable service_name

Centos7 管理不同版本的 JDK

/etc/alternatives/ 目录存放着系统默认命令的链接符,而 update-alternatives 是 Linux 系统中专门维护系统命令链接符的工具,通过它可以很方便地设置系统默认使用哪个命令、哪个软件版本。例如,在系统中同时安装了 Open JDK 和 Oracle JDK(两者都通过 RPM 包安装),而实际又希望系统默认使用的是 Oracle JDK,此时就可以通过 update-alternatives 很方便地实现。当执行以下命令后,根据输出的提示信息,直接输入希望被系统默认使用的选项的编号即可;命令执行完后,可以看到 /etc/alternatives/ 目录下 Java 相关的链接符发生了改变。

1
2
3
4
5
6
7
8
9
10
11
# update-alternatives --config java

共有 3 个提供“java”的程序。

选项 命令
-----------------------------------------------
1 /usr/java/jdk1.8.0_102/jre/bin/java
2 java-1.8.0-openjdk.x86_64 (/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.272.b10-1.el7_9.x86_64/jre/bin/java)
*+ 3 /usr/java/jdk-11.0.9/bin/java

按 Enter 保留当前选项[+],或者键入选项编号:

特别注意的是,如果 JDK 是通过解压的方式来安装的(非 RPM 包安装),那么就只能通过手动配置系统的 JDK 环境变量来替代 update-alternatives 命令的功能,具体可以参考以下配置:

1
2
3
4
5
6
7
8
9
10
# 编辑配置文件,添加对应的JDK环境变量
# vim /etc/profile
JAVA_HOME=/usr/java/jdk1.8.0_102
JRE_HOME=/usr/java/jdk1.8.0_102/jre
PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin
CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib
export JAVA_HOME JRE_HOME PATH CLASSPATH

# 使配置文件生效
# source /etc/profile

Debian 9(Stretch)更换阿里云镜像源

1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 方法一:不依赖任何文本编辑器

# 备份
# cp /etc/apt/sources.list /etc/apt/backup.sources.list

# 将配置信息写入文件
# echo "deb http://mirrors.aliyun.com/debian/ stretch main non-free contrib" > /etc/apt/sources.list
# echo "deb-src http://mirrors.aliyun.com/debian/ stretch main non-free contrib" >> /etc/apt/sources.list
# echo "deb http://mirrors.aliyun.com/debian-security stretch/updates main" >> /etc/apt/sources.list
# echo "deb-src http://mirrors.aliyun.com/debian-security stretch/updates main" >> /etc/apt/sources.list
# echo "deb http://mirrors.aliyun.com/debian/ stretch-updates main non-free contrib" >> /etc/apt/sources.list
# echo "deb-src http://mirrors.aliyun.com/debian/ stretch-updates main non-free contrib" >> /etc/apt/sources.list
# echo "deb http://mirrors.aliyun.com/debian/ stretch-backports main non-free contrib" >> /etc/apt/sources.list
# echo "deb-src http://mirrors.aliyun.com/debian/ stretch-backports main non-free contrib" >> /etc/apt/sources.list
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
# 方法二:依赖Vi、Vim等文本编辑器

# 备份
# cp /etc/apt/sources.list /etc/apt/backup.sources.list

# 清空文件内容
# echo "" > /etc/apt/sources.list

# 添加以下配置信息到文件中
# vi /etc/apt/sources.list
deb http://mirrors.aliyun.com/debian/ stretch main non-free contrib
deb-src http://mirrors.aliyun.com/debian/ stretch main non-free contrib
deb http://mirrors.aliyun.com/debian-security stretch/updates main
deb-src http://mirrors.aliyun.com/debian-security stretch/updates main
deb http://mirrors.aliyun.com/debian/ stretch-updates main non-free contrib
deb-src http://mirrors.aliyun.com/debian/ stretch-updates main non-free contrib
deb http://mirrors.aliyun.com/debian/ stretch-backports main non-free contrib
deb-src http://mirrors.aliyun.com/debian/ stretch-backports main non-free contrib
1
2
3
4
5
6
7
8
# 更新软件索引(必须)
# apt-get update

# 升级系统所有软件(非必须)
# apt-get upgrade

# 升级系统版本(非必须)
# apt-get dist-upgrade

Ubuntu 20.4 LTS 更换阿里镜像源

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
# 备份
# cp /etc/apt/sources.list /etc/apt/sources.list.bak

# 清空文件内容
# echo "" > /etc/apt/sources.list

# 添加以下配置信息到文件中
# vim /etc/apt/sources.list
deb http://mirrors.aliyun.com/ubuntu/ focal main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ focal main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ focal-security main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ focal-security main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ focal-updates main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ focal-updates main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ focal-proposed main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ focal-proposed main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ focal-backports main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ focal-backports main restricted universe multiverse

# 更新软件索引
# apt-get update

Markdown 折叠代码语法

  • code:指定代码块
  • details:折叠语法标签
  • summary:折叠语法展示的摘要
  • pre:以原有格式显示元素内的文字是已经格式化的文本

markdown-code-fold

Centos7 清除命令历史记录、登录信息

1
2
3
4
5
6
# 清除命令历史记录
$ echo > .bash_history
$ history -cw

# 验证清除效果
$ history
1
2
3
4
5
6
7
8
# 清除登录信息
$ sudo sh -c 'echo > /var/log/wtmp'
$ sudo sh -c 'echo > /var/log/btmp'
$ sudo sh -c 'echo > /var/log/lastlog'
$ sudo sh -c 'echo > /var/log/secure'

# 验证清除效果
$ last

配置阿里巴巴的 DNS 服务

域名系统(服务)协议(DNS)是一种分布式网络目录服务,主要用于域名与 IP 地址的相互转换,以及控制因特网的电子邮件的发送。在 Linux 服务器上快速配置阿里巴巴 DNS 服务的方法如下:

1
2
3
4
5
6
7
8
# 编辑系统配置文件,只需要添加以下两行内容
# vim /etc/resolv.conf

nameserver 223.5.5.5
nameserver 223.6.6.6

# 重启网络服务
# service network restart

模拟 CPU 高负载

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
# 下载
# wget http://www.devin.com/lookbusy/download/lookbusy-1.4.tar.gz

# 解压
# tar -xvf lookbusy-1.4.tar.gz

# 进入解压目录
# cd lookbusy-1.4

# 预配置
# ./configure

# 编译
# make -j4

# 安装
# make install
  • Lookbusy 的使用
1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 让所有CPU核心的使用率都是30%
$ lookbusy -c 30

# 让两个CPU核心的使用率为30%
$ lookbusy -n 2 -c 30

# 让所有CPU核心的使用率在60%-70%上下浮动
$ lookbusy -c 60-70 -r curve

# 让所有CPU核心的使用率在20%-80%之间,周期为24小时,在14点达到峰值
$ lookbusy --cpu-mode curve --cpu-curve-peak 14h -c 20-80

# 让所有CPU核心的使用率在20%-30%之间,周期为60分钟,在30分钟达到峰值
$ lookbusy --cpu-mode curve --cpu-curve-period 60m --cpu-curve-peak 30m -c 20-30

Debian/Ubuntu 安装 GCC 与 G++

build-essential 是 C/C++ 的开发包,包含了 gccg++makegdblibc 等工具,执行下面的命令安装即可:

1
# apt-get -y install build-essential

Centos7 更改内核启动顺序

1
2
3
4
5
6
7
8
9
10
11
12
13
14
# 查看当前系统有几个内核
# cat /boot/grub2/grub.cfg |grep menuentry

# 查看当前系统的默认内核
# grub2-editenv list

# 更改系统默认的启动内核
# grub2-set-default 'CentOS Linux (3.10.0-514.26.2.el7.x86_64) 7 (Core)'

# 重启系统生效
# reboot

# 重启后查看内核是否已经修改
# uname -a