range

If there were you, the world would be just right

第一列 $1

awk '{print $1}' code_top.log | sort | uniq -c | sort -nr -k1 | head -n 100

最后一列 $NF

awk '{print $NF}' code_top.log | sort | uniq -c | sort -nr -k1 | head -n 100

说明:

awk '{ print $1}' 取数据的第1列

awk '{print $NF}' 取数据的最后1列

sort 排序

uniq -c 打印重复行出现的次数

sort -nr -k1 按照重复行出现的次数排列,-k1以第一列为标准排序

head -n 10 取10条

Htop查看内存占用大小:

执行大M,按占用内存排序

ps命令查看占用内存大小:

ps -aux | grep qx_report

通过进程的status文件查看进程占用内存大小:

cat /proc/26641/status  # VmRSS对应的值就是物理内存占用

查看内存占用前10名进程:

ps aux | sort -k4,4nr | head -n 10

批量杀死进程

ps -aux | grep qx_report | grep -v grep | cut -c 9-15 | xargs kill -15
grep -v grep 是在列出的进程中去除含有关键字"grep"的进程
"kill -15"会正常退出指定进程,-9强行杀掉
cut -c 9-15 获取进程ID部分

安装python3:

安装相关包

yum install zlib zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc

下载python3的源码包

wget https://www.python.org/ftp/python/3.6.4/Python-3.6.4.tar.xz

解压python3源码包

xz -d Python-3.6.4.tar.xz
tar -xf Python-3.6.4.tar

编译安装

cd Python-3.6.4
./configure prefix=/usr/local/python3
make && make install

添加软链接

ln -s /usr/local/python3/bin/python3.6 /usr/bin/python3
ln -s /usr/local/python3/bin/pip3 /usr/bin/pip3

安装Web.py(接收器)

pip3 install --upgrade pip

pip3 install web.py

设置gogs-web钩子
143918.png

编写脚本代码接收信号并更新git

#!/usr/bin/python3
#coding=utf-8
import web
import json
import os

urls = (
     '/', 'web_exec'
)
app = web.application(urls, globals())
# 获取当前日志路径 
log_path = os.getcwd()

class web_exec:
    def POST(self):
        # inp为str
        inp = web.input().payload
        # data为dict
        data = json.loads(inp)

        # 当前推送获取的分支
        ref = data['ref']

        # 只更新master 分支内容
        if( ref!='refs/heads/master' ):
            return

        msg = '------------------------------------ start ------------------------------------'
        self.write_log_to_file(msg)

        sys_msg = "当前推送获取的分支:"+ref
        self.write_log_to_file(sys_msg)

        # 当前更新版本
        after_version = data['after']
        sys_msg = "当前更新版本:"+after_version
        self.write_log_to_file(sys_msg)

        # 当前版本推送人
        username = data['pusher']['username']
        sys_msg = "当前版本推送人:"+username
        self.write_log_to_file(sys_msg)        

        # 当前项目
        name = data['repository']['name']
        sys_msg = "当前执行更新项目:"+name
        self.write_log_to_file(sys_msg)

        # 进入对应的目录
        path = '/data/web/' + name + '/'
        sys_msg = "执行进入目录:"+path
        self.write_log_to_file(sys_msg)

        os.chdir(path)

        # 取回更新后
        sys = '/usr/bin/git fetch --all'
        sys_msg = "执行git fetch:"+sys
        self.write_log_to_file(sys_msg)

        os.system(sys)

        # 执行更新版本
        sys = '/usr/bin/git reset --hard ' + after_version;
        sys_msg = "最终执行更新脚本命令:"+sys
        self.write_log_to_file(sys_msg)

        msg = '------------------------------------ end ------------------------------------'
        self.write_log_to_file(msg)

        return os.system(sys)

    # 记录日志信息
    def write_log_to_file(self,msg):
        print('开始写入数据 ====> ' + str(msg))
        with open(log_path + 'git_update.log', 'a', encoding='UTF-8') as f:
            f.write(json.dumps(msg, ensure_ascii=False) + '\n')
            f.close()

if __name__ == "__main__":
    app.run()

运行脚本

python3 web_gz.py

推送git内容
push38.png

查看脚本打印
11.png

进入项目目录,查看是否有拉取到内容
73016.png

end!!


Yaconf - 鸟叔开发的一个高性能的配置管理扩展

在PHP启动的时候, 处理所有的要处理的配置, 然后这些配置就会常驻内存, 随着PHP的生命周期存亡. 避免了每次请求的时候解析配置文件
https://www.laruence.com/2015/06/12/3051.html

扩展下载地址

https://github.com/laruence/yaconf

解压

unzip yaconf-master.zip

进入目录

cd yaconf-master

生成相应的configure文件

/usr/local/php/bin/phpize

运行配置

./configure --with-php-config=/usr/local/php/bin/php-config

进行编译安装

make && make install

安装完成进行php.ini文件配置

vim /usr/local/php/etc/php.ini

extension=yaconf.so
yaconf.directory= /data/ini # 需要导入的配置文件地址, .ini 作为文件后缀名
yaconf.check_delay=100 #心跳检查时间,若为0则不检查,但如果有修改,需重启PHP

重启php进程管理

service php-fpm restart

查看扩展是否安装成功

php -m | grep yaconf

yaconf.png
使用:

在对应的目录 /data/ini 下创建配置文件,如:

vim redis.ini

host=127.0.0.1
port=3673
time=5
a.b=2
a.c=3

编写php脚本读取内容

vim test.php

<?php
    $res = \Yaconf::get('redis');
    print_r($res);

执行脚本

php test.php

test.png

end!


1、使用命令下载

curl -sS https://getcomposer.org/installer | php

2、下载之后设置环境变量

mv composer.phar /usr/local/bin/composer

3、修改权限

chmod -R 777 /usr/local/bin/composer

4、修改镜像

composer config -g repo.packagist composer https://mirrors.aliyun.com/composer/