ceph调优中用到的脚本--散乱版

总结了一些调优过程中用到的脚本，备忘

ceph调优涉及的内容繁杂，脚本众多，这里记录一下，大家有兴趣可以自取。

修改数据迁移相关参数以控制迁移影响

#!/bin/bash

if [ "$1"x == "min"x ];then
    sudo ceph tell osd.* injectargs '--osd_recovery_max_single_start 1 --osd_recovery_sleep_hdd 0.1 --osd_recovery_max_active 1 --osd_max_backfills 1'
else
    sudo ceph tell osd.* injectargs '--osd_recovery_max_single_start 64 --osd_recovery_sleep_hdd 0 --osd_recovery_max_active 64 --osd_max_backfills 64'
fi

控制清洗相关参数

#!/bin/bash

if [ "$1"x == "min"x ];then
    sudo ceph tell osd.* injectargs '--osd_scrub_sleep 3 --osd_scrub_chunk_max 1 --osd_scrub_chunk_min 1 --osd_max_scrubs 1'
else
    sudo ceph tell osd.* injectargs '--osd_scrub_sleep 0 --osd_scrub_chunk_max 64 --osd_scrub_chunk_min 64 --osd_max_scrubs 64'
fi

修改对系统中断进行处理的cpu

#!/bin/bash

procs=`ls -l /proc/irq/ |grep -v 'default'|wc -l`
for k in $( seq 0 $procs )
do
    #sudo echo 000000,00000ff0 > /proc/irq/$k/smp_affinity
    cat /proc/irq/$k/smp_affinity
done

修改ceph进程的优先级

#!/bin/bash

osds=`ps aux|grep 'ceph-osd'|grep -v 'grep'|awk '{print $2}'`
for osd in $osds
do
    sudo renice -20 -p $osd
    echo $osd
done
rgws=`ps aux|grep 'radosgw'|grep -v 'grep'|awk '{print $2}'`
sudo renice -20 -p $rgws

查看指定存储池的pg在各个osd的分布情况

#!/bin/bash

sudo ceph pg dump|grep -e '^10\.'|awk '{print $15}'|tr -d '['|tr -d ']' > ./pgs.txt
awk -F ',' '{sum[$1]+=1}{sum[$2]+=1} END {for(k in sum) print k ":" sum[k]}' ./pgs.txt |sort -n|awk -F ':' '{print "osd."$1"\t:\t"$2}'
awk -F ',' '{sum[$1]+=1}{sum[$2]+=1} END {for(k in sum) print sum[k]}' ./pgs.txt|awk '{total+=$1}END{print "total:\t"total}'
rm -f ./pgs.txt

统计指定网卡的速率

#!/bin/bash

while true
do
    txinits=`ifconfig $1|grep -w 'TX'|grep -w 'bytes'|awk '{print $5}' `
    rxinits=`ifconfig $1|grep -w 'RX'|grep -w 'bytes'|awk '{print $5}' `
    sleep 1
    txnows=`ifconfig $1|grep -w 'TX'|grep -w 'bytes'|awk '{print $5}' `
    rxnows=`ifconfig $1|grep -w 'RX'|grep -w 'bytes'|awk '{print $5}' `
    txall=$[txnows-txinits]
    rxall=$[rxnows-rxinits]
    if [ $txall -ge 1000 ];then
        txall=`echo "scale=2; $txall/1000.0*8" | bc`
        if [ $(echo "$txall > 1000"|bc) = 1 ];then
            txall=`echo "scale=2; $txall/1000.0" | bc`
            if [ $(echo "$txall > 1000"|bc) = 1 ];then
                txall=`echo "scale=2; $txall/1000.0" | bc`
                txstr="$txall Gbps"
            else
                txstr="$txall Mbps"
            fi
        else
            txstr="$txall Kbps"
        fi
    else
        txstr="$txall bps"
    fi

    if [ $rxall -ge 1000 ];then
        rxall=`echo "scale=2; $rxall/1000.0*8" | bc`
        if [ $(echo "$rxall > 1000"|bc) = 1 ];then
            rxall=`echo "scale=2; $rxall/1000.0" | bc`
            if [ $(echo "$rxall > 1000"|bc) = 1 ];then
                rxall=`echo "scale=2; $rxall/1000.0" | bc`
                rxstr="$rxall Gbps"
            else
                rxstr="$rxall Mbps"
            fi
        else
            rxstr="$rxall Kbps"
        fi
    else
        rxstr="$rxall bps"
    fi

    printf "%s\tTX: %s\t\tRX: %s\n" $1 "$txstr" "$rxstr"
done

重建存储池后将存储池加入mon

#!/bin/bash

sudo ceph osd pool application enable default.rgw.control  mon
sudo ceph osd pool application enable default.rgw.meta  mon
sudo ceph osd pool application enable default.rgw.log  mon
sudo ceph osd pool application enable default.rgw.buckets.data  mon
sudo ceph osd pool application enable default.rgw.buckets.index  mon
sudo ceph osd pool application enable .rgw.root mon

统计系统中程序使用swap分区的情况

#!/bin/bash
#
function getswap {
SUM=0
OVERALL=0
for DIR in `find /proc/ -maxdepth 1 -type d | egrep "^/proc/[0-9]"` ; do
PID=`echo $DIR | cut -d / -f 3`
PROGNAME=`ps -p $PID -o comm --no-headers`
for SWAP in `grep Swap $DIR/smaps 2>/dev/null| awk '{ print $2 }'`
do
let SUM=$SUM+$SWAP
done
echo "PID=$PID - Swap used: $SUM - ($PROGNAME )"
let OVERALL=$OVERALL+$SUM
SUM=0
done
echo "Overall swap used: $OVERALL"
}
getswap

赏

谢谢你请我吃糖果

支付宝

微信

• 本文作者： 奋斗的松鼠
• 本文链接： http://www.strugglesquirrel.com/2018/04/08/ceph调优中用到的脚本-散乱版/
• 版权声明： 本博客所有文章除特别声明外，创作版权均为作者个人所有，未经允许禁止转载！