根据nginx日志进行访问量统计

####1、统计baidu蜘蛛每秒并发，按时间排序

grep -i "Baiduspider" access.log | awk '{print $4}' | sort | uniq -c | sort -t":" -k3,4

####2、统计baidu蜘蛛每秒并发，按并发量排序，取前100

grep -i "Baiduspider" access.log | awk '{print $4}' | sort | uniq -c | sort -n | tail -100

####3、统计每个IP访问量排序，取前100

cat access.log | awk '{print $1}' | sort | uniq -c | sort -n | tail -100

####4、统计每个24位网段访问量排序，取前100

cat access.log | awk '{print $1}' | awk -F. '{print $1"."$2"."$3}' | sort | uniq -c | sort -n | tail -100