【Python】学习笔记3 集合-监控日志脚本

1、集合

# 新的数据类型集合：天生去重

# ----------定义----------
s = set() #空的集合
s2 = {   #有内容的集合，输出时自动去重
    '1',
    '2',
    '2',
    '3',
}


# ----------天生去重----------
print(s2) #{'2', '3', '1'}
# 如果是数组list的话，去重必须用for循环count函数，可以利用集合方面去重
# 集合是无序的，没有办法取到下标，每次输出内容可能都不一样

# ----------添加值----------
# 
s3 = {1,3,4}
s3.add('4') #s3={1,3,4}
# 重复的自动不会添加

# ---------- 删除值----------
s2.remove('1')
s2.pop()#随机删除一个值

# ----------交集、并集、差集----------
# 交集：两者中共有的部分
print(s2.intersection(s3)) #两者之间都有的
print(s2&s3)

# 并集：合并所有的内容
print(s2.union(s3))
print(s2|s3)

# 差集：A集合中有但是B集合中没有的部分
s2 = {   #集合，输出时自动去重
    '1',
    '2',
    '8',
    '3',
}
s3 = {   #空的集合
    '1',
    '2',
    '6',
    '3',
}
print(s2.difference(s3)) #S2中存在，s3中不存在的，8
print(s2-s3)  #S2中存在，s3中不存在的，8

2、练习，监控日志脚本

日志文件中同一个ip地址只能访问200次，超过加入黑名单

# 1，如果同一个ip地址60s内只能访问200次，超过的话，将ip加入黑名单
# 需求分析
    #1,60s读一次文件
    #分割，取到第一个元素，ip地址
    #把所有ip加到一个list里，如果ip次数超过200次，加入黑名单

import  time
point = 0
while True:
    ips = [] #存放所有ip地址
    blk_set = set() #存放需要加入黑名单的ip，因为集合是去重的，所以没有重复ip
    with open('access.log',encoding='utf-8') as f:
        f.seek(point)
        for line in f:
            ip = line.split()[0]
            ips.append(ip)
            if ips.count(ip)>10:
                blk_set.add(ip)
        print(blk_set)
        for ip in blk_set:#这里是因为防止ip重复加入黑名单，去重
            print('%s加入黑名单'%ip)
        point = f.tell()
        time.sleep(60) #间隔60s监控一次