分类标签归档：python
本来想利用自动化测试实现跳过猫眼验证中心，自动拖动滑块验证的功能是实现了，但猫眼还有别的检测方法来判断用户行为，所以这条路没有走通，在这里记录下QQ邮箱的自动登录。
#用于sleep
import time
#selenium自动化框架
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.action_chains import ActionChains
#后面两行可以无界面本项目很久之前就想尝试，觉得难，所以一直在拖，这次终于有时间搞了一下。猫眼的反爬虫策略还是比较强大的，会判断用户行为，如果在一段时间内频繁访问会使ip被暂时屏蔽，这个问题可以使用IP代理来解决。此外还使用了字体反爬来保护票房、票价等重要信息，而且这个字体反爬在不断更新，最初的时候使用单一的字体文件，后来升级到每次刷新网页都会更新字体文件，而且字体文件中的坐标并不一致，这让爬取变的更加困难，但是相同数字之间总有相似的地方，通过聚类思想我们仍然可以找到映射关系，这种方法不保证不会出错，因为真实的映射关系只有猫眼的程序猿那里有，我们只是使用算法进行推断，如果出现错误，可以尝试使用更精确的算
#操作字符串
import string
#从列表中获取随机元素
import random
#操作剪贴板，copy为向剪贴板传递，paste为从剪贴板读取
from pyperclip import copy,paste
#生成密文列表
alnums = [x for x in string.ascii_letters + string.digits if x not in ('0', 'o', '1', 'l')]
#产生随机密码，可以根据需要修改传递的参数n
def genpass(n=16):
本次尝试爬取高德地图中全国部分城市天气信息，程序主要是对json字符串进行操作，如果有天气方面的数据分析需求，可以把代码稍作修改，放到服务器上定时跑一个月，就可以得到数量相当可观的数据。
#网页请求
import requests
#操作json字符串，在本文中可用可不用
import json
#用于使程序暂停数秒
import time
#城市及对应的adcode保存在该url指向的json文本中，在高德地图官网审查元素可以找到该url
url_city = 'https://www.amap.com/service/cityList?version=2记录一些matplotlib绘图常用语法。谨防遗忘。
import matplotlib.pyplot as plt
#更改绘图风格
plt.style.use('seaborn-whitegrid')
import numpy as np
#创建图形对象
fig = plt.figure()
#创建坐标轴对象
ax = plt.axes()
#生成numpy数组
x = np.linspace(0,10,1000)
#分别绘制正弦、余弦函数图像
plt.plot(x,np.cos(x))
plt.plot(x,np.sin(x))
#也可以操作坐标轴绘图，跟上面作从9月26号因病住院，到10月19号暂时出院，这期间一直没有机会写博客，在园区的时候也总忍不住玩游戏，必须要做些什么才行，就慢慢的回到学习的状态吧。
该模块为python3.x自带模块，无需使用pin install命令进行安装。 使用方式： import json
#input
import json
a = "[1,2,3,4]"
b = '{"k1":1,"k2":2}'
print(json.loads(a))
print(type(json.loads(a))同事老哥想让我把一个网站上所有的pdf资料爬下来，但实在是太多了，可能会对网站造成破坏，所以想了个折中的方式，把所有书的下载链接爬取下来。为了提升效率，简单的用了一下多线程。
#请求网页
import requests
#操作excel
import openpyxl
#调用多线程
import threading
#解析网页
from bs4 import BeautifulSoup as bs
#目标地址，一共有863页
urls = ['http://www.allitebooks.org/page/{}/'.format(i) for i本文来自微信公众号：python数据分析之禅，创作不易，请支持原作者。
#用到的包
import requests
from bs4 import BeautifulSoup as bs
import time
import csv
import schedule
#微博热搜地址
BASE_URL = 'https://s.weibo.com/top/summary'
#创建csv文件，并填入表头
with open('1.csv','wt',newline = '') as f:
f_csv = cs#请求网页
import requests
#创建和切换目录
import os
#解析网页
from bs4 import BeautifulSoup as bs
#selenium模拟浏览器行为
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
#创建并切换到英雄联盟文件夹
if not os.path.exists('英雄联盟'):
os.mkdir('英雄联盟')
os.chdir('英雄联盟'