通过python配合爬虫接口利用selenium实现自动化打开chrome浏览器，进行百度关键词搜索。
1、安装python3，访问官网选择对应的版本安装即可，最新版为3.7。
2、安装selenium库。
使用 pip install selenium 安装即可。
同时需要安装chromedriver,并放在python安装文件夹下，如下图所示。
3、获取爬虫接口链接。
注册账号，点击爬虫代理，领取每日试用。
|
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
|
from selenium import webdriver import requests,time #自建ip池 def get_proxy(): r = requests.get('http://127.0.0.1:5555/random') return r.text import random file = './tuziip.txt'# 读取的txt文件路径 # 获取代理ip def proxy_ip(): ip_list = [] with open(file, 'r') as f: while true: line = f.readline() if not line: break ip_list.append(line.strip()) ip_port = random.choice(ip_list) return ip_port def bd(): chromeoptions = webdriver.chromeoptions() # 设置代理 chromeoptions.add_argument("--proxy-server=http://"+proxy_ip()) # 一定要注意，=两边不能有空格，不能是这样--proxy-server = http://202.20.16.82:10152 browser = webdriver.chrome(chrome_options = chromeoptions) # 查看本机ip，查看代理是否起作用 browser.get("https://www.baidu.com/") browser.find_element_by_id("kw").send_keys("ip") browser.find_element_by_id("su").click() time.sleep(2) browser.find_element_by_id("kw").clear() time.sleep(1) browser.find_element_by_id("kw").send_keys("百度") browser.find_element_by_id("su").click() time.sleep(2) browser.find_element_by_id("kw").clear() time.sleep(1) browser.find_element_by_id("kw").send_keys("百度") browser.find_element_by_id("su").click() time.sleep(2) browser.find_element_by_id("kw").clear() time.sleep(1) browser.close() # 退出，清除浏览器缓存 browser.quit() if __name__ == "__main__": while true: bd() |
5、运行程序，如下图所示，可自动化搜索。
