爬取ajax网页方法
1，直接分析ajax调用的接口，然后通过代码请求这个接口。
2，使用selenium+chromedriver模拟点击获取数据。
cookie操作
1，获取所有的cookie:
for cookie in driver.get_cookie():
print(cookie)
2 , 根据cookie的key值获取value:
value = driver.get_cookie(key)
3 , 删除所有的cookie:
driver.delete_all_cookies()
4 , 删除某个cookie:
driver.delete_cookie(key)
使用代理IP
from selenium import webdriver
options = webdriver.ChromeOptions()
options.add_argument('')
driver_path = ''
driver = webdriver.Chrome(executable_path=driver_path,chrome_options=options)
driver.get('url')
网友评论