美文网首页
爬取煎蛋随手拍

爬取煎蛋随手拍

作者: Rain师兄 | 来源:发表于2020-10-31 21:18 被阅读0次

自从爬了表情包之后,我自己写代码爬取其他图片网站的图片。爬取煎蛋随手拍

import requests

from lxml import etree

url ='http://jandan.net/ooxx/MjAyMDEwMzEtOTg=#comments'

# //div[@class='text']/p//a/@href

headers = {'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.111 Safari/537.36'}

resp = requests.get(url,headers=headers)

html = etree.HTML(resp.text)

srcs = html.xpath('//a[@referrerpolicy]/@href')

for i in srcs:

        urlplus ='http:' +i

        name = urlplus.split('/')[-1]

        r = requests.get(urlplus,headers=headers)

        with open('suishoupai/'+name,'wb')as file:

                file.write(r.content)

相关文章

  • 爬取煎蛋随手拍

    自从爬了表情包之后,我自己写代码爬取其他图片网站的图片。爬取煎蛋随手拍 import requestsfrom l...

  • 2020-11-28

    煎蛋我终于会用自己写的代码来爬取随手拍的图片了,没有用到很复杂的东西。只有xpath和requests还有urll...

  • 爬煎蛋网妹子图

    利用 BeautifulSoup + Requests 爬取 煎蛋网 妹子图 一、爬煎蛋网一页图片 此爬虫只能爬取...

  • selenium爬取煎蛋

    fromurllibimportrequestfromseleniumimportwebdriverimportt...

  • Python爬取煎蛋妹子图

    准备工作:Python3.5+Requests+BeautifulSoup这是个爬虫练手项目,只做到了爬取图片,没...

  • 爬取煎蛋妹子图-python

    一、准备工作 Python3.6 requests BeautifulSoup selenium chromedr...

  • Python爬虫入门-利用requsets库爬取煎蛋网妹子图

    其实之前是想利用煎蛋网来联系一下scrapy的ImagesPipeline爬取煎蛋网的妹子图并下载下来保存到本地,...

  • 老司机带你用python来爬取妹子图

    一:Python爬虫入门-利用requsets库爬取煎蛋网妹子图 其实之前是想利用煎蛋网来联系一下scrapy的I...

  • 老司机带你用python来爬取妹子图

    一:Python爬虫入门-利用requsets库爬取煎蛋网妹子图 其实之前是想利用煎蛋网来联系一下scrapy的I...

  • 2019-04-29

    爬取今日头条 街拍数据---反爬策略滑动验证码 爬取的主页:https://www.toutiao.com/sea...

网友评论

      本文标题:爬取煎蛋随手拍

      本文链接:https://www.haomeiwen.com/subject/mmrevktx.html