找回密码
 立即注册
CeraNetworksBGVM服务器主机交流IP归属甄别会员请立即修改密码
查看: 8|回复: 0

一个python爬虫的问题

[复制链接]

6

主题

61

回帖

318

积分

中级会员

积分
318
发表于 2018-5-13 18:30:53 | 显示全部楼层 |阅读模式
本帖最后由 嬴政 于 2018-5-13 19:23 编辑

写了一个爬取糗事百科热图的爬虫,写了爬取全部的src,但是运行后只能爬取一页,大佬们看下哪里出错了
import requests
from bs4 import BeautifulSoup
import os
url = 'https://www.qiushibaike.com/imgrank/'
headers = {'User-Agent': "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.1 (KHTML, like Gecko) Chrome/22.0.1207.1 Safari/537.1",'Referer': "https://www.qiushibaike.com/imgrank/"}
response = requests.get(url,headers=headers)
response.encoding = 'utf-8'
html = response.text
count = 1
while count
fei2018 发表于 2018-5-13 19:19

你有个地方错了,你的写法每页只查找第一张图片,按我的写法就行了

我也是刚刚发现,往上面去了一层,得到了全部的下载地址
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|HS2V主机综合交流论坛

GMT+8, 2024-5-29 06:59 , Processed in 0.058806 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表