qq：800819103
在线客服，实时响应
qq群
在线客服，实时响应
客服电话
13318873961代理ip如何协助爬虫爬取安居客二手房源信息！今天黑洞代理就为大家分享一下爬虫如何爬取安居客二手房源信息的。主要抓取目标是北京二手房信息，在爬取之前，我们先对要爬取的信息进行简单的数据分析。首先打开二手房信息的页面，右键检查，查找我们需要的信息所在的位置，然后进行抓取。
代码如下：
import requests,time,random
from bs4 import BeautifulSoup
headers = {'User-Agent' : 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36'}
for i in range(1,30):
url='https://beijing.anjuke.com/sale/p{}/'.format(i)
print(i)
#print(url)
respomse=requests.get(url,headers=headers)
time.sleep(random.randint(0,5)) #防止反爬
#print(respomse.text)
soup=BeautifulSoup(respomse.text,'lxml')
house_list = soup.find_all('li', class_="list-item")
for house in house_list:
title=house.find('div',class_='house-title').a.text.strip()
price=house.find('span',class_='price-det').text.strip()
#带增加
print('title:'+title+ ' price: '+price)
通过上述代码，我们就可以获取到安居客北京二手房源信息了，黑洞代理为您提供安全稳定、高效便捷的爬虫代理IP服务，更多问题请点击官网咨询客服。
相关文章内容简介
1 代理ip如何协助爬虫爬取安居客二手房源信息
代理ip如何协助爬虫爬取安居客二手房源信息！今天黑洞代理就为大家分享一下爬虫如何爬取安居客二手房源信息的。主要抓取目标是北京二手房信息，在爬取之前，我们先对要爬取的信息进行简单的数据分析。首先打开二手房信息的页面，右键检查，查找我们需要的信息所在的位置，然后进行抓取。 代码如下： import∵requests,time,random from∵bs4∵imp... [阅读全文]
最新标签
推荐阅读
21
2019-01
IP地址泄露有什么风险与隐藏IP地址的方法
对IP地址泄露，大家通过各种的影视作品，看到通过IP地址可以很多的事情，如果被某些人知道你的IP地址，可能会造成风险，那么怎么隐藏真实IP地址呢？
29
2019-01
何为API？代理API提取有什么用？
我们使用代理，可以单独设置浏览器使用；也可以在QQ等软件中设置使用；还能直接下载黑洞代理软件直接使用，并不需要每次进行设置使用。此外，若是爬虫需要使用代理，还可以通过API调用I
19
2019-01
高匿名ip代理能查到实际ip吗
以前大家可能比较少关注IP是否匿名的事情，但是如今个人隐私泄露严重，并且各种平台的反爬虫机制越发的严格，故大家开始逐渐的关注IP的匿名性。若是使用的代理IP高匿名，便能隐藏好自己
11
2019-05
ip代理软件让时代变得不一样
说到ip代理软件的功能，大家都会关注黑洞代理，这是一个有着IP转换功能的浏览器，不再是普通的浏览器，为很多网络用户带来快速更换IP地址，让在使用中得到更多效率。一个有着IP转换
热门文章
