博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
python自如爬虫
阅读量:4661 次
发布时间:2019-06-09

本文共 515 字,大约阅读时间需要 1 分钟。

如果你想入门数据分析,但是苦于没有数据,那就看下文如何用 10 行代码写一个最简单的自如房源爬虫

首先我们通过分析看到自如手机版有个 url 如下:http://m.ziroom.com/list/ajax-get-data  能够返回 json 数据

 

这个基本上包括了租房的一些重要信息,价格,小区,地铁沿线,朝向

所以要做的就是遍历这个地址得到所有的 json 数据

下面是代码:

 

import requestsimport timewith open('ziroom.txt', 'a+') as f: for i in xrange(10, 9001, 10): payload = { 'step': i} res = requests.post('http://m.ziroom.com/list/ajax-get-data', data=payload) for i in res.json()['data']: print i['id'] f.write(str(i)+'\n') time.sleep(3)

 

转载于:https://www.cnblogs.com/xihuineng/p/10590399.html

你可能感兴趣的文章