文件名称:
使用scrapy来找出微博上没有加好友的熟人
开发工具:
文件大小: 61kb
下载次数: 0
上传时间: 2020-12-22
详细说明：背景介绍
我微博玩的晚，同学里面加上好友的也就40不到，为了把那些隐藏的好友揪出来。用scrapy写一个爬虫试一试。
思路
微博上面关注和粉丝都是公开的数据，可以用爬虫获取到的。而一个好友圈子里面的人，相互粉的比例也会比较大。这就是找到隐藏的好友的一个切入点。于是思路如下：
从自己的账号入手，先抓取自己关注的人和自己的粉丝（0级好友）
从第一批抓的数据开始，继续爬取0级好友的关注人和粉丝
在爬取的数据中分析他们的网络关系，找到可能是自己好友的人
遇到的问题
爬取的数据量需要控制，每级迭代，用户的数量都是爆炸式的增长，需要进行一定筛选
爬取的速度的限制，我的破电脑实测爬取速度大概在17page/
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
