python_spider 小项目简介：这是由本人边提需求边完成的练习手爬虫的小项目，能够实现微博个人主页所有微博内容的爬取。功能：获取微博用户每一条微博的信息（包括转发，点赞的微博），其中原创微博抓取文字，配图，视频，发博时间，转发的微博则抓取转发的时间，转发的评价，财经杂志的链接，点赞的微博暂时实现（第一版）应用知识：1.动态页面渲染和Ajax ----- selenium：模拟鼠标动作，填充表单，页面切换2.破解反爬技术----使用Selenium模拟登录3 urllib -----使用u

自学爬虫近1个月，基本的库啊框架啊基本也都囫囵吞枣的过了一遍，感觉网上视频里各大名师砖家带着练习的项目，基本都是毫无反爬机制的NC网站，感觉若是在实际工作中（没工作过-。-），怕是没有这么容易的网站要你爬取的吧。个人一点愚见，某网站数据有分析价值，才会有人爬，因为给爬多了运营小姐姐很生气，该网站才会去研究怎么反爬，于是反反爬，于是反反反爬，于是反反反反爬。。。。。连selenium这么低效的东西都给扯出来写爬虫，可以看出门户网站的大牛守护运营小姐姐的决心，反正个人暗下决心，不是万不得已，绝不用s