返回介绍

14.5 本章小结及要求

发布于 2025-04-21 19:15:31 字数 307 浏览 0 评论 0 收藏

本章以爬取链家经纪人成交记录为例,讲解了如何存储数据到数据库。爬取链家经纪人成交记录这个例子相对复杂,其中对多层页面的爬取、网址构造、页面翻页,以及在不同解析函数中传递数据等方法,都值得读者学习和掌握。存储数据到数据库的方法相对简单,读者按照演示的步骤设置就可以了。

第 7 章的要求是读者使用 Requests 爬取链家经纪人成交记录,读者可以把 Scrapy 爬虫与 Requests 爬虫进行对比。本章要求完成以下两个工作:一是改造第 11 章中的我爱我家二手房房源爬虫,使用数据库存储其爬取数据;二是思考如果使用 Requests 编写爬虫并存储到数据库,应该如何编写代码。

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。