链氪巴士
  1. 首页
  2. 站点导航
  3. 文章
  4. 快讯
  5. 软件
  6. 书刊
  7. 关于

copyBook-用爬虫爬取小说构建自己的小说网站

copyBook项目通过python3.6环境下的scrapy爬虫框架爬取小说网站的数据,如书名、作者等多类信息,存储于sqlite数据库。之后借助Django web框架和bootstrap构建包含主页、详情页等页面的小说网站。此项目完整展示了从数据获取到网站构建的流程,是一个...

访问官网 →

项目标题:copyBook-用爬虫爬取小说构建自己的小说网站

项目简介

copyBook项目主要是利用爬虫框架scrapy在python3.6的运行环境下,爬取小说网站(如全书网)上的小说。它将爬取到的小说信息,包括书名、作者、简介、封面、章节内容等存储到sqlite数据库中。然后通过Django web框架和bootstrap构建自己的小说网站,网站包含主页、图书详情页和章节详情页等页面。

核心技术

  • 运行环境采用python3.6。
  • 使用scrapy作为爬虫框架来抓取小说网站的数据。
  • 选择sqlite作为数据库存储数据。
  • 运用Django作为web框架构建网站,并且采用Django官方推荐的通用视图类。
  • 前端模板页面使用bootstrap框架,使网站风格简洁。

项目总结

这个项目展示了如何从数据爬取到构建网站的完整流程。通过合理地运用各种技术,成功地打造了一个无广告的专属小说网站。如果你对这个项目有任何想法或者疑问,欢迎在下方留言参与讨论。

项目地址

GitHub链接直达