• 生命不息,奋斗不止
  • 我思故我在
  • 奔跑是一种状态

小说采集-思路设计和实践

我的世界 admin 17℃ 0评论

小说采集-思路设计和实践
有很多你以为理所当然的事情,其实比你想的复杂。
小说网站结构:

小说首页

各个栏目展示

小说列表

小说章节列表

小说内容以及下一页

每个栏目最新或者最高展示列表

小说章节列表

小说内容以及下一页

有了网站结构,基本就好处理了

1.采集列表

2.采集各个小说

3.采集小说的所有章节

4.采集每个章节内容

基本完成。

小说网站占用空间非常大的。需要大量投入。(也就采集了几百个小说就30多个G了,太夸张了)

博客文章的采集类似,少了一个层级。

1.栏目

2.文章列表

2.文章内容

点赞 (0)
发表我的评论
取消评论
表情     9 + 2 = ? (必填)

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址