当前位置:文档之家› 网页小说抓取方法

网页小说抓取方法

网页小说抓取方法
对于有些朋友来说,会有抓取网页小说的需求,目前网页小说有很多网站,比如起点小说,欢乐书客小说等等之类的,那么有没有一款软件能够把这些网站的小说抓取下来呢,下面本文以起点小说采集为例,为大家介绍网页小说的抓取方法。

采集网站:https:///info/53269
使用功能点:
分页列表及详细信息提取
/tutorial/fylbxq7.aspx?t=1
步骤1:创建采集任务
1)进入主界面,选择“自定义模式”
起点中文网小说采集步骤1
2)将要采集的网址复制粘贴到网站输入框中,点击“保存网址”
起点中文网小说采集步骤2
步骤2:创建列表循环
1)在页面右上角,打开“流程”,以展现出“流程设计器”和“定制当前操作”两个板块。

选中页面里的第一条链接,系统会自动识别页面内的同类链接,选择“选中全部”
起点中文网小说采集步骤3
2)选择“循环点击每个链接”
起点中文网小说采集步骤4
步骤3:采集小说内容
1)选中页面内要采集的小说内容(被选中的内容会变成绿色),选择“采集该元素的文本”
起点中文网小说采集步骤5
2)修改字段名称
起点中文网小说采集步骤6
3)选择“启动本地采集”
起点中文网小说采集步骤7
步骤4:数据采集及导出
1)采集完成后,会跳出提示,选择“导出数据。

选择“合适的导出方式”,将采集好的评论信息数据导出
起点中文网小说采集步骤8
2)这里我们选择excel作为导出为格式,数据导出后如下图
起点中文网小说采集步骤9
相关采集教程:
新浪微博数据采集
豆瓣电影短评采集
搜狗微信文章采集
八爪鱼——70万用户选择的网页数据采集器。

八爪鱼·云采集服务平台。

相关主题