博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
八爪鱼软件爬取数据的操作流程
阅读量:3926 次
发布时间:2019-05-23

本文共 449 字,大约阅读时间需要 1 分钟。

1.八爪鱼软件,免费的软件。在这里插入图片描述

2.注册一个账号后,即可登录。我们今天来演示自定义操作。
在这里插入图片描述
3.在这里插入图片描述
4.进入后,任务组的名字是自己自定义的。可以点击旁边的任务添加编辑。在这里插入图片描述在这里插入图片描述
5.本次演示我们选择豆瓣的top250评论作为爬取。https://movie.douban.com/top250
在这里插入图片描述
6.确认保存网址在这里插入图片描述
7.进入点击流程,将采集步骤框弄出来。
在这里插入图片描述
在这里插入图片描述
8.点击下面的其中一个页面,将出来图片中内容,点击选中全部,再进行循环点击每个链接。在这里插入图片描述
在这里插入图片描述
10.接下来循环每个电影,进行上一个的同样操作。进行遍历。确认后,并且循环点击每个文字。
在这里插入图片描述
11.由于评论太多,本次演示为采集剧情简介。点击剧情简介后,选择采集改文本元素。
在这里插入图片描述
12.此时可以选择直接采集也可以优化一下。
在这里插入图片描述
13.沿着中间的分界线将其下拉下来,然后开始对流程框操作。在这里插入图片描述
14.设置字段的名称,修正并且确认。在这里插入图片描述
在这里插入图片描述
15.对于循环最好设置等待时间,否则会因为网络不好而导致采集失败。因为网站加载需要一定时间。其他同理。在这里插入图片描述
在这里插入图片描述
16.最后开始采集
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
17.停止采集,导出数据,格式选择。
在这里插入图片描述
在这里插入图片描述

转载地址:http://arugn.baihongyu.com/

你可能感兴趣的文章
[linux]警告:检测到时钟错误。您的创建可能是不完整的。
查看>>
动态库的Makefile.am编写
查看>>
蓝牙1.1、蓝牙1.2、蓝牙2.0的关键区别
查看>>
循环队列操作实现
查看>>
linux的信号
查看>>
glib 中 IO Channels 理解
查看>>
C++中extern “C”含义深层探索
查看>>
extern用法详解(转)
查看>>
如何在Linux下用C/C++语言操作数据库sqlite3
查看>>
SQLite的数据类型
查看>>
使用sqlite3与C接口开发数据库程序 - [编程]
查看>>
Sqlite日期和时间函数不求人
查看>>
在SQLite中使用索引优化查询速度
查看>>
标准C处理类似INI配置文件的键值型文档
查看>>
配置文件的读取,纯C代码
查看>>
UML用例图中包含(include)、扩展(extend)和泛化(generalization)三种关系详解
查看>>
基于蓝牙设备的移植
查看>>
linux中的时间函数
查看>>
Linux系统中的计时机制及相关时间函数
查看>>
strftime函数
查看>>