本经验为大家介绍如何批量采集斗鱼直播数据
工具/原料
电脑
后羿采集器
方法/步骤
1、步骤一:采集结果
2、步骤二:新建采集任务复制网页地址
3、新建智能模式采集任务您可以在软件上直接新建采集任务,也可以通过导入规则来创建任务。
4、步骤三:配置采集规则设置提取数据字段软件自动识别字段后我们可以右击字段进酚祯馄嫱行相关设置,包括修改字段名称、增减字段、处理数据等。
5、我们逐吴哉姆可以看到软件自动识别出了很多标签,但是如果这些标签都一个个采集出来,那样子字段就会显得太多,此时我们可以选中这些标签的字段进行合并。
6、设置效果如下:
7、使腩柽鬣盛用深入采集功能提取详情页数据在列表页上展示出了直播的部分信息,如果需要采集主播的具体信息的话,我们需要标题链接使用“深入采集”功能,跳转到详情页进行采集。
8、字段设置效果如下:
9、步骤四:设置并启动采集任务
10、步骤五:导出并查看数据