八爪鱼-01微博评论

最新推荐文章于 2025-06-13 14:26:26 发布
最新推荐文章于 2025-06-13 14:26:26 发布
阅读量1.8k 收藏 20
点赞数 10
CC 4.0 BY-SA版权
分类专栏： 八爪鱼 文章标签： 数据挖掘 big data 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_62785037/article/details/138416100
本文介绍了如何通过八爪鱼抓取工具获取微博单条帖子的URL，进行自定义任务设置，登录并保存Cookie保持会话，以及如何调整采集配置、识别网页、生成采集设置、修改字段、添加加载更多功能，最后执行采集并导出数据的过程。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1.获取url地址

说明：随便找到一篇微博，获取单条微博的网址。

2.自定义任务

 说明：新建中的自定义任务，输入网址后点击保存设置。

3.登录

说明：登录的时候需要把打开浏览模式

4.保存Cookie

说明：通过获取和存储Cookie，可以在多个请求之间保持用户的登录状态。这样即使关闭了浏览器或者重新启动八爪鱼，用户也无需重新登录。

5. 关闭浏览模式

6.自动识别网页

 7.生成采集设置

说明：调整采集的配置后，生成采集设置。

8. 修改采集字段

说明：双击顶部标题，修改采集字段。

9. 添加加载更多按钮

 

10. 采集

说明：查看右边的流程没有问题后，点击采集。

11.采集成功 

12.导出格式

说明： 可以选择以下几种格式。

用八爪鱼爬取微博热门评论
weixin_30469895的博客
10-19 4114
关于八爪鱼 八爪鱼, 是一款简单易操作的爬虫工具。当然这种工具也有一定的局限性，可定制性肯定没有用一些爬虫框架(scrapy等)好(毕竟代码是自己写的，哈哈)。 使用八爪鱼 最近，使用八爪鱼爬取了一些微博的热门评论。当然，使用新浪微博API也是可以的。但是，自己为了快嘛，也想了解一下这个工具。 八爪鱼软件中基本爬取工作都有教程的。下面，我就以爬取微博热门评论，讲解一下，足以应付八爪鱼的基本使用了。...
【微博】评论采集
网页爬虫与数据采集 · 八爪鱼
11-19 7332
采集场景 在微博主页（https://weibo.com/）登录后，打开微博博文链接，采集博文链接的评论数据。实例网址：https://weibo.com/1977661791/I7PgktlCh 。 采集字段 博主用户名、发布时间、博文、分享数、评论数、点赞数、评论、评论用户名、评论时间。 采集结果 采集结果可导出为Excel、CSV、HTML、数据库等多种格式。导出为Excel示例： 教程说明 本篇更新时间：2020/05/18 八爪鱼版本：V8.1.12 如果因网页改版造成网址或步骤无效，无法
八爪鱼采集器：快速抓取评论数据教程(微博)
最新发布
xiyv666的博客
06-13 907
摘要：需要数据集研究语言及网络用语、网络暴力等数据集采集模板导入及配置
第九讲 数据采集：用八爪鱼采集微博评论
qq_43466427的博客
01-07 1万+
这是专栏里的总结图，这一讲主要是对“八爪鱼”这个数据采集器进行了简要介绍，包括设计流程以及应用案例。 练习：通过八爪鱼抓取豆瓣网上关于《海王》的评论。 （1）输入网页：https://movie.douban.com/ （2）输入关键词 （3）点击搜索 （4）设置循环翻页（必须先设置循环条件） （5）选择提取元素 选择单条内容的最大选择区域，点击选中子元素—选中全部 （6）启动采集 数据量...
09丨数据采集：如何用八爪鱼采集微博上的“D&G”评论
修罗神的海岛
06-20 6206
八爪鱼的基本操作在开始操作前，我先来介绍下今天要讲的主角“八爪鱼”工具。相比使用 Python 进行爬虫，八爪鱼的使用更加简便，因为是所见即所得的方式，基本上不需要编写代码，除了在正则表达式匹配的时候会用到 XPath。这里简单介绍下 XPath，XPath 的英文是 XML Path Language，也就是 XML 的路径语言，用来在 XML 文件中寻找我们想要的元素。所以八爪鱼可以使用 XPath 帮我们更灵活地定位我们想要找的元素。自定义任务 VS 简易采集如果你想要采集数据就需要新建一个任务，在建
微博评论数据爬取以及分析
热门推荐
网页爬虫与数据采集 · 八爪鱼
09-06 2万+
#不许你没看过の系列！# 吹爆最近的国漫《哪吒之魔童降世》 从故事情节、角色设计到特效处理 都非常牛！！！ #连海报都好好看啊# 上映首周票房已经达到14.1亿！ 打破国漫票房记录！ 豆瓣评分达到8.6分！ 14亿票房背后，到底是谁成为《哪吒》票房主力军呢？ 今天小编用八爪鱼数据采集爬取4794条《哪吒之魔童降...
数据分析基础篇16讲之09数据采集：如何用八爪鱼采集微博上的“D&G”评论
diligent_jianhao的博客
07-07 1942
09 数据采集：如何用八爪鱼采集微博上的“D&G”评论 八爪鱼基本操作步骤： 首先需要下载八爪鱼以及安装，安装就是下一步下一步即可。网页地址https://www.bazhuayu.com/download。 安装完成后打开你会发现需要注册一个八爪鱼账号，很简单，操作一下即可。 打开后首页面会有两个选择，一个是简易采集，一个是自定义任务 简易采集中集成了一些热门的模板，也就是我们经常访...
词云图分析微博评论
WIFI下的365
05-24 2791
罗志祥5月20日的微博评论分析 最近罗志祥在5月20号发布了一篇对周扬青的小作文,我正好也想做一个词云图的项目, 所以爬取了罗志祥这条微博的评论,做个词云图来看看大家都在说些什么 #导包 import pandas as pd import numpy as np import matplotlib.pyplot as plt import repeat_word as rw import jieba import jieba.analyse from wordcloud import WordClo
八爪鱼采集器爬取微博评论
01-05
### 使用八爪鱼采集器爬取微博评论数据 #### 工具准备 为了成功抓取微博评论数据，需准备好八爪鱼采集器这一工具。此工具能够简化网页数据提取过程并提供可视化界面来配置采集逻辑[^1]。 #### 配置流程概述 在...
五种不同的微博评论数据获取方法
qq_33294872的博客
05-10 5839
接下来简单介绍五种不同的微博评论数据获取方法。 第一种方式： 有4种不同的微博登录方式，m.weibo.cn m.weibo.com（电脑端打不开） weibo.cn weibo.com, 今天我们主要使用m.weibo.cn。 1.登录网址https://m.weibo.cn/detail/4502725984887404 2.注意：要爬评论是需要先登录的，通过登录获取cookie，之后的请求均携带此cookie。有了cookie了，接下来就是按照分析的规则进行评论的爬取 接...
利用八爪鱼爬取关键词搜索的微博数据
清洄KAKA的博客
03-17 7482
微博有些内容比较长会被折叠，爬取的时候需要自动点击展开这一元素，但是展开元素所对应的位置是不一样的，有的一个div组件里有一个链接，有的有0，2，3个话题或超话会干扰，所以我们需要用到xpath来正则匹配。
600+条新冠疫情评论自制数据集（情感分析实验）.csv
03-13
个人使用八爪鱼爬取的微博评论内容，来自2021年1月6日的一条微博，仅分享给大家做科研使用
大数据信息资料采集：公众号武志红文章评论爬取八爪鱼采集器规则
www_so74_com的博客
10-06 790
大数据信息资料采集：公众号武志红文章评论爬取八爪鱼采集器规则 大数据信息资料采集 公众号历史文章采集 公众号评论爬取 微信公众号历史文章导出 抓取微信公众号所有文章。 公众号文章抓取工具 抓取公众号所有文章工具 微信公众号爬取工具 爬取微信公众号文章出现限制 微信公众号文章api 公众号历史文章评论内容采集，导出表格格式。 采集到的内容包含：文章标题，发布时间，所属栏目，评论ID，评论内容，该评论得到的点赞数，号主评论内容，回复评论得到的点赞数等等。 可以通过找评论里特定的字词，突出显示后，找对应...
八爪鱼爬取热点的一些信息---新浪
cainiao2013的博客
01-25 2856
使用工具：八爪鱼 实现目标：在新浪微博搜索页面输入关键字，爬取博主的一些信息，博主博文链接，博主名，发博时间，来自终端，博文内容，点赞数，评论数，评论者，评论内容，评论时间，评论点赞数，博主详细信息。 提样效果：八爪鱼生成的表格有较多冗余数据，跳过了登录与验证码处理。 目前为止，生成的数据有点乱，需要二次处理。
获取新浪微博内容和评论
dfds的专栏
09-24 1788
public List getWeiboList(String content) throws ClientProtocolException, IOException{ Document doc=Jsoup.parse(content); Elements sets=doc.getElementsByClass("c"); List list=new ArrayList(); Syste
八爪鱼使用指南（2）以某音的短剧评论为例
2301_79959211的博客
02-23 883
八爪鱼的使用指南2,以某音的短剧评论为例
爬虫实战：爬取微博明星的某一条动态的粉丝评论
weixin_39848830的博客
02-27 3276
2018/2/27，这是我的第一篇博客，写的目的很单纯，就是记录自己学习过程中遇到的问题以及解决方法。初次学习爬虫，本人不才，代码其实也是学习一些B站视频。下面开始爬取的步骤由于是为了爬取粉丝的评论，所以我们的目标就是要找到包含评论的代码，再将其解析并保存下来1.找到代码        爬取的网页是https://m.weibo.cn/status/4160547165300149（鹿晗和关晓彤宣...
求助：为什么用八爪鱼采集器抓取特定时间段的微博会出现漏抓情况？
weixin_52823452的博客
12-13 1974
八爪鱼抓取微博内容 抓取不完整的问题 在原微博网址设置了特定的时间段，导入八爪鱼采集器后也显示了相应时间段内容。例如按一小时抓取，但采集完成后导出的数据发现，一般只抓取了半个小时就停止了。有人碰到过类似问题吗？或者是否知道解决办法。 微博网址显示选定了特定的某一小时 但导出数据时发现只采集了十多分钟就跳到下一个时间段了 ...
八爪鱼使用教程
weixin_52034036的博客
10-16 8511
八爪鱼使用教程
【爬虫】微博数据采集
越努力，越幸运
01-14 2083
所用工具 八爪鱼采集器 数据需求 爬取指定关键词下的微博（用户信息、发布时间、发布内容等 流程构建 指定关键词微博采集 数据示例 数据示例 基于移动端微博网址 微博 (weibo.cn)https://m.weibo.cn/ 参考来源 采集模板 八爪鱼采集模板 结果示例 结果示例 指定关键词 各话题下微博采集 数据示例 数据示例 注意：①循环：可通过手动输入待爬取的网址； 注意：②自动识别：自动识别网页→选择需要的信息抓取 采集模板 八爪鱼...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

FOREVER-Q

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值