 | terryxuwenV2EX 第 106674 号会员，加入于 2015-03-22 07:31:15 +08:00 |
terryxuwen 最近回复了
2021-10-29 16:30:40 +08:00 回复了 terryxuwen 创建的主题 微博 新浪微博反爬 封掉 huginn 的问题 |
@malagebidi 你试试普通的脚本下载，应该能下载看到网页内容。
2021-10-29 16:30:04 +08:00 回复了 terryxuwen 创建的主题 微博 新浪微博反爬 封掉 huginn 的问题 |
@ch2 匿名能看到微博的搜索结果呀。 现在情况是不知道为什么 普通下载脚本能下到内容页，而 huginn 不行，唉
2021-10-28 21:29:07 +08:00 回复了 terryxuwen 创建的主题 微博 新浪微博反爬 封掉 huginn 的问题 |
补充一下，我是不登录爬取，不存在用户名被封的情况
2020-10-01 11:54:17 +08:00 回复了 terryxuwen 创建的主题 问与答 请教， centos 下 docker 安装的 huginn 如何设置爬网使用代理服务器 |
算了，怀疑老外说的不是 huginn 的配置，而是 centos 的全局代理。所以才会有 http_proxy 这东西。不知道设置了全局代理后，爬网是代理了，访问服务器不会也变成了代理了吧？汗
2020-10-01 11:35:31 +08:00 回复了 terryxuwen 创建的主题 问与答 请教， centos 下 docker 安装的 huginn 如何设置爬网使用代理服务器 |
谢谢 fanshaohua，我打算用 docker 的命令修改镜像文件。但是现在奇怪，进入镜像后，没看见 huginn 的 env 文件，这是什么情况，晕。
Select Language