全球主机交流论坛

标题: 论坛里发现一个美图站怎么批量下载到本地 [打印本页]

作者: kldeam 时间: 2022-2-9 15:10
标题: 论坛里发现一个美图站怎么批量下载到本地
rt 如何下载到本地求明路

作者: 白月初 时间: 2022-2-9 15:11
先分享出来再说

作者: 氵氵 时间: 2022-2-9 15:11
提示: 作者被禁止或删除内容自动屏蔽

作者: kldeam 时间: 2022-2-9 15:14
https://www.xiezhen.xyz/ 这是网站 c发帖子里一个mjj签名站

作者: 好鸭 时间: 2022-2-9 15:16
这个我怀疑有过图包的

作者: kldeam 时间: 2022-2-9 15:18

好鸭发表于 2022-2-9 15:16
这个我怀疑有过图包的

啥意思

作者: rem 时间: 2022-2-9 15:19

kldeam 发表于 2022-2-9 15:14
https://www.xiezhen.xyz/ 这是网站 c发帖子里一个mjj签名站

没做反爬，随便个python脚本都能爬出来图片链接

作者: kldeam 时间: 2022-2-9 15:20

rem 发表于 2022-2-9 15:19
没做反爬，随便个python脚本都能爬出来图片链接

流下了没有技术的眼泪有没有大佬打包

作者: rem 时间: 2022-2-9 15:23

kldeam 发表于 2022-2-9 15:20
流下了没有技术的眼泪有没有大佬打包

tvv.tw这人首页上有更多福利的专栏

作者: kldeam 时间: 2022-2-9 15:23

rem 发表于 2022-2-9 15:23
tvv.tw这人首页上有更多福利的专栏

瞅一眼去

作者: wise指南 时间: 2022-2-9 15:24

kldeam 发表于 2022-2-9 15:20
流下了没有技术的眼泪有没有大佬打包

可以使用wget， wget 都不会安装我也没辙

wget -r -p -np -k https://www.xiezhen.xyz/

然后就等

作者: iwil 时间: 2022-2-9 15:26

wise指南发表于 2022-2-9 15:24
可以使用wget， wget 都不会安装我也没辙

这样也行？

作者: iiss 时间: 2022-2-9 15:27
先分享出来再说

作者: kldeam 时间: 2022-2-9 15:30

wise指南发表于 2022-2-9 15:24
可以使用wget， wget 都不会安装我也没辙

丢服务器执行的一直跑话说存储在哪里。

作者: wise指南 时间: 2022-2-9 15:30

kldeam 发表于 2022-2-9 15:30
丢服务器执行的一直跑话说存储在哪里。

vps 本地

作者: helloloc 时间: 2022-2-9 15:34
这图包和tvv的看起来一样前几天刚爬了tvv的
https://pan.iop.plus/d/%E6%9C%AC%E5%9C%B0%E7%A3%81%E7%9B%98D/images/tvv.tw.zip

作者: wise指南 时间: 2022-2-9 15:36
一条命令，直接镜像网站哈。

nohup wget -m --no-check-certificate https://www.xiezhen.xyz/ -U "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36" --random-wait robots=off &

选项：
--random-wait 稍微等一等
robots=off 无视robot.txt

作者: kldeam 时间: 2022-2-9 15:37

wise指南发表于 2022-2-9 15:24
可以使用wget， wget 都不会安装我也没辙

这下载下来的都是网页不是图片

作者: wise指南 时间: 2022-2-9 15:39

kldeam 发表于 2022-2-9 15:37
这下载下来的都是网页不是图片

可以的，递归下载要等待。

作者: kldeam 时间: 2022-2-9 15:44

wise指南发表于 2022-2-9 15:39
可以的，递归下载要等待。

啥意思不太懂

作者: kldeam 时间: 2022-2-9 15:56

helloloc 发表于 2022-2-9 15:34
这图包和tvv的看起来一样前几天刚爬了tvv的
https://pan.iop.plus/d/%E6%9C%AC%E5%9C%B0%E7%A3%81%E7%9B% ...

这玩意解压出来多大

作者: helloloc 时间: 2022-2-9 16:02

kldeam 发表于 2022-2-9 15:56
这玩意解压出来多大

22g吧

作者: kldeam 时间: 2022-2-9 16:06

helloloc 发表于 2022-2-9 16:02
22g吧

先下载下来看看谢谢大佬

作者: kldeam 时间: 2022-2-9 17:18

helloloc 发表于 2022-2-9 15:34
这图包和tvv的看起来一样前几天刚爬了tvv的
https://pan.iop.plus/d/%E6%9C%AC%E5%9C%B0%E7%A3%81%E7%9B% ...

大佬下载你这个到一大半就中断啥情况流量限制嘛

作者: 哈登 时间: 2022-2-10 10:23

helloloc 发表于 2022-2-9 15:34
这图包和tvv的看起来一样前几天刚爬了tvv的
https://pan.iop.plus/d/%E6%9C%AC%E5%9C%B0%E7%A3%81%E7%9B% ...

我去20G
不过这网盘速度好猛啊，我这一秒92M

作者: 惜为伊人醉 时间: 2022-2-10 10:24
还没我签名图站图片多！

作者: kldeam 时间: 2022-2-10 13:25

惜为伊人醉发表于 2022-2-10 10:24
还没我签名图站图片多！

大佬求打包

作者: goyz 时间: 2022-2-10 14:17

wise指南发表于 2022-2-9 15:36
一条命令，直接镜像网站哈。

nohup wget -m --no-check-certificate https://www.xiezhen.xyz/ -U "Mozill ...

赞大佬，补充个，可以查看后台运行时的日志：
wget -m --no-check-certificate https://www.xiezhen.xyz/ -U "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36" --random-wait robots=off --output-file=wget.log -b
查看运行日志：
tail -f wget.log

欢迎光临全球主机交流论坛 (https://loc.442266.xyz/)