[文件操作] 请教一个批量下载网页的问题？

Rank: 4

帖子: 241
积分: 431
技术: 24
捐助: 0
注册时间: 2011-9-15

2楼

发表于 2014-5-18 10:21 | 只看该作者

wget有一个等待的选项：
-w, --wait=SECONDS wait SECONDS between retrievals.
--waitretry=SECONDS wait 1...SECONDS between retries of a retrieval.

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

3楼

发表于 2014-5-18 10:56 | 只看该作者

谢了，是这样吗？
wget -P -W 5 "F:\BIAO\11" -i "F:\BIAO\test11.txt" --html-extension -p -k
可是没有看到运行

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

4楼

发表于 2014-5-18 20:11 | 只看该作者

请各位好心人再帮忙看看

terse

中将

Rank: 8 Rank: 8

帖子: 2329
积分: 9717
技术: 471
捐助: 0
注册时间: 2008-2-25

5楼

发表于 2014-5-19 00:19 | 只看该作者

这样试呢

wget -P "F:\BIAO\11" -w5 -i "F:\BIAO\test11.txt" --html-extension -p -k
复制代码

1 评分人数

Batcher: 乐于助人技术 + 1

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

6楼

发表于 2014-5-19 08:57 | 只看该作者

谢了，就是这样，很好用

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

7楼

发表于 2017-8-26 23:04 | 只看该作者

https://www.lszj.com/tag/jianghuating_3074_1.html
https://www.lszj.com/tag/jiangjieshi_29_1.html
这种格式的如何批量下载？
wget -P "F:\BIAO\11" -w5 -i "F:\BIAO\test11.txt" --html-extension -p -k不能用了

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

8楼

发表于 2017-8-27 21:19 | 只看该作者

请教一个批量下载网页的问题？

本帖最后由 DDDYJQ1 于 2017-8-27 23:09 编辑

F:\BIAO\TEST11.TXT内容为
https://www.lszj.com/tag/jianghuating_3074_1.html
https://www.lszj.com/tag/jiangjieshi_29_1.html
这种格式的如何批量下载？
wget -P "F:\BIAO\11" -w5 -i "F:\BIAO\test11.txt" --html-extension -p -k不能用了
请问一下要如何改进？

3518228042

一级士官

Rank: 2

帖子: 56
积分: 100
技术: 8
捐助: 0
注册时间: 2017-4-29

9楼

发表于 2017-8-28 08:16 | 只看该作者

wget.exe损坏？丢失？还是怎么的，应该行的啊

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

10楼

发表于 2017-8-28 20:57 | 只看该作者

没损坏，也没丢失

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

11楼

发表于 2017-8-28 20:58 | 只看该作者

请问一下要如何改进？

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

12楼

发表于 2017-8-29 22:20 | 只看该作者

请各位大神帮忙想想！

hlzj88

少校

Rank: 6 Rank: 6

帖子: 820
积分: 1616
技术: 51
捐助: 20
注册时间: 2008-11-3

13楼

发表于 2017-8-29 22:55 | 只看该作者

wget --user-agent="Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.3) Gecko/2008092416 Firefox/3.0.3" --no-check-certificate -c -t 0 -T 40 -i test11.txt
复制代码

测试下载成功
这一句有两个作用，1 仿浏览器访问，避免wget被拒绝 2 可以下载加密网页https，如果要区分，忘了，这是我用wget的标配语句。

目的，学习批处理

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

14楼

发表于 2017-8-29 23:04 | 只看该作者

谢了，就是这样，谢谢

Rank: 4

帖子: 121
积分: 354
技术: 0
捐助: 0
注册时间: 2008-12-21

15楼

发表于 2018-4-10 22:49 | 只看该作者

请教一个批量下载网页的问题？