中国DOS联盟

-- 联合DOS 推动DOS 发展DOS --

联盟域名:www.cn-dos.net 论坛域名:www.cn-dos.net/forum
DOS,代表着自由开放与发展,我们努力起来,学习FreeDOS和Linux的自由开放与GNU精神,共同创造和发展美好的自由与GNU GPL世界吧!

中国DOS联盟论坛
现在时间是 2026-08-08 22:12
中国DOS联盟论坛 » DOS批处理 & 脚本技术(批处理室) » 【讨论】把整个网站下载到你的硬盘 查看 913 回复 9
楼 主 【讨论】把整个网站下载到你的硬盘 发表于 2008-05-12 00:00 ·  中国 陕西 西安 电信
银牌会员
★★★★
钻石会员
积分 2,278
发帖 1,020
注册 2007-11-19 13:34
18年会员
UID 103127
性别 男
状态 离线
我知道有特定的软件能干这个事,但为了学习wget我还是想用P来做

比如 将cn-dos网站下到你硬盘上
wget -m  http://www.cn-dos.net/

或者将批处理室的帖子全部下的硬盘:
wget -q -0 ????? 谁来补充下?
http://www.cn-dos.net/forum/viewthread.php?tid=39483


我对wget 没多研究,只是这个是以游客的身份下载的,自然对某些需要会员,积分限制的帖子就不能下载了

怎么以指定会员的身份下载?
山外有山,人外有人;低调做人,努力做事。

进入网盘(各种工具)~~ 空间~~cmd学习
2 发表于 2008-05-12 20:10 ·  中国 安徽 合肥 电信
新手上路
积分 16
发帖 6
注册 2007-01-20 04:48
19年会员
UID 77096
性别 男
状态 离线
是吗? 我试了 这么不能下载啊
3 发表于 2008-05-12 23:07 ·  中国 北京 联通
银牌会员
★★★
积分 1,287
发帖 634
注册 2007-05-02 15:06
19年会员
UID 87277
性别 男
来自 cmd.exe
状态 离线
饿...
如果论坛的登陆方式是get的话好办。构造一个URL用wget提交然后保存cookies.

POST的话没怎么研究过.

习惯用curl..
4 发表于 2008-05-13 06:59 ·  中国 陕西 西安 电信
银牌会员
★★★★
钻石会员
积分 2,278
发帖 1,020
注册 2007-11-19 13:34
18年会员
UID 103127
性别 男
状态 离线
curl,嗯,确实。。。
给个范例可否?
山外有山,人外有人;低调做人,努力做事。

进入网盘(各种工具)~~ 空间~~cmd学习
5 发表于 2008-05-13 11:11 ·  中国 重庆 电信
版主
★★★★★
积分 9,023
发帖 5,017
注册 2007-05-31 19:39
19年会员
UID 89899
性别 男
状态 离线
找找这两个帖子:

cmd与Curl双剑合璧:自动合并多页主题
Curl和任务计划打造自动BT下载BOT
6 发表于 2008-05-13 11:24 ·  中国 陕西 西安 电信
银牌会员
★★★★
钻石会员
积分 2,278
发帖 1,020
注册 2007-11-19 13:34
18年会员
UID 103127
性别 男
状态 离线
Originally posted by HAT at 2008-5-13 11:11 AM:
找找这两个帖子:

cmd与Curl双剑合璧:自动合并多页主题
Curl和任务计划打造自动BT下载BOT

研究过,那个是任意下载(游客),没有提供会员身份下载的例子,也可能是我看不出,还请指点迷津。。。
山外有山,人外有人;低调做人,努力做事。

进入网盘(各种工具)~~ 空间~~cmd学习
7 发表于 2008-05-13 15:53 ·  中国 北京 朝阳区 联通
银牌会员
★★★
积分 1,287
发帖 634
注册 2007-05-02 15:06
19年会员
UID 87277
性别 男
来自 cmd.exe
状态 离线
具体wget怎么实现登录我就不清楚了.
CURL的粗略弄下
Curl -c cookie.txt -d "formhash=b9c1d89b&referer=&loginmode=&styleid=&cookietime=31536000&username=用户名&password=密码&questionid=0&answer=&loginsubmit=%E4%BC%9A%E5%91%98%E7%99%BB%E5%BD%95" "http://www.cn-dos.net/forum/logging.php?action=login"

这样保存下来的cookie就可以在Wget里用了.
本帖最近评分记录 (共 1 条) 点击查看详情
评分人分数时间
plp626 +3 2008-05-13 16:17
8 发表于 2008-05-13 16:17 ·  中国 陕西 西安 电信
银牌会员
★★★★
钻石会员
积分 2,278
发帖 1,020
注册 2007-11-19 13:34
18年会员
UID 103127
性别 男
状态 离线
Originally posted by knoppix7 at 2008-5-13 03:53 PM:
具体wget怎么实现登录我就不清楚了.
CURL的粗略弄下
Curl -c cookie.txt -d "formhash=b9c1d89b&referer=&loginmode=&styleid=&cookietime=31536000&username=用 ...

好!
山外有山,人外有人;低调做人,努力做事。

进入网盘(各种工具)~~ 空间~~cmd学习
9 发表于 2008-05-13 17:47 ·  中国 北京 朝阳区 联通
银牌会员
★★★
积分 1,287
发帖 634
注册 2007-05-02 15:06
19年会员
UID 87277
性别 男
来自 cmd.exe
状态 离线
下载指定版面的话没什么办法.
递归算法总是能弄到其他地方去...
我习惯:

http://www.cn-dos.net/forum/forumdisplay.php?fid=23&page=1
下到
http://www.cn-dos.net/forum/forumdisplay.php?fid=23&page=322

然后对下载到的结果进行分析.判断.然后把帖子的URL写入一个txt文件
find "viewthread.php" XXXXXX.XXX
10 发表于 2008-05-28 17:13 ·  中国 江苏 苏州 电信
初级用户
★★
积分 161
发帖 87
注册 2008-05-25 17:25
18年会员
UID 119673
性别 男
状态 离线
我用wget时有的目录可以下载,有的目录好像不能下载.而且下载下来的东西全部在当前目录下,没有分文件夹,一估脑的.html文件.图片文件都在一齐.
论坛跳转: