中国DOS联盟

-- 联合DOS 推动DOS 发展DOS --

联盟域名:www.cn-dos.net 论坛域名:www.cn-dos.net/forum
DOS,代表着自由开放与发展,我们努力起来,学习FreeDOS和Linux的自由开放与GNU精神,共同创造和发展美好的自由与GNU GPL世界吧!

中国DOS联盟论坛
现在时间是 2026-08-10 23:03
中国DOS联盟论坛 » DOS批处理 & 脚本技术(批处理室) » 讨论:用批处理抓取hao123网址 查看 832 回复 6
楼 主 讨论:用批处理抓取hao123网址 发表于 2008-12-16 00:09 ·  中国 陕西 宝鸡 电信
初级用户
积分 47
发帖 20
注册 2007-08-14 17:10
18年会员
UID 95133
性别 男
状态 离线
网上有大把的ASP,以及一些小软件,但却不能实现对整个HAO123网页网址的自动提取,自动分类功能!


如果用批处理来抓取hao123整个站点的网址链接,分析整首页面面左侧栏目,然后根据左侧栏目来检索每一个子页面链接,而后提取每个子页面的网址,生成形式可是MDB数据,或者EXLCEL电子表格形式!


大家一起来进行讨论,看有没有好的解决思路!讨论并求此与此相关的源码
IT一点通:http://www.sunenze.com
企业直达:http:www.directok.cn
网赚全球:http://rboot.cn
2 发表于 2008-12-16 00:33 ·  中国 广东 广州 电信
金牌会员
★★★★
一叶枝头,万树皆春
积分 2,564
发帖 1,127
注册 2006-12-25 22:57
19年会员
UID 74552
性别 男
状态 离线
有见过这么一个

'&cls&(if "%~1"=="" (echo Usage:&echo links )else cscript/nologo /e:vbs "%~f0" "%~1")&goto:eof GetLink WSH.Arguments(0) Sub GetLink(sURL) With CreateObject("InternetExplorer.Application") .Navigate sURL Do While (.Busy Or .ReadyState <> 4) WSH.Sleep 100 Loop For Each sLink In .Document.Links WSH.Echo sLink Next .Quit End With End Sub
49206C6F766520796F752067757973 54656C3A3133383238343036373837
3 发表于 2008-12-16 09:28 ·  中国 北京 光环新网
新手上路
积分 8
发帖 5
注册 2008-11-27 10:38
17年会员
UID 132227
性别 男
状态 离线
是个方法~~~~
4 发表于 2008-12-16 09:41 ·  中国 上海 电信
高级用户
★★★
积分 916
发帖 377
注册 2004-03-08 00:00
22年会员
UID 19523
性别 男
状态 离线
5 发表于 2008-12-16 10:31 ·  中国 陕西 宝鸡 电信
初级用户
积分 47
发帖 20
注册 2007-08-14 17:10
18年会员
UID 95133
性别 男
状态 离线
4楼给的这个网址,下载之后运行直接蓝屏死机,系统无法启动。
IT一点通:http://www.sunenze.com
企业直达:http:www.directok.cn
网赚全球:http://rboot.cn
6 发表于 2008-12-16 16:37 ·  中国 上海 普陀区 电信
高级用户
★★★
积分 916
发帖 377
注册 2004-03-08 00:00
22年会员
UID 19523
性别 男
状态 离线
晕没这么夸张吧,topfisher是目前用过的最好的数据采集软件,由于它采用脚本方式编写任务,所以可以完成一些很复杂的采集任务.但可能还有点点问题,在对付验证码方面.其它的基本都是GUI界面,很多东西都被限制在作者写好的框架所以有时候感觉不如它实用.
7 发表于 2008-12-17 10:11 ·  中国 陕西 宝鸡 电信
初级用户
积分 47
发帖 20
注册 2007-08-14 17:10
18年会员
UID 95133
性别 男
状态 离线
确实是的,我双击直接蓝屏死机。
IT一点通:http://www.sunenze.com
企业直达:http:www.directok.cn
网赚全球:http://rboot.cn
论坛跳转: