标题: wget批量下载图片突然慢下来的原因 [打印本页]

---

作者: junchen2     时间: 2007-9-27 20:46    标题: wget批量下载图片突然慢下来的原因

wget批量下载图片突然慢下来
是不是网站对下载工具有检测和限制作用啊
各位朋友有没有类似的经历啊！谢谢！

---

作者: plp626     时间: 2007-12-13 10:26
为什么这个批处理下不了，我不太回用
wget curl timeout已经在当前目录下了，d:\jilu.txt d:\num.txt 的内容均为1

@echo off
setlocal enabledelayedexpansion
:ji
for /f %%i in (d:\jilu.txt) do @set /a kai=%%i
for /f %%j in (d:\num.txt) do @set /a num=%%j

:xia
for /l %%a in (!kai!,1,133000) do (
call :zhang
curl -o %%a.txt http://*********/bbs/viewthread.php?tid=%%a^&extra=page%3D1
for /f "delims=" %%i in ('findstr "http://.*jpg" %%a.txt') do (
    set /a num=num+1
    set "var=%%i"
    set "var=!var: src=☆!"
    set "var=!var:.jpg"=☆!"
    set "var=!var:*☆=!"
    for /f "tokens=1 delims==☆" %%j in ("!var!") do (
    set "yi=%%~j"
    echo !yi!
    echo %%~j.jpg>>xiazailianjie.txt
wget -t 8 -w 3 -c -T 30 -P d:\图片\tupian2\ %%~j.jpg
ren d:\图片\tupian2\%%~nj.jpg tupian-!num!.jpg
echo !num!>d:\num.txt
)
)
echo %%a>d:\jilu.txt
del %%a.txt /f
)

:zhang
ping -n 2 www.baidu.com | find "reply from" /i
if errorlevel==1 timeout /t 5 & goto ji