Board logo

标题: 请问如何用批处理删掉所有重复行! [打印本页]
作者: yohaa     时间: 2007-4-21 02:26    标题: 请问如何用批处理删掉所有重复行!
请问有没有人知道怎样删掉文本文件中的所有的重复行,只留下非重行,例如:
一个文本文件中含有下面几行:
a
a
b
c
d
现在我相删掉重复的a, 只留下没有重复的b c d, 用批处理能做到么?

谢谢大家啦!
作者: everest79     时间: 2007-4-21 02:32
cd.>dst.txt&&for /f "delims=" %i in (src.txt) do findstr /b /e "%i" dst.txt||echo %i>>dst.txt
作者: flyinspace     时间: 2007-4-21 03:55
cd.>dst.txt
这句话有什么用呢？？？
作者: everest79     时间: 2007-4-21 04:09
我是怕find过程中，第一次会不能正常执行
作者: flyinspace     时间: 2007-4-21 04:20
嗯，那我明白了。。
作者: everest79     时间: 2007-4-21 04:28
其实也没达到楼主要求，我这会才看明白楼主要求什么
作者: flyinspace     时间: 2007-4-21 04:31
呵呵，这个用两个for循环是最好的处理方式了。
作者: everest79     时间: 2007-4-21 04:35
楼主要将重复的行全删掉，一个也不保留
作者: yohaa     时间: 2007-4-21 04:38
请问兄台,怎么个用法呢,为了这个问题,我这两天头都搞大啦,
作者: yohaa     时间: 2007-4-21 04:40
『第 9 楼』:

请问7楼兄台,怎么个用法呢,为了这个问题,我这两天头都搞大啦, 另外谢谢everest79
的热情帮忙!
作者: everest79     时间: 2007-4-21 04:41
我的这个只能将重复的行删掉

a
a
b
c
d

a
b
c
d
并不能
a
a
b
c
d

b
c
d
src.txt是你原来的文本，执行完后dst.txt是过滤后的文本，将cmd切换到保存src.txt的目录下，再执行上边一行
作者: NaturalJ0     时间: 2007-4-21 04:42
namejm 版主以前写过一个完全符合楼主要求的代码，搜下吧。
作者: yohaa     时间: 2007-4-21 04:51
另外运行了二楼兄弟的命令,也像一个重复的也删不了,运行完了还是
a
a
b
c
d
作者: everest79     时间: 2007-4-21 04:59
仔细想想，我试了，没问题，你看那做错没有
作者: flyinspace     时间: 2007-4-21 06:28
那定义一个.ini文件就可以达到要求了。。

.ini 里是删除的东西。。

然后依然是两个for循环。
作者: huzixuan     时间: 2007-4-21 07:37
for /f "delims=" %%i in (test.txt) do if not defined %%i set %%i=a&echo %%i
作者: everest79     时间: 2007-4-21 10:05
ls的也很好呀
作者: waynebeat     时间: 2007-4-21 10:52
uniq text.txt
作者: scriptor     时间: 2007-9-26 14:20
Originally posted by everest79 at 2007-4-21 04:41:
我的这个只能将重复的行删掉

a
a
b
c
d

a
b
c
d
并不能
a
a
b
c
d

b
c
d
src.txt是你原来的文本，执行完后dst.txt是过滤后的文本，将cmd切换到保存src.txt的目录下，再执行上边一行



哈哈....终于找到le
我就要的是这个啊
赞一个....
作者: chishingchan     时间: 2007-9-26 22:22
16楼的代码不行
D:\DOCUME~1\ADMINI~1>for /f "delims=" %i in (test.txt) do if not defined %i set
%i=a&echo %i

D:\DOCUME~1\ADMINI~1>if not defined aa set aa=a & echo aa

D:\DOCUME~1\ADMINI~1>if not defined bb set bb=a & echo bb

D:\DOCUME~1\ADMINI~1>if not defined cc set cc=a & echo cc

D:\DOCUME~1\ADMINI~1>if not defined dd set dd=a & echo dd

D:\DOCUME~1\ADMINI~1>if not defined bb set bb=a & echo bb

D:\DOCUME~1\ADMINI~1>if not defined cc set cc=a & echo cc

D:\DOCUME~1\ADMINI~1>if not defined ee set ee=a & echo ee

D:\DOCUME~1\ADMINI~1>
作者: yoyodos     时间: 2007-9-26 23:26
：）


@echo off

setlocal enabledelayedexpansion

cd.>temp.txt

for /f "tokens=* delims=:" %%i in ('findstr /n ".*" test.txt') do (

    echo %%i>>temp.txt

)



for /f "tokens=1* delims=:" %%m in (temp.txt) do (

    for /f "tokens=1* delims=:" %%x in ('findstr /v /c:"%%m:" temp.txt') do (

        if "%%n"=="%%y" (

            set str=%%y !str!

        )

    )

)



findstr /v "!str!" test.txt

pause


Last edited by yoyodos on 2007-9-26 at 11:28 PM ]
作者: terse     时间: 2007-9-26 23:52
Originally posted by chishingchan at 2007-9-26 22:22:
16楼的代码不行
D:\DOCUME~1\ADMINI~1>for /f "delims=" %i in (test.txt) do if not defined %i set
%i=a&echo %i

D:\DOCUME~1\ADMINI~1>if not defined aa set aa=a & ech ...

16楼的应该可以!
@echo off
for /f "delims=" %%i in (test.txt) do if not defined %%i set %%i=a&echo %%i>>test2.txt
pause
作者: bray     时间: 2008-8-28 17:42
Originally posted by huzixuan at 2007-4-21 07:37 AM:
for /f "delims=" %%i in (test.txt) do if not defined %%i set %%i=a&echo %%i


set %%i=a 有什么用处？
作者: bray     时间: 2008-8-28 18:05
Originally posted by bray at 2008-8-28 05:42 PM:


set %%i=a 有什么用处？

还有 如果只是想删除相邻重复行的内容怎么办
比如
aaa
aaa
bbb
aaa
aaa
aaa
ccc
ddd
ccc

要求处理后为：
aaa
bbb
aaa
ccc
ddd
ccc