[文本处理] 批处理如何删除有重复字段的行？

Ecc

假如一行是重复的两列,那么就删除重复列的那一行.
  举例:
         11111 11111
         22222 33333
  我想删除1111这一行,并保留第二行.

谢谢版主回答我的第一个问题!
非常好的一个交流论坛.

codegay

python

with open("a.txt") as f:
    txt=[r for r in f.readlines() if r.split()[0]!=r.split()[1]]
print(txt)

   
复制代码

bailong360

@(for /f "tokens=1,*" %%i in (test.txt) do (
    if not "%%i"=="%%j" echo %%i %%j
))>new.txt
复制代码

//&@cls&cscript -nologo -e:jscript "%~f0" >new.txt&pause
WSH.Echo(
    new ActiveXObject('Scripting.FileSystemObject').OpenTextFile('test.txt', 1).ReadAll().replace(/([^ ]+) \1[\r\n]+/g, '')
)
复制代码

happy886rr

回复 1# Ecc

@echo off&(for /f "tokens=1*" %%a in ('type a.txt') do (set /p =%%a %%b<nul|find /i /v "%%a %%a"))>new.txt
复制代码

pcl_test

第三方
gawk "$1!=$2" 1.txt>2.txt

Ecc

回复 2# codegay


    谢谢,不过不用python.

Ecc

回复 3# bailong360


    谢谢,非常感谢给出代码.

Ecc

回复 4# happy886rr


    谢谢,直接采用了.

CrLf

@mshta http://bathome.net/s/hta/?string type('a.txt').split(/\r\n/).grep(/(\S+)\s(?!\1)/g)>new.txt
复制代码