[文本处理] 【已解决】批处理如何删除文本中以指定字符分割的指定字段重复的行

pan528

一、材料
以下文本中有20多个章节是重复的：
二、如何用DOS批命令剔除重复的章节？

gawk

gawk -F "_" "!a[$2_$3]++" 1.txt > 2.txt
复制代码

pan528

回复 4# yangfengoo


    谢谢解答！

yangfengoo

set x=%%b 放前面
if not "%%b"=="!x!" 始终不成立 echo %%a_%%b 这句不被执行

pan528

回复 2# yangfengoo

已通过测试，非常谢谢！

另外请教一下：为什么“set x=%%b”不能放在前面？
我开始写的代码是：
@echo off
setlocal enabledelayedexpansion
for /f "tokens=1* delims=_" %%a in (1.txt) do (
set x=%%b
if not "%%b"=="!x!" echo %%a_%%b
)>>new.txt
结果导出了空文件。
这是为什么？

yangfengoo

@echo off
setlocal enabledelayedexpansion
for /f "tokens=1* delims=_" %%a in (1.txt) do (
if not "%%b"=="!x!" echo @%%a_%%b
set x=%%b
)>>new.txt
复制代码