Batcher

1.bat

@echo off
md "去重之后的文件"
for /f "delims=" %%i in ('dir /b /s *.txt') do (
    (for /f "delims=" %%a in ('type "%%i"') do (
        findstr /x /c:"%%a" "去重之后的文件\%%~ni.log" 1>nul 2>&1 || echo,%%a
    ))>"去重之后的文件\%%~ni.log"
)
复制代码

Batcher

回复 3# xy506


没有卡死，只是处理的比较慢而已。因为文件比较大，那个去重的方法需要不停的调用findstr命令，所以效率不高。
可以用另外一种去重的方法试试：

@echo off
md "去重之后的文件"
for /f "delims=" %%i in ('dir /b /s *.txt') do (
    echo 正在处理文件 %%i
    setlocal
    (for /f "delims=" %%a in ('type "%%i"') do (
        if not defined _%%a (
            echo,%%a
            set "_%%a=1"
        )
    ))>"去重之后的文件\%%~ni.log"
    endlocal
)
复制代码