[已解决]批处理怎样txt文本去重？

sunflowerr_88 · 发表于 2010-12-25 16:15:49

原txt文本文件内容：
123456
123456
1234567
123456
12345678
12345678
。。。。
希望处理后得到的内容：
123456
1234567
12345678
。。。。。
即：将二个及二个以上内容一样的行合并成一个（去除重复的）
谢谢！

[ 本帖最后由 sunflowerr_88 于 2011-1-27 03:07 编辑 ]

Batcher · 发表于 2010-12-25 16:23:59

批处理去除超大文本中的重复行
http://www.bathome.net/thread-4690-1-1.html

sunflowerr_88 · 发表于 2010-12-25 16:40:34

我是菜鸟，刚看了给出的帖子，我没这么多要求，只要去重就行了。还有，搜索相关关键词，总是搜不到啊，直接给个代码吧，谢谢

andyrave · 发表于 2010-12-25 17:21:10

对付简单点没有特殊符号的这个批处理能用

复杂点的用第三方工具 SED

@ECHO OFF
FOR /F "TOKENS=* DELIMS=" %%I IN (A.TXT) DO (
IF NOT DEFINED "_%%~NI" (
SET "_%%~NI=M" & ECHO/%%~NI
) ELSE (
SET "_%%~NI=_%%~NI"
)
)
PAUSE>NUL

复制代码

hanyeguxing · 发表于 2010-12-25 17:27:36

@echo off
(for /f "delims=" %%a in (1.txt) do (if not defined #"%%a" echo %%a&set #"%%a"==)>1_.txt

复制代码

sunflowerr_88 · 发表于 2010-12-25 19:35:39

爱死这个论坛了，从来不知道这东西还能处理这么多复杂的问题呢！今后要多泡泡这论坛了，还请各位大仙不吝指教啊。。。。

smith203 · 发表于 2012-3-26 11:47:03

对付简单点没有特殊符号的这个批处理能用

复杂点的用第三方工具 SED
andyrave 发表于 2010-12-25 17:21

这个我怎么不能用啊。

find · 发表于 2012-3-26 12:58:17

回复 7# smith203

因为你还没有下载sed.exe

		自动登录	找回密码
密码			注册

[新手上路]批处理新手入门导读	[视频教程]批处理基础视频教程	[视频教程]VBS基础视频教程	[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动	[批处理精品]CMD命令50条不能说的秘密	[在线下载]第三方命令行工具	[在线帮助]VBScript / JScript 在线参考

[文本处理] [已解决]批处理怎样txt文本去重？

评分

回复 2楼的帖子

评分

回复 5楼的帖子

[文本处理] [已解决]批处理怎样txt文本去重？

评分

回复 2楼 的帖子

评分

回复 5楼 的帖子

回复 2楼的帖子

回复 5楼的帖子