找回密码
 注册
搜索
[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
查看: 81838|回复: 15

[文本处理] [已解决]批处理有什么方法可以找出文本中重复的行?

[复制链接]
发表于 2015-8-14 14:28:16 | 显示全部楼层 |阅读模式
本帖最后由 ljicer 于 2015-8-14 22:58 编辑

有一个文本文件,里面有部分行内容重复,有什么方法可以把这些重复的行找出来并写到一个新的文本文件里面。

不知道怎么上传附件,部分内容如下:
77790
77791
77792
77793
77794
77795
77795
77796
77797
77798
77799

怎么找出“77795”这一行,
谢谢!
发表于 2015-8-14 15:07:23 | 显示全部楼层
  1. findstr /c:"77795" 1.txt >2.txt
复制代码
发表于 2015-8-14 15:10:45 | 显示全部楼层
  1. @echo off
  2. for /f %%a in (1.txt) do (
  3.     if defined #%%a echo;%%a
  4.     set #%%a=def
  5. )
  6. pause
复制代码

评分

参与人数 1技术 +1 收起 理由
ljicer + 1 谢谢!

查看全部评分

发表于 2015-8-14 15:17:40 | 显示全部楼层
本帖最后由 bailong360 于 2015-8-14 17:51 编辑
  1. @sort 1.txt|uniq -d
  2. @pause
复制代码
回复 3# pcl_test

签名的最后三个字耐人寻味
发表于 2015-8-14 15:57:31 | 显示全部楼层
  1. for /f "delims=" %%i in (1.txt) do findstr /c:"%%i" 2.txt 2>nul&&echo %%i>>2.txt
  2. pause
复制代码
发表于 2015-8-14 16:36:08 | 显示全部楼层
回复 4# bailong360


    全是 ID,pcl 的后宫都在这了
发表于 2015-8-14 16:37:51 | 显示全部楼层
  1. gawk "a[$0]++{b[$0]++}END{for(i in b)print $0}" 1.txt
复制代码
发表于 2015-8-14 17:00:51 | 显示全部楼层
回复 7# CrLf
  1. gawk "{a[$0]++}END{for(i in a)if(a[i]>1)print i}" 1.txt
复制代码
一个数组就够啦

评分

参与人数 1技术 +1 收起 理由
CrLf + 1

查看全部评分

发表于 2015-8-14 17:01:31 | 显示全部楼层
回复 2# flyinnet9


    你可能没有理解楼主的问题
发表于 2015-8-14 17:03:10 | 显示全部楼层
如果77795出现3次的话,楼主希望得到什么结果呢?

77795
这样?

77795
77795
还是这样?
发表于 2015-8-14 17:52:06 | 显示全部楼层
回复 7# CrLf
  1. gawk "a[$0]++" 1.txt
复制代码
一个自增就够啦
发表于 2015-8-14 17:55:46 | 显示全部楼层
回复 11# bailong360


    嗯,那要看楼主怎么回答 10 楼的问题了
 楼主| 发表于 2015-8-14 22:55:12 | 显示全部楼层
回复 10# DAIC


    要第二种的,重复几个就列出来几个。
 楼主| 发表于 2015-8-14 23:06:15 | 显示全部楼层
谢谢大家帮忙,我自己不知道白了多少根头发也没能实现,你们一条命令就实现了,虽然后面几种写法我现在一个也看不懂,但还是要谢谢你们,我会把他收藏起来慢慢研究。
 楼主| 发表于 2015-8-14 23:21:19 | 显示全部楼层
pcl_test 发表于 2015-8-14 15:10



    谢谢你的代码,我加进去就能用了。但是你的代码我还是看不明白,
“ if defined #%%a echo;%%a” 这句的意思是不是如果%%a不为空就echo出来,
“set #%%a=def” 这句就不明白什么意思,估计很关键,我一注释掉就不行。
方便的话能不能帮忙解释下,谢谢!
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|批处理之家 ( 渝ICP备10000708号 )

GMT+8, 2026-3-18 18:36 , Processed in 0.022364 second(s), 8 queries , File On.

Powered by Discuz! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表