找回密码
 注册
搜索
[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
查看: 25998|回复: 4

[文本处理] 批处理如何删除前两段相同的重复ip地址只保留最先/首次/第一个出现的那个ip

[复制链接]
发表于 2016-9-18 17:51:53 | 显示全部楼层 |阅读模式
本帖最后由 pcl_test 于 2016-9-19 12:57 编辑

AB段重复数据整行删除,这个应该怎么做。。。
原数据
120.25.105.45
180.121.255.79
113.15.188.220
120.25.11.22
222.45.233.2
182.90.37.138
119.162.70.188
182.90.22.11
125.226.224.245
112.123.9.184
125.226.11.22
112.123.138.84
处理后
120.25.105.45
180.121.255.79
113.15.188.220
222.45.233.2
182.90.37.138
119.162.70.188
125.226.224.245
112.123.9.184

评分

参与人数 1PB -3 收起 理由
pcl_test -3 勿发笼统的标题

查看全部评分

发表于 2016-9-18 19:05:38 | 显示全部楼层
  1. @echo off
  2. for /f "tokens=1,2* delims=." %%i in ('more +8 "%~f0"') do (
  3.         if not defined #%%i%%j echo;%%i.%%j.%%k
  4.         set #%%i%%j=1
  5. )
  6. pause & exit /b
复制代码
发表于 2016-9-18 19:36:52 | 显示全部楼层
  1. @if (0)==(0) echo off
  2. cscript //nologo //e:jscript "%~f0" < 1.txt
  3. pause & exit
  4. @end

  5. var reg = /^(\d+\.\d+)\.\d+\.\d+$/mg;
  6. var s = WSH.StdIn.ReadAll(), map = [];
  7. while(arr=reg.exec(s)){if(!map[arr[1]]){map[arr[1]]=1; WSH.Echo(arr[0])}}
复制代码
发表于 2016-9-18 19:38:06 | 显示全部楼层
  1. @echo off
  2. PowerShell -c "type 1.txt | group {$_ -replace '\d+\.\d+$'} | %%{$_.Group[0]}"
  3. pause
复制代码
发表于 2016-9-18 19:38:57 | 显示全部楼层
  1. gawk -F"." "!a[$1"."$2]++" 1.txt
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|批处理之家 ( 渝ICP备10000708号 )

GMT+8, 2026-3-17 07:30 , Processed in 0.029985 second(s), 15 queries , File On.

Powered by Discuz! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表