[文本处理] 求助！！log文件中数据去重统计问题

低手进阶

请高手给予解答：
手中有一个日志文件，记载了大量的日志信息，某一条日志格式如下：
*****01/Sep/2008:00:00:59 +0800] "GET /error_log/dll.htm&type=uninstall?dt=2008-08-31&ecs=3.8.8.21&*******&*****
我想要去重查找ecs=？的信息的个数。
比如包含ecs=3.8.8.21这个字符串的信息的条数。

terse

针对楼主的格式写一个  不通用

@echo off
for /f "tokens=10-13 delims==*& " %%a in (1.log) do set/a _%%a_%%b+=1&set/a _%%c_%%d+=1
for /f "tokens=1-3 delims=_=" %%a in ('set _') do echo %%a=%%b  %%c 条
pause>nul
复制代码

pusofalse

我明白原因了。。。试下这样！

@echo off&setlocal enabledelayedexpansion
for /f "tokens=2 delims={}" %%a in ('findstr/i "\<uid\>" l.log') do (
	set "var=%%a"
	set/a _!var:-=#!+=1
)
for /f "tokens=1,* delims=_=" %%a in ('set _') do (
	set var=%%a
	echo uid={!var:#=-!} %%b条
)
pause>nul
复制代码

低手进阶

版主大人，经过我反反复复的试验，还是不能执行第二个代码（uid的那个），就是显示

无效数字。数字常数只能是十进制(17)，十六位进制(0x11)或
八进制(021)。
环境变量 _ 没有定义

晕死了

低手进阶

啊！哦。。。。。
连代码都。。。我

pusofalse

我这里测试没问题。

低手进阶

晕了，没招了。改不明白

低手进阶

无效数字。数字常数只能是十进制(17)，十六位进制(0x11)或
八进制(021)。
。。。。。。
无效数字。数字常数只能是十进制(17)，十六位进制(0x11)或
八进制(021)。
环境变量 _ 没有定义
十分感谢版主回复，原来不只是改tokens啊

pusofalse

@echo off&setlocal enabledelayedexpansion
for /f "tokens=2 delims={}" %%a in ('findstr/i "\<uid\>" l.log') do set "var=%%a"&set/a _!var!+=1
for /f "tokens=1,* delims=_=" %%a in ('set _') do echo uid={%%a} %%b条
pause>nul
复制代码

低手进阶

汗，我修改的错误百出！我刚刚才接触批处理，有点。。。。
谢谢指教

Batcher

你应该先自己试试修改一下tokens行不行，不行再提问。

低手进阶

再次请教版主，我本想修改你给的代码再执行类似的去重，"uid=*"输入到一个txt文件,可是频频出错！
212.0.5.45 - - [01/Sep/2008:00:00:36 +0800] "GET /error_log/dll.htm&type=uninstall?dt=2003-10-17&ecs=3.8.8.21&*=3.8.8.15&*=3.8.8.21&*=3.8.8.15&meedb.dll=3.8.8.15&MediaLib.dll=3.8.8.15&*=3.8.8.1&splayers.dll=3.8.8.15&rndrmgr.dll=3.8.8.15&*=3.8.8.15&video.dll=3.8.8.15&subdecoder.dll=3.8.6.30&gifparser.dll=3.8.5.18&spfa.dll=3.8.8.1&uninst.exe=3.8.8.15&pid=&uid={5B70HA11-15W0-4CE6-B167-60884Y4AA80B}&aid=429 HTTP/1.1" 404 314 "-" "*"
我是不是修改一下tokens就可以了？

低手进阶

谢谢版主和巡查！：D

pusofalse

@echo off&setlocal enabledelayedexpansion
for /f "tokens=6 delims==&" %%a in ('findstr "\<ecs\>" l.log') do set "var=%%a"&set/a _!var!+=1
for /f "tokens=1,2 delims=_=" %%a in ('set _') do echo ecs=%%a %%b条
pause>nul
复制代码

Batcher

@echo off
for /f "tokens=3 delims=&" %%a in ('findstr /i "ecs=" "a.log"') do (
  for /f "tokens=2 delims==" %%b in ("%%a") do (
    if not defined ecs%%b (
	  set ecs%%b=1
	) else (
	  set /a ecs%%b+=1
	)
  )
)
for /f "tokens=1-2 delims==" %%a in ('set ecs') do (
  echo %%a %%b条
)
复制代码