使用 AWK 命令

Question 1

Awk 脚本 - 未传递部分分隔符+注释

此变体未传递[begin ...]和[end ...]分隔符。

#!/usr/bin/awk -f

BEGIN   {
    insect=0    # we are out of a section
    }

/^\[begin [a-z0-9_]+\]/ {
    insect=1    # section opening
    next
    }

insect == 1 {
    if($0 ~ /^header=7075\|/)   {
        insect=2    # we are inside the right section
        }
    else    {
        insect=0    # we are in a different section
        next
        }
    }

/^\[end [a-z0-9_]+\]/ && (insect == 2 || insect == 1)   {
    exit 0      # end of the right section -> stop processing
    }

insect == 2 {
    print       # we are inside the right section -> pass all lines
    }

Awk 脚本-传递节分隔符+收缩代码

#!/usr/bin/awk -f
BEGIN {ins=0}
/^\[begin [a-z0-9_]+\]/ {beg=$0; getline; if($0 ~ /^header=7075\|/) {print beg; ins=1}}
/^\[end [a-z0-9_]+\]/ && ins {print; exit 0}
ins

作为一行:) 我不明白为什么需要一行代码，但是它在这里：

awk 'BEGIN {ins=0} /^\[begin [a-z0-9_]+\]/ {beg=$0; getline; if($0 ~ /^header=7075\|/) {print beg; ins=1}} /^\[end [a-z0-9_]+\]/ && ins {print; exit 0} ins'

本答案中的程序的优点是它们像 Unix 实用程序中一样逐行处理输入。这使得程序能够处理非常多的日志部分而不需要极高的内存需求，并允许程序与管道中的其他程序并行运行（在多核 CPU 上）。

Answer

Awk 脚本 - 未传递部分分隔符+注释

此变体未传递[begin ...]和[end ...]分隔符。

#!/usr/bin/awk -f

BEGIN   {
    insect=0    # we are out of a section
    }

/^\[begin [a-z0-9_]+\]/ {
    insect=1    # section opening
    next
    }

insect == 1 {
    if($0 ~ /^header=7075\|/)   {
        insect=2    # we are inside the right section
        }
    else    {
        insect=0    # we are in a different section
        next
        }
    }

/^\[end [a-z0-9_]+\]/ && (insect == 2 || insect == 1)   {
    exit 0      # end of the right section -> stop processing
    }

insect == 2 {
    print       # we are inside the right section -> pass all lines
    }

Awk 脚本-传递节分隔符+收缩代码

#!/usr/bin/awk -f
BEGIN {ins=0}
/^\[begin [a-z0-9_]+\]/ {beg=$0; getline; if($0 ~ /^header=7075\|/) {print beg; ins=1}}
/^\[end [a-z0-9_]+\]/ && ins {print; exit 0}
ins

作为一行:) 我不明白为什么需要一行代码，但是它在这里：

awk 'BEGIN {ins=0} /^\[begin [a-z0-9_]+\]/ {beg=$0; getline; if($0 ~ /^header=7075\|/) {print beg; ins=1}} /^\[end [a-z0-9_]+\]/ && ins {print; exit 0} ins'

本答案中的程序的优点是它们像 Unix 实用程序中一样逐行处理输入。这使得程序能够处理非常多的日志部分而不需要极高的内存需求，并允许程序与管道中的其他程序并行运行（在多核 CPU 上）。

Question 2

Bash 脚本

#!/bin/bash

section=""
insect=0
while read line
    do if [ "$insect" -eq "1" ] || [ "x$(echo -e $line | grep '\[begin')" != "x" ]; then
        insect=1
        section="${section}${line}\n"
    else
        continue
    fi
    if [ "x$(echo -e $line | grep '\[end')" != "x" ]; then
        if [ "x$(echo -e $section | grep 'header=7075')" != "x" ]; then
            echo -e "$section"
        fi
        section=""
        insect=0
    fi
done < OutpdirImpressions.log

Python 脚本

（性能比 bash 更好）

#!/usr/bin/env python

section = ''
insect = False
with open('OutpdirImpressions.log', 'r') as f:
    while True:
        line = f.readline()
        if line == '':
            break
        if insect or line.startswith('[begin'):
            insect = True
            section += line
        else:
            continue
        if line.startswith('[end'):
            if 'header=7075' in section:
                print(section)
            section = ''
            insect = False

Answer

Bash 脚本

#!/bin/bash

section=""
insect=0
while read line
    do if [ "$insect" -eq "1" ] || [ "x$(echo -e $line | grep '\[begin')" != "x" ]; then
        insect=1
        section="${section}${line}\n"
    else
        continue
    fi
    if [ "x$(echo -e $line | grep '\[end')" != "x" ]; then
        if [ "x$(echo -e $section | grep 'header=7075')" != "x" ]; then
            echo -e "$section"
        fi
        section=""
        insect=0
    fi
done < OutpdirImpressions.log

Python 脚本

（性能比 bash 更好）

#!/usr/bin/env python

section = ''
insect = False
with open('OutpdirImpressions.log', 'r') as f:
    while True:
        line = f.readline()
        if line == '':
            break
        if insect or line.startswith('[begin'):
            insect = True
            section += line
        else:
            continue
        if line.startswith('[end'):
            if 'header=7075' in section:
                print(section)
            section = ''
            insect = False

Question 3

我不确定这是否完全回答了你的问题，即你是否对“无论什么有效”感兴趣，或者更关心具体awk的答案，但在我看来你想要一个一行代码（并不是说这些例子非常实用）：

python3 -c "import re; print(*[rec for rec in re.findall('(?ms)\[begin.*?(?=\[begin|\Z)', open('OutpdirImpressions.log.2013-09-02').read()) if 'header=7075' in rec])"

对于 Python 2.6 或 2.7（据我所知没有'star'解包）：

python -c "import re; print([rec for rec in re.findall('(?ms)\[begin.*?(?=\[begin|\Z)', open('OutpdirImpressions.log.2013-09-02').read()) if 'header=7075' in rec][0])"

Answer

我不确定这是否完全回答了你的问题，即你是否对“无论什么有效”感兴趣，或者更关心具体awk的答案，但在我看来你想要一个一行代码（并不是说这些例子非常实用）：

python3 -c "import re; print(*[rec for rec in re.findall('(?ms)\[begin.*?(?=\[begin|\Z)', open('OutpdirImpressions.log.2013-09-02').read()) if 'header=7075' in rec])"

对于 Python 2.6 或 2.7（据我所知没有'star'解包）：

python -c "import re; print([rec for rec in re.findall('(?ms)\[begin.*?(?=\[begin|\Z)', open('OutpdirImpressions.log.2013-09-02').read()) if 'header=7075' in rec][0])"

Question 4

找到了相同的一个解决方案： -

awk '$1=="[end"{p=0}/^header=7075/{p=1}p' file

或者sed '/^\[end/G' input.txt | awk -vRS='' '/header=7075/'

两台服务器的目的

Answer

找到了相同的一个解决方案： -

awk '$1=="[end"{p=0}/^header=7075/{p=1}p' file

或者sed '/^\[end/G' input.txt | awk -vRS='' '/header=7075/'

两台服务器的目的

使用 AWK 命令

答案1

Awk 脚本 - 未传递部分分隔符+注释

Awk 脚本-传递节分隔符+收缩代码

答案2

Bash 脚本

Python 脚本

答案3

答案4

相关内容