☰

如何组合两个 awk 命令

tag-icon • tag-icon linux bash shell awk sed
如何组合两个 awk 命令

在我的属性文件中，我确实有这样的数据

domainurl=https://example.com
abc.host=10.5.39.23#10.15.1.5
locator.port=1013#1013
db.cassandra.contactPoints=10.15.13.28,10.35.73.16,10.35.93.4

我确实有以下两个命令，它们单独工作得很好，但是当我尝试组合这些命令时，我没有得到预期的输出。这是命令

grep -P '((?<=[^0-9.]|^)[1-9][0-9]{0,2}(\.([0-9]{0,3})){3}(?=[^0-9.]|$)|(http|ftp|https|ftps|sftp)://([\w_-]+(?:(?:\.[\w_-]+)+))([\w.,@?^=%&:/+#-]*[\w@?^=%&/+#-])?|\.port|\.host|contact-points|\.uri|\.endpoint)'$file | grep '^[^#]'
| awk '/http:\/\//  {print $2,80} 
       /https:\/\// {print $2,443} 
       /Points/     {print $2,"NA"} 
       /host/       {h=$2} 
       /port/       {print h,$2; h=""}'

这是 Excel 工作表中逗号分隔值的另一个命令

awk -F"," '{for(i=1;i<=NF;i++){if(i%NF==0){ORS="\n"} {if($i ~ /^\"/ || $i ~ /\"$/) {a=a OFS $i;j++;{if(j%2==0){sub(/^[[:space:]]/,X,a); print a;j=0;a=""}}} else {print $i}}}}'

当我结合起来时，这是最终的脚本不是按预期工作

grep -P '((?<=[^0-9.]|^)[1-9][0-9]{0,2}(\.([0-9]{0,3})){3}(?=[^0-9.]|$)|(http|ftp|https|ftps|sftp)://([\w_-]+(?:(?:\.[\w_-]+)+))([\w.,@?^=%&:/+#-]*[\w@?^=%&/+#-])?|\.port|\.host|contact-points|\.uri|\.endpoint)' abc.properties | grep '^[^#]' | awk '{split($0,a,"="); print a[1],a[2]}' | awk -F"," '{for(i=1;i<=NF;i++){if(i%NF==0){ORS="\n"} {if($i ~ /^\"/ || $i ~ /\"$/) {a=a OFS $i;j++;{if(j%2==0){sub(/^[[:space:]]/,X,a); print a;j=0;a=""}}} else {print $i}}}}' | awk '/http:\/\//  {print $2,80} 
       /https:\/\// {print $2,443} 
       /Points/     {print $2,"NA"} 
       /host/       {h=$2} 
       /port/       {print h,$2; h=""}' | column -t

实际产量

http://example.com                                                                   80
 10.15.13.28                                                                         NA
10.5.39.23#10.15.1.5                                                              1013#1013

预期产出

http://example.com                                                                     80
 10.15.13.28                                                                           NA
 10.35.73.16                                                                           NA
  10.35.93.4                                                                            NA
 10.5.39.23                                                                           1013
 10.15.1.5                                                                            1013

注意：逗号（，）分隔和哈希（＃）分隔需要出现在csv文件的下一列中

预先感谢您的回答。

答案1

$  grep -oE "\b([0-9]{1,3}\.){3}[0-9]{1,3}\b|https.*" /tmp/test.txt
https://example.com
10.5.39.23
10.15.1.5
10.15.13.28
10.35.73.16
10.35.93.4

$ cat /tmp/test.txt
domainurl=https://example.com
abc.host=10.5.39.23#10.15.1.5
locator.port=1013#1013
db.cassandra.contactPoints=10.15.13.28,10.35.73.16,10.35.93.4

答案2

我不会尝试解构该代码来弄清楚它在做什么，但如果您愿意解释它，我会看看是否可以修改我的答案。

然而，调试的方法是在每个阶段检查管道的输出，以确保其符合您的预期。

例如，您似乎有a | b | c和x | y，并尝试将它们组合为a | b | x | y | c。或者其他的东西。

因此，要找出什么不起作用，请检查a.然后a | b。进而a | b | x。 ETC。

答案3

感谢您的建议和答案，我已经弄清楚如何使用“|”进行组合符号，这是获得预期结果的最终代码。

grep -P '((?<=[^0-9.]|^)[1-9][0-9]{0,2}(\.([0-9]{0,3})){3}(?=[^0-9.]|$)|(http|ftp|https|ftps|sftp)://([\w_-]+(?:(?:\.[\w_-]+)+))([\w.,@?^=%&:/+#-]*[\w@?^=%&/+#-])?|\.port|\.host|contact-points|\.uri|\.endpoint)' $file | grep '^[^#]'| awk '{split($0,a,"="); print a[1],a[2]}'|sed 's/^\|#/,/g'| awk '/http:\/\//  {print $2,80} 
       /https:\/\// {print $2,443} 
       /Points/     {print $2,"9042"} 
       /host/       {h=$2} 
       /port/       {print h,$2; h=""}'|awk -F'[, ]' '{for(i=1;i<NF;i++){print $i,$NF}}'|column -t

相关内容