☰

如何将多个文件中的数据聚合到一个文件中？

tag-icon • tag-icon bash text-processing
如何将多个文件中的数据聚合到一个文件中？

我有大约 100 个用户的目录结构。

users
- user1
  - info.txt
- user2
  - info.txt
- user3
  - info.txt
...

在文件内部info.txt，内容如下所示。

5 some_other_info

基本上，它只是一行，包含一个数字、一个空格，然后是一些文本（其中可能有空格）。

我想创建一个result.txt如下所示的文件。

user1 5
user2 6
user3 7
...

其中user1, user2, user3, ... 与目录名称匹配，数字与各自info.txt文件中的内容匹配。

您可以假设用户目录的名称中没有空格。

有什么好的方法可以做到这一点？

答案1

awk '{split(FILENAME,u,"/"); print u[2], $1}' users/*/info.txt

答案2

您可以通过一个简单的for循环来完成此操作。

{
  for userd in users/*/; do 
    if [[ -e "$userd/info.txt" ]]; then
      read num _ < "$userd/info.txt"
      printf '%s %s\n' "$user" "$num"
    fi
  done
} > out.txt

答案3

斯蒂芬的答案的一个变体：

$ cd users && \
      find -mindepth 2 -maxdepth 2 -type f -name info.txt  \
    | xargs awk '{ split(FILENAME,u,"/"); print u[2], $1 }'

(GNU) 的使用find可以xargs防止用户数量超过程序参数的最大数量（取决于系统）。

（xargs 将正确分割输入并在必要时重复调用 awk）

答案4

for f in users/*/info.txt; do
    set -- $(< $f)
    num=$1

    # choose one of:
    user=$(basename $(dirname $f))
    # or
    dir=${f%/*}; user=${dir##*/}

    echo $user $num
done

相关内容