与另一个文件相比,如何替换文件中的列值?
我有两个文件测试1.csv和测试2.csv;我需要更换该empdep
列测试1.csv如果它的值为“符号*”。第二个文件测试2.csv具有替换该值所需的值“符号*”。
注意:我正在使用ksh
和测试1.csv大约有 2,048,576 行测试2.csv有 10000 行。
测试1.csv
empname,place,empdep
aaaa,city1,001
bbbb,city2,sign-1
dddd,city1,005
ffff,city5,sign-2
hhhh,city7,sign-1
测试2.csv
empname,new
aaaa,001
bbbb,002
cccc,003
dddd,005
eeee,006
ffff,007
gggg,008
hhhh,009
预期结果:
empname,place,empdep
aaaa,city1,001
bbbb,city2,002
dddd,city1,005
ffff,city5,007
hhhh,city7,009
答案1
和awk
:
awk '
BEGIN{ FS=OFS="," } # set input/output field separator to `,`
NR==FNR{ # if this is the first file `test2.csv`
a[$1]=$2 # store field2 in array `a` using field1 as index
next # continue with next line
}
$3 ~ /^sign/{ # if field3 of `test1.csv` begins with `sign`
$3=a[$1] # replace the field with array value (index of field1)
}
1 # print the line
' test2.csv test1.csv
答案2
这是一种简单的方法:
for i in $(cat text1.csv)
do
name=$(echo $i | cut -d',' -f1)
empdep=$(echo $i | cut -d',' -f3)
newvalue=$(grep $name text2.csv | cut -d',' -f2)
if [[ $empdep = sign* ]]
then
sed -n "s/^$name,\(.*\),.*/$name,\1,$newvalue/pg" text1.csv
else
echo $i
fi
done
答案3
使用ksh
和sed
.用于sed
解析测试2.csv并填充一个关联数组 ${new[@]}
。然后循环遍历测试1.csv并使用模式替换打印所需的输出:
typeset -A new $(sed -n '2,${s/^/new[/;s/,/]=/p}' test2.csv)
while IFS=, read a b c; do echo $a,$b,${c/#sign*/${new[$a]}}; done < test1.csv
输出:
empname,place,empdep
aaaa,city1,001
bbbb,city2,002
dddd,city1,005
ffff,city5,007
hhhh,city7,009
注意:在本例中,输入文件没有引号,没有引号的代码在视觉上更简单。如果任一输入文件包含(或可能包含)空格,则上述变量必须被引用。
答案4
csv-merge -N t1 -p test1.csv -N t2 -p test2.csv |
csv-sqlite -T 'select t1.empname, t1.place, case when t1.empdep like "sign%" then t2.new else t1.empdep end as empdep
from t1 left join t2 on t1.empname = t2.empname'
csv-merge 和 csv-sqlite 来自https://github.com/mslusarz/csv-nix-tools