awk配列を使用して別のフィールドに基づいて重複列を削除しますか？

Question

私は別のフィールドに基づいて重複した行のセットを排除しようとしています。

cat file.txt

1 345 a blue 
1 345 b blue 
3 452 c blue 
3 342 d green 
3 342 e green 
1 345 f green 

Iフィールド1及び2に基づいて、重複行を削除したいが、別々に各色のであろう。所望の出力：

for i in $(awk '{ print $4 }' file.txt | sort -u); do 
    grep -w ${i} | 
    awk '!x[$1,$2]++' >> output.txt 
done 

しかし、これは遅いです：

1 345 a blue 
3 452 c blue 
3 342 d green 
1 345 f green 

私は色以上for loopその繰り返し処理を使用して、この出力を達成することができます。ループを使用せずにこの出力を得る方法はありますか？

ありがとうございます。

Answer 1

は、少なくとも例えば、それは同様に簡単です：あなたはそれを否定することができ、

$ awk 'arr[$1,$2,$4]++{next} 1' file 
1 345 a blue 
3 452 c blue 
3 342 d green 
1 345 f green 

または：

$ awk '!arr[$1,$2,$4]++' file 

また、速くなる可能性があると同じのためにGNUの並べ替えを使用することができます。

$ sort -k4,4 -k2,2 -k1,1 -u file 

Answer 2

@Rish：これも、試してみてください：

awk '!A[$1,$2,$4]++' Input_file