UNIQ +ファイル

からuniqの文字列を取得していない私が望むすべては、彼らがUNIQ +ファイル

に等しい場合は、ファイルからNODE_NAME文字列を取得し、uniqの文字列を取得するためにuniqのを実行することで、次のに見てみたが、次の例にしてください私は2つの等しい行（node_name moon1）を持っています

なぜuniqコマンドを1行に減らさないのですか？、私は本当になぜこれを理解していないのですか？

sed s'/=/ /'g file| awk -v WORD=node_name '$2 == WORD {print $0}' | awk '{print $2" "$3}' | sort | uniq 

node_name moon1 
node_name moon1

ファイル：あなたがあなたのファイルの浮遊文字を持っているよう

. 
    . 

/home/home1/home2/config1/COMPANY/my.config  node_name=moon1 
/home/home1/home2/config1/MEAS2XML/my.config.tmp node_name=moon1 

    . 
    .

出典

2010-11-22 jon

作品罰金 'X [$ 0] ++！'：http://www.ideone.com/ HYkDH – codaddict

ファイルに1000行以上ある場合2行は大きなファイルの一部です – jon

私はmoon1の後に^ Mを見つけました。あなたのシステムにdos2unixコマンドがある場合は、この – jon

同じ行をマージに失敗uniqのための2つの主な原因があります。

ラインが本当に同一ではない - 余分な末尾の空白は、ここでいつもの容疑者です。 awkコマンドはこの例ではそれらをフィルタリングする必要がありますが、それでも確認できます。混在したラインターミネータも考えられる原因です。
行が隣接していない - ロケール設定が間違っていると、行をソートできず、行が正しくソートされません。 I にがあります。ASCII以外のテキストを含む奇妙なケースがあり、同じ行が次々に終わることはありません。 uniqコマンドの前にsortの出力を確認してください。あなたのロケール設定は何ですか？

ここで、 'sort -u'は 'sort |ユニーク '。

EDIT：

は、これらの問題のいずれかまたは両方のように思える：

あなたが混在しているラインターミネータ。 LF（\ n、Unixスタイルのターミネータ）とCR/LF（\ r \ n、DOSスタイルのターミネータ）で結ばれた行がある場合、uniqはそれらが異なっていても異なる行として扱います。
CR/LF DOSスタイルの行終端文字とともに、行の一部に後続する空白。 CR（キャリッジリターン、 '\ r'）文字は、awkを含むほとんどの（すべての）UNIXユーティリティによって空白文字とみなされません。あなたの行のいずれかに後ろに空白がない場合、CRは最後のフィールドの一部とみなされ、印刷されます。一方、最後のフィールドとCRとの間に空白がある行では、awkによって出力された最後のフィールドにはCRは含まれません。
- DOS2UNIXが好ましい方法
- 通りである：それは同様に空白を末尾フィルタリングするために一般的にお勧めしますが、この場合には、両方の問題を解決するLFにCR/LFラインターミネータを変更
別の方法として、ファイルをフィルタリングするsed 's|\r$||'

出典

2010-11-22 17:02:32 thkala

ありがとう国はビジネスに来るでしょう - :) – jon