Pythonのリストに一意の値だけを追加してください

Question

私はPythonを学ぼうとしています。

単語が既にリストに含まれているかどうかを確認してください。 という単語がリストにない場合は、リストに追加します。

これは私が持っているものです。

fhand = open('romeo.txt') 
output = [] 

for line in fhand: 
    words = line.split() 
    for word in words: 
     if word is not output: 
      output.append(word) 

print sorted(output) 

これは私が得たものです。

['Arise', 'But', 'It', 'Juliet', 'Who', 'already', 'and', 'and', 'and', 'breaks', 'east', 'envious', 'fair', 'grief', 'is', 'is', 'is', 'kill', 'light', 'moon', 'pale', 'sick', 'soft', 'sun', 'sun', 'the', 'the', 'the', 'through', 'what', 'window', 'with', 'yonder']

注重複（および、ある、太陽、など）。

ユニークな値はどのようにして取得できますか？

Answer 1

これを使用します。ここで

if word not in output: 
     output.append(word) 

Answer 2

代わりのis notオペレータは、アイテムがリストにあるかどうかを確認するためにnot in演算子を使用する必要があります。setが多く効率的で使用して、BTW

if word not in output: 

（Time complexityを参照してください）：

with open('romeo.txt') as fhand: 
    output = set() 
    for line in fhand: 
     words = line.split() 
     output.update(words) 

更新setは元の順序を保持しません。順序を保持するには、補助データ構造としてこのセットを使用します。

output = [] 
seen = set() 
with open('romeo.txt') as fhand: 
    for line in fhand: 
     words = line.split() 
     for word in words: 
      if word not in seen: # faster than `word not in output` 
       seen.add(word) 
       output.append(word) 

Answer 3

は順序を維持しながら削除する重複のthis implementationを使用して、「ワンライナー」です：

def unique(seq): 
    seen = set() 
    seen_add = seen.add 
    return [x for x in seq if not (x in seen or seen_add(x))] 

output = unique([word for line in fhand for word in line.split()]) 

最後の行は、単語のリストにfhandを平らにして、結果のリストにunique()を呼び出します。