品詞タグを構築する（POS Tagger）

Question

JavaでPOSタグを構築する必要があり、開始方法を知る必要があります。 POSタガーがどのように機能するかを示すコード例やその他のリソースはありますか？

Answer 1

既存のタグ付けの実装を調べることができます。

（クリスティーナToutanovaによる）は、Javaでのスタンフォード大学POSタガーに例えば参照してください、それはGNU一般公衆利用許諾契約書（後v2または）の下で提供され、ソースコードがよく書かれており、明確に文書化されています

http://nlp.stanford.edu/software/tagger.shtml

タギングについて読むこと

良い本です： 音声・言語処理（第2版）ダニエル・ジューラフスキーによって、ジェームズ・H.マーティン

Answer 2

Apache OpenNLPを試してみてください。これには、POS Taggerツールが含まれています。すぐに使える英語モデルはhereからダウンロードできます。

ドキュメントには、Javaアプリケーションからの使用方法の詳細が記載されています。基本的には次が必要です

InputStream modelIn = null; 

try { 
    modelIn = new FileInputStream("en-pos-maxent.bin"); 
    POSModel model = new POSModel(modelIn); 
} 
catch (IOException e) { 
    // Model loading failed, handle the error 
    e.printStackTrace(); 
} 
finally { 
    if (modelIn != null) { 
    try { 
     modelIn.close(); 
    } 
    catch (IOException e) { 
    } 
    } 
} 

は、POSタガーをインスタンス化

ロードPOSモデル

POSTaggerME tagger = new POSTaggerME(model); 

実行し、それ

String sent[] = new String[]{"Most", "large", "cities", "in", "the", "US", "had", "morning", "and", "afternoon", "newspapers", "."};   
String tags[] = tagger.tag(sent); 

POSタガーではトークン化された文が必要です。 Apache OpenNLPは、これらのタスクを支援するツールとモデルも提供しています。

独自のモデルを訓練する必要がある場合は、documentationを参照してください。