Luaでマルチバイト文字列を分割する

Question

私はLuaにマルチバイト文字列を持っています。

​​

文字列を文字列テーブルに分割する方法を教えてください。

英語のテキストでは、このコードを使用できます。しかし、これはマルチバイトでは機能しません。スタートのために

local s = "foo bar 123" 
local words = {} 
for word in s:gmatch("%w+") do 
    table.insert(words, word) 
end 

Answer 1

。これからSO How to write a unicode symbol in luaを問う、ライブラリslnunicode

にRBerteigの答えの見所にはSO他の人が指摘したように、それは伝えるのは難しいですIs there any lua library that converts a string to bytes using utf8 encoding

Answer 2

を問うこの中で言及あなたが何をしたいのですか：あなたはスペースで分割することで十分ではない場合、非ASCII文字のために分割しますか？

あなただけの非ASCII文字のために、個々の文字の間で分割したい場合は、次のようなものがあればよい：

s = "oink barf 頑張っています" 
for word in s:gmatch("[\33-\127\192-\255]+[\128-\191]*") do 
    print (word) 
end 

は生成します。

oink 
barf 
頑 
張 
っ 
て 
い 
ま 
す 

ここにトリックはそのUTF-です図8に示すように、マルチバイト文字はそれぞれ、先頭の2ビットが11に等しい「先頭バイト」（したがって、—に\192 があります。 aは小数）、その後に0またはそれ以上の「後続バイト」があり、上位2ビットは10（\128 – \191、Luaでは）です。

Answer 3

それはLuaの5.3では、UTF-8だ場合、あなたはこのようなutf8 libraryを使用することができます。

local s = "あいうえお" 
local words = {} 
for _, c in utf8.codes(s) do 
    table.insert(words, utf8.char(c)) 
end