Python：Unicode文字列を受け入れるStringIO.writelinesを取得するには？

Question

それは£ '文字が含まれているように私には、以下の「a.desc」に格納されている文字列の

UnicodeEncodeError: 'ascii' codec can't encode character u'\xa3' in position 34: ordinal not in range(128) 

を取得しています。これは基本的なGoogle App Engineのデータストアにユニコード文字列として格納されているので問題ありません。 cStringIO.StringIO.writelines機能は一見のASCII形式でエンコードしようと試みている：

result.writelines(['blahblah',a.desc,'blahblahblah']) 

私はそれが正しい言い回しだ場合、それはUnicodeとしてエンコードを扱うように指示するにはどうすればよいですか？

アプリエンジンは、Python 2.5

Answer 1

StringIO documentation上で実行される：

たStringIOモジュールによって実装メモリ・ファイルとは異なり、[cStringIO]によって提供されるものは、として符号化することができないUnicode文字列を受け付けることができませんプレーンなASCII文字列。

可能であれば、cStringIOの代わりにStringIOを使用してください。

Answer 2

codecs.StreamReaderWriterオブジェクトにStringIOオブジェクトをラップして、ユニコードを自動的にエンコードおよびデコードすることができます。このよう

：

import cStringIO, codecs 
buffer = cStringIO.StringIO() 
codecinfo = codecs.lookup("utf8") 
wrapper = codecs.StreamReaderWriter(buffer, 
     codecinfo.streamreader, codecinfo.streamwriter) 

wrapper.writelines([u"list of", u"unicode strings"]) 

bufferは、UTF-8でエンコードされたバイトで充填します。

私が正しくあなたのケースを理解していれば、あなただけ記述する必要がありますので、あなたも行うことができます：

import cStringIO, codecs 
buffer = cStringIO.StringIO() 
wrapper = codecs.getwriter("utf8")(buffer) 

Answer 3

はまた、手動たStringIO

に追加する前に、UTF-8など、あなたの文字列をエンコードすることができます

for val in rows: 
    if isinstance(val, unicode): 
     val = val.encode('utf-8') 
result.writelines(rows) 

Answer 4

Python 2.6でioモジュールが導入されました。io.StringIO()「ユニコードテキスト用のメモリ内ストリーム」の使用を検討する必要があります。

古いPythonバージョンでは、これは最適化されていません（純粋なPython）。これ以降のバージョンでは、これは（高速な）Cコードに最適化されています。