テキストファイルやCSVファイルに書き出す時に文字コードをShift-JISに指定して書き出すとエラーになる場合があります。よく見るのが、－や＆nbsp;を変換した時に出るエラーで\uff0dや\xa0と表示されます。

実際にエラーを出してみます。以下のプログラムを実行するとエラーが表示されます。

text = 'よく見るのが、－や＆nbsp;を変換した時に出るエラーで\uff0dや\xa0と表示されます。'
text.encode('shift-jis')

Traceback (most recent call last):
  File "<input>", line 1, in <module>
UnicodeEncodeError: 'shift_jis' codec can't encode character '\uff0d' in position 7: illegal multibyte sequence

‘\uff0d’ in position 7とあるので\uff0dが変換できてないということが分かります。

文字コードを変換する際にエラーとなる文字を変更します。

replaceを使って\uff0dを-に変更します。

text = text.replace('\uff0d', '-')
text.encode('shift-jis')

Traceback (most recent call last):
  File "<input>", line 1, in <module>
UnicodeEncodeError: 'shift_jis' codec can't encode character '\xa0' in position 30: illegal multibyte sequence

今度は\xa0が変換できずにエラーになっているので、\xa0を削除します。

text = text.replace('\xa0', '')
text.encode('shift-jis')

無事にShift-JISに変換できました。

b'\x82\xe6\x82\xad\x8c\xa9\x82\xe9\x82\xcc\x82\xaa\x81A-\x82\xe2\x81\x95nbsp;\x82\xf0\x95\xcf\x8a\xb7\x82\xb5\x82\xbd\x8e\x9e\x82\xc9\x8fo\x82\xe9\x83G\x83\x89\x81[\x82\xc5-\x82\xe2\x82\xc6\x95\\\x8e\xa6\x82\xb3\x82\xea\x82\xdc\x82\xb7\x81B'

replaceを続けて書くと変換したい文字を複数変換できます。

text = text.replace('\uff0d', '-').replace('\xa0', '')

---

株式会社ファントムへのお問い合わせ

当ブログは群馬県でPythonを使ったAIやシステムを開発している株式会社ファントムが運営しています。