ファイルやテキストの文字コードを変換する方法｜UTF-8変換と文字化け対策

macOS（Homebrewを使用）

Shift-JISからUTF-8に変換して新しいファイルに保存

nkf -w input.txt > output.txt

元のファイルを上書きして変換

nkf -w --overwrite input.txt

主なオプション

-w : UTF-8に変換

-s : Shift-JISに変換

-e : EUC-JPに変換

--guess : 文字コードを自動判定

--overwrite : 元ファイルを上書き

大量ファイルの一括変換方法

# 現在のディレクトリ内の全txtファイルをUTF-8に一括変換 for file in *.txt; do nkf -w --overwrite "$file" echo "変換完了: $file" done

find . -name "*.csv" | while read file; do nkf -w --overwrite "$file" echo "変換完了: $file" done

nkfコマンドの詳しい使い方については、@IT「nkfコマンドで文字コード変換する方法」も参考になります。

PowerShell・Linuxコマンドでの変換例

PowerShellでの変換（Windows）：

# Shift-JISのファイルをUTF-8に変換 $content = Get-Content -Path "input.txt" -Encoding Default $content | Out-File -FilePath "output.txt" -Encoding UTF8

Get-ChildItem -Filter "*.txt" | ForEach-Object { $content = Get-Content -Path $_.FullName -Encoding Default $utf8NoBom = New-Object System.Text.UTF8Encoding $false [System.IO.File]::WriteAllLines($_.FullName, $content, $utf8NoBom) Write-Host "変換完了: $($_.Name)" }

Linuxでのiconvコマンドを使った変換：

# iconvでShift-JISからUTF-8に変換 iconv -f Shift_JIS -t UTF-8 input.txt > output.txt

for file in *.csv; do iconv -f Shift_JIS -t UTF-8 " "utf8_̲ " style="color: inherit;">file" > "utf8_ {file}" done

変換時の注意点

変換前の文字コード確認

文字コードを確認せずに変換を実行すると、二重変換で文字化けが悪化する場合があります。変換前に必ず元の文字コードを確認してください。

文字コードの確認方法は以下のとおりです。

• Windowsメモ帳：「名前を付けて保存」のダイアログで現在の文字コードを確認
• VSCode：ウィンドウ右下のステータスバーに表示
• Linuxコマンド：nkf --guess ファイル名またはfile -i ファイル名
• Pythonで確認：chardetライブラリを使用

# Pythonで文字コードを確認する import chardet

with open('input.txt', 'rb') as f: raw_data = f.read() result = chardet.detect(raw_data) print(f"文字コード: {result['encoding']}, 確率: {result['confidence']}")

BOM付き／BOMなしの違い

BOM（Byte Order Mark）はUTF-8ファイルの先頭に付く特殊なバイト列（EF BB BF）で、「このファイルはUTF-8です」という識別子として機能します。

ExcelのCSVはBOM付きUTF-8で保存することで、UTF-8の日本語が文字化けせずに開けるようになります。一方LinuxシステムやプログラムのソースコードはBOMなしが標準です。

変換後の文字化けチェック

変換後は必ず内容を確認してください。特殊な記号・半角カタカナ・機種依存文字（①②③などの丸囲み数字など）は変換時に失われたり別の文字に置き換わったりすることがあります。

文字コード変換の応用テクニック

自動スクリプトによる変換処理

Pythonを使えば文字コードの自動判定と変換を組み合わせた汎用スクリプトが作れます。

import chardet import os

# 元の文字コードを自動判定
with open(input_path, 'rb') as f:
    raw_data = f.read()
    detected = chardet.detect(raw_data)
    source_encoding = detected['encoding']
    confidence = detected['confidence']

print(f"検出した文字コード: {source_encoding} (確率: {confidence:.1%})")

if source_encoding is None:
    print("文字コードを判定できませんでした")
    return False

try:
    # 元の文字コードで読み込んで対象文字コードで書き出す
    with open(input_path, 'r', encoding=source_encoding, errors='replace') as f:
        content = f.read()

    with open(output_path, 'w', encoding=target_encoding) as f:
        f.write(content)

    print(f"変換完了: {source_encoding} → {target_encoding}")
    return True

except Exception as e:
    print(f"変換エラー: {e}")
    return False

batch_convert('./data/', 'utf-8')

CSVやExcelとの連携での文字コード統一

ExcelでUTF-8のCSVを文字化けなく扱う方法として、以下の2つのアプローチが実用的です。

方法1：BOM付きUTF-8でCSVを作成・保存する

import csv

with open('output.csv', 'w', encoding='utf-8-sig', newline='') as f: writer = csv.writer(f) writer.writerow(['名前', '年齢', '部署']) writer.writerow(['田中太郎', 30, '営業部']) writer.writerow(['山田花子', 25, '開発部'])

方法2：ExcelのデータインポートウィザードでUTF-8を指定する

• 手順1：Excelを開いて「データ」タブ→「テキストまたはCSVから」を選択する
• 手順2：CSVファイルを選択すると「テキストのインポート」ウィンドウが開く
• 手順3：「ファイルの起点」で「65001: Unicode（UTF-8）」を選択する
• 手順4：プレビューで正しく表示されることを確認して「読み込み」をクリックする

文字コード変換の詳しい手法については、UX MILK「文字コード変換の方法まとめ」とCodeAid「UTF-8変換の実践ガイド」も参考にしてください。

文字コード変換をはじめとするデジタルスキルの実践的な解説は、kakiro-web.comでも幅広く公開しています。

まとめ

文字コードの理解が正しい変換と文字化け防止に不可欠

文字化けの多くはUTF-8とShift_JISの不一致から発生します。ファイルの元の文字コードを正確に把握したうえで変換することが、二重変換による文字化けの悪化を防ぐ最初のステップです。変換前の文字コード確認を習慣化しましょう。

Windows、ブラウザ、コマンドラインなど用途に応じて変換方法を選ぶ

個別ファイルの変換にはメモ帳・VSCode・サクラエディタが手軽です。大量ファイルの一括変換にはnkf（Linux）やPowerShell（Windows）、Pythonスクリプトが効率的です。BOM付きかBOMなしかの選択も、用途（ExcelかLinuxか）に合わせて判断してください。

複数ファイルやシステム間の文字コード管理で作業効率と互換性を向上

新規のプロジェクトや開発環境では最初からUTF-8に統一し、レガシーシステムとの連携ではBOM付きUTF-8を使うなど、状況に応じた文字コード管理のルールを設けることで、文字化けトラブルの発生を根本から防ぐことができます。

• 文字コードは「文字と数値の変換ルール」で、不一致が文字化けの原因
• 現代の標準はUTF-8・WindowsのデフォルトはShift_JIS（ANSI）
• メモ帳での変換：「名前を付けて保存」→文字コードを選択して保存
• VSCodeでの変換：ステータスバーの文字コードクリック→「エンコード付きで保存」
• nkfコマンド：nkf -w --overwrite ファイル名でUTF-8に変換
• ExcelのCSV対策はBOM付きUTF-8（utf-8-sig）またはインポートウィザードを使う
• 変換前に必ず元の文字コードを確認してから変換する