PowerShellで文字化けが生じる場合がある
直接実行すると問題なく表示されるのに、PowerShellの変数に格納する、あるいはファイルに出力すると文字化けする外部コマンドがある。
具体的には、wsl.exeやwinget.exeなどだ。文字化けするのは、PowerShellの変数への格納や、cmd.exeでファイルにリダイレクトしたあと、変数やファイルを表示したときである。
先に結論から言えば、wsl.exeとwinget.exeの場合、標準出力にはバイトマークなしのUnicode(UTF-16LE)エンコードされた文字列が出力されているため、そのままでは文字化けしてしまう。
画面に出力したときに文字化けしない理由は、標準出力とは異なる方法で画面表示しているからだと思われる。ソースコードを調べたわけではないが、たとえば、コンソールAPIなどを使って画面出力しているのではないかと思われる。このときの表示はコンソールや文字エンコード設定に関わらず、正しくなる。
具体的に「wsl.exe -l」の場合で見てみることにする。まずcmd.exeで
wsl.exe -l >wsl-cmd01.txt
と出力した場合、ファイルにはバイトオーダーマークがない。このためにmore.exeなどで表示すると、文字化けしてまう。
cmd.exeには、バイトオーダーマークなしのUnicodeを読み込む機能はないが、PowerShell Ver.7または、Windows PowerShell Ver.5.1(以下両方をPowerShellと表記する)では、
Get-Content .\wsl-cmd01.txt -Encoding Unicode
とすることで、正しくファイルを読むことは可能だ。
PowerShellの場合は、話はもう少し複雑になる。PowerShellで外部実行ファイル(外部コマンド)の出力は、シフトJIS(日本語版Windowsの場合)であることを想定していて、コマンドの出力に対してUnicode(UTF-16LE)への文字エンコード変換をする。
本来Unicodeなのに、それをシフトJISだと思って文字エンコード変換するため、文字エンコードが正しくないものになり、その結果文字化けしてしまう。cmd.exeの場合とは、少し事情が違う。
PowerShellでは、外部コマンドの出力を変換して受け取るため、これをリダイレクトしてファイルに書き込んでも、誤った変換がされたファイルになる。なので、cmd.exeのようにリダイレクトしたファイルをUnicodeエンコードで読んでも正しい結果は得られない。
PowerShellで文字エンコードを正しく処理させる
PowerShellで、Unicode出力を正しく受け取るためには、コンソールの出力エンコードをUnicodeにする。これで、PowerShellは外部コマンドの出力がUnicodeエンコードであることを理解し、変換しなくなる。
そのためには、一時的にコンソールの出力エンコードをUnicodeにして、コマンドの実行後に元に戻す。具体的には、
$TempMyOutputEncode=[System.Console]::OutputEncoding
[System.Console]::OutputEncoding=[System.Text.Encoding]::Unicode
$x=wsl.exe -l
[System.Console]::OutputEncoding=$TempMyOutputEncode
とする。
最初の行は、現在の出力エンコードを変数($TempMyOutputEncode)に保存するもの。
2行目は、[System.Console]::OutputEncodingを、Unicodeエンコード(Encodingオブジェクト)に変更している。ユニコードのEncodingは、最初からプロパティとして定義されているので、「[System.Text.Encoding]::Unicode」と指定できる。なお、シフトJISエンコードを使う場合には、以下のコマンドでエンコードを得ることができる。
[System.Text.Encoding]::GetEncoding('shift_jis')
このGetEncodingで利用できるエンコード名については、以下のページに記述がある。これはPowerShell Ver.7.x用だが、Windows PowerShell用もページの中身はほぼ同じものである。
●Encoding クラス (System.Text) PowerShell 7.x
https://learn.microsoft.com/ja-jp/dotnet/api/system.text.encoding?view=net-7.0#list-of-encodings
3行目がwsl.exeの実行である。ここで、標準出力にUnicodeを出力するコマンドを実行すればよい。
4行目では、1行目で変数$TempMyOutputEncodeに保存したエンコードを使って出力エンコードを復元している。
この連載の記事
-
第460回
PC
Windowsでsftpを使う -
第459回
PC
WSL 2.4.4ではtar形式でのディストリビューションが配布でき、企業での利用が容易になってきた -
第458回
PC
Windows上でhostsファイルを活用する -
第457回
PC
IPv6アドレスは先頭を見ればどんな種類かわかる -
第456回
PC
あらためてIPv6基本のキ -
第455回
PC
Windowsで現在どのネットワークアダプタがインターネット接続に使われているかを調べる方法 -
第454回
PC
Windows 11 24H2では「デバイスの暗号化」の条件が変わり、より多くのPCでドライブが暗号化される -
第453回
PC
Windows 11 24H2の配布開始後もすぐにはやってこない Windows UpdateとSafeguard Holds -
第452回
PC
Windows 11 Ver.24H2が登場 Copilot+ PCとそうでないPCで実質Windowsが2つに分かれる -
第451回
PC
新しいWindowsサンドボックスではコマンドラインからの制御が可能に -
第450回
PC
ユニコードで文字数を数える方法 - この連載の一覧へ