Як виправити кодування в PowerShell

Корінь проблеми: у кожної команди своє кодування

У Windows PowerShell 5.1 майже кожна команда має власне кодування за замовчуванням. Get-Content читає файл без BOM як ANSI (в українській Windows це Windows-1251), Out-File і > пишуть UTF-16, Set-Content пише ANSI, а Export-Csv — ASCII, тож українські літери стають ?. У PowerShell 7 усе уніфіковано: скрізь UTF-8 без BOM.

Працівник;Відділ;Місто
Іван Шевченко;Продажі;Дніпро
Олена Гриценко;Закупівлі;Запоріжжя

Працівник;Відділ;Місто
Іван Шевченко;Продажі;Дніпро
Олена Гриценко;Закупівлі;Запоріжжя

Правильно читаємо й пишемо файли

• Get-Content data.csv -Encoding UTF8 читає UTF-8 правильно, навіть без BOM.
• Якщо файл у Windows-1251 і ви хочете прочитати його явно, у PowerShell 7 вкажіть -Encoding windows-1251. У Windows PowerShell 5.1 для цього є -Encoding Default: так використовується ANSI-кодування системи.
• Set-Content, Out-File та Add-Content пишуть UTF-8 із параметром -Encoding UTF8. У версії 5.1 це завжди UTF-8 з BOM.
• Export-Csv data.csv -Encoding UTF8 -NoTypeInformation -Delimiter ";" замість ASCII за замовчуванням, який замінює українські літери на ?. Крапка з комою потрібна, щоб Excel в українській Windows розбив стовпці.
• Для всіх команд одразу: $PSDefaultParameterValues['*:Encoding'] = 'utf8' на початку скрипта.

Веб-запити: Invoke-RestMethod та Invoke-WebRequest

Якщо сервер не вказав кодування в заголовку Content-Type, Windows PowerShell 5.1 декодує відповідь як ISO-8859-1. Тоді у відповіді в UTF-8 з’являються привіт. Отримайте відповідь у вигляді байтів і декодуйте самі: [Text.Encoding]::UTF8.GetString((Invoke-WebRequest $url).RawContentStream.ToArray()).

Файли скриптів з українськими літерами

Якщо зберегти скрипт в UTF-8 без BOM, Windows PowerShell 5.1 прочитає його як ANSI. Тоді рядок Write-Host "Привіт" виведе РџСЂРёРІС–С‚. Зберігайте .ps1 в UTF-8 з BOM: у VS Code через кодування в рядку стану, у Notepad++ через меню кодувань (Encoding) → UTF-8-BOM.

Консоль

Якщо неправильні знаки на кшталт ╨Я╤А╨╕╨▓╤Ц╤В видно лише у вікні консолі, файл часто в порядку: консоль Windows читає UTF-8 як DOS-кодування CP866. Перемкніть вивід командою [Console]::OutputEncoding = [Text.Encoding]::UTF8. Для даних, які ви передаєте зовнішнім програмам, задайте ще й $OutputEncoding = [Text.Encoding]::UTF8.

Якщо файл уже записано з помилкою, перетягніть його в поле вище: Mojibuster виправить РџСЂРёРІС–С‚ і подібне, а файли в ANSI (Windows-1251) переведе в UTF-8. Якщо у файлі вже стоять знаки питання, текст втрачено. Докладніше: що таке кракозябри.

Часті запитання

Інші інструкції

• Декодер кракозябр Виправляє кракозябри в тексті та файлах.
• Кракозябри в Excel Коли Excel відкриває CSV кракозябрами.
• Кракозябри в субтитрах Коли телевізор чи плеєр показує субтитри кракозябрами.
• Що таке кракозябри Значення, походження й причини кракозябр.
• Подвійне кодування Коли «привіт» спершу став РїСЂРёРІС–С‚, а потім зіпсувався вдруге.
• Апостроф і лапки ’, В«, — і в„– замість апострофа, лапок, тире й знака номера.
• Знаки питання замість букв ? або � замість букв – що можна врятувати, а що ні.
• URL-коди символів %D1%97 замість ї: перетворюємо коди з посилань і форм на звичайний текст.
• WordPress і база даних Виправлення SQL-дампів і записів WordPress із кракозябрами замість українських літер.
• MySQL і phpMyAdmin Правильне кодування таблиці, з’єднання та імпорту.
• Outlook Виправляємо кракозябри в листах і вивантаженнях контактів.
• Python і pandas encoding у read_csv, to_csv, open() та requests.
• Notepad++ Вибрати чи конвертувати кодування — важлива різниця.
• Клієнтські дані та CRM Виправлення клієнтських баз із CRM та ERP без надсилання на сервер.
• Windows-1251 → UTF-8 Перекодувати старі українські файли в UTF-8.