Кодировка ansi: c — Что есть ANSI и ASCII

{{l10n_strings.DRAG_TEXT_HELP}}

{{l10n_strings.AUTHOR_TOOLTIP_TEXT}}

Разница в кодировке символов между ANSI и ASCII, разница между Unicode и UTF-8

Источник изображения Энциклопедия Baidu

Конечно, судя по названию Американский стандартный код для обмена информацией, код ASCII применим только к Империи США. Если он используется в странах, отличных от Империи США, он не будет соответствовать спросу. Чтобы
Код ANSI 
Кодировка ANSI является расширением кода ASCII: в кодировке ANSI используется 1 байт в диапазоне 0x00 ~ 0x7f для представления 1 английского символа, что превышает диапазон 0x80 ~ 0xFFFF в один байт. другие символы на других языках. Другими словами, только первые 126 кодов ANSI совпадают с кодами ASCII, а все следующие символы являются символами определенного национального языка. Стоит отметить, что максимальное количество символов, которое может быть сохранено в двух байтах, равно 2 в 16-й степени, то есть 65536 символов, что абсолютно достаточно для языкового символа. Код ANSI фактически включает в себя множество кодов: Китай разработал код GB2312, который используется для компиляции китайского языка. Кроме того, Япония компилирует японский язык в Shift_JIS, а Южная Корея компилирует корейский язык в Euc-kr. Страны имеют национальные стандарты. В соответствии с условиями на тот момент коды ANSI между разными языками не могут быть преобразованы друг в друга, что приведет к искажению кодов в смешанном тексте на нескольких языках. Чтобы

Перевод изhttps://blog.csdn.net/xiangxianghehe/article/details/77574965

Что такое формат ANSI? — программирование

Что такое формат кодировки ANSI? Это системный формат по умолчанию? Чем он отличается от ASCII?

ОТВЕТЫ

Ответ 1

Кодирование ANSI — это несколько общий термин, используемый для обозначения стандартной кодовой страницы в системе, обычно Windows. Это более корректно называют Windows-1252 на Western/U.S. системы. (Он может представлять некоторые другие кодовые страницы Windows на других системах.) Это по существу расширение набора символов ASCII в том, что оно включает в себя все символы ASCII с дополнительными 128 кодами символов. Это различие связано с тем, что кодировка «ANSI» составляет 8 бит, а не 7 бит, поскольку ASCII (ASCII почти всегда кодируется в настоящее время как 8-разрядные байты с MSB установлен в 0). См. Статью для объяснения, почему эта кодировка обычно называется ANSI.

Название «ANSI» является неправильным, поскольку оно не соответствует какому-либо фактическому стандарту ANSI, но имя застряло. ANSI — это не то же самое, что UTF-8.

Ответ 2

Технически ANSI должен быть таким же, как US-ASCII. Он относится к стандарту ANSI X3.4, который является просто ANSI организацией, утвержденной версией ASCII. Использование символов с верхним битом не определено в ASCII/ANSI, так как это 7-битный набор символов.

Однако годы неправильного использования термина DOS и впоследствии сообщества Windows оставили свое практическое значение как «системную кодовую страницу какой бы то ни было машины». Системная кодовая страница также иногда известна как «mbcs», поскольку в системах Восточной Азии, которая может быть кодировкой с несколькими байтами на символ. Некоторые кодовые страницы могут даже использовать верхние бит-четкие байты в качестве конечных байтов в многобайтовой последовательности, поэтому он даже не является строго совместимым с простым ASCII… но даже тогда он все еще называется «ANSI».

В настройках по умолчанию в США и Западной Европе «ANSI» сопоставляется с кодовой страницей Windows 1252. Это не то же самое, что и ISO-8859-1 (хотя это довольно похоже). На других машинах это могло быть что угодно. Это делает ANSI совершенно бесполезным в качестве внешнего идентификатора кодирования.

Ответ 3

Строго говоря, нет такой вещи, как кодирование ANSI. Вкратце термин ANSI используется для нескольких разных кодировок:

1. ISO 8859-1
2. Windows CP1252
3. Текущая системная кодировка на компьютере Windows (в терминологии Win32 API).

Ответ 4

ASCII определяет только 7-битную кодовую страницу со 128 символами. ANSI расширяет это до 8 бит и существует несколько разных кодовых страниц для символов с 128 по 255.

Именование ANSI неверно, поскольку на самом деле это норма ISO/IEC 8859, которая определяет эти кодовые страницы. См. ISO/IEC 8859 для справки. Существует 16 кодовых страниц ISO/IEC 8859-1 по ISO/IEC 8859-16.

Windows-1252 снова основан на ISO/IEC 8859-1 с некоторой модификацией, главным образом в диапазоне набор управления C1 в диапазоне от 128 до 159. Wikipedia заявляет, что Windows-1252 также называется ISO-8859-1 со вторым дефис между ISO и 8859. (Невероятно! Кто делает что-то подобное?!?)

Ответ 5

Когда-то Microsoft, как и все остальные, использовала 7-битные наборы символов, и они придумали свои собственные, когда они им подходят, хотя они сохранили ASCII в качестве основного подмножества. Затем они поняли, что мир перешел к 8-битным кодировкам и что существуют международные стандарты, такие как семейство ISO-8859. В те дни, если вы хотели получить международный стандарт, и вы жили в США, вы купили его у Американского национального института стандартов ANSI, который переиздал международные стандарты со своим собственным брендингом и цифрами (что, поскольку правительство США хочет соответствие американским стандартам, а не международным стандартам). Итак, копия Microsoft ISO-8859 сказала «ANSI» на обложке. И поскольку Microsoft в те дни не очень привыкла к стандартам, они не понимали, что ANSI опубликовала множество других стандартов. Поэтому они ссылались на стандарты семейства ISO-8859 (и варианты, которые они изобрели, потому что в те дни они не понимали стандартов) по названию на обложке «ANSI», и он нашел свой путь в Microsoft пользовательскую документацию и, следовательно, в сообщество пользователей. Это было около 30 лет назад, но вы все еще иногда слышите это имя сегодня.

Ответ 6

В основном «ANSI» относится к устаревшей кодовой странице в Windows. См. Также статью Раймонда Чена на эту тему. Первые 127 символов идентичны ASCII на большинстве кодовых страниц, однако верхние символы меняются.

Однако ANSI автоматически не означает CP1252 или Latin 1.

Несмотря на всю путаницу, вы должны просто избегать таких проблем в настоящее время и использовать Unicode.

Ответ 7

На всякий случай ваш ПК не является «западным» ПК, и вы не знаете, какая кодовая страница используется, вы можете посмотреть эту страницу: Справочник по API поддержки национальных языков (NLS)

[Microsoft удалила эту ссылку, отрисуйте ее в виде веб-архива Справочник по API поддержки национальных языков (NLS)

Или вы можете запросить свой реестр:

C:\>reg query HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Nls\CodePage /f ACP

HKEY_LOCAL_MACHINE\SYSTEM\CurrentControlSet\Control\Nls\CodePage
    ACP    REG_SZ    1252

End of search: 1 match(es) found.

C:\>

Ответ 8

При использовании однобайтовых символов формат ASCII определяет первые 127 символов. Расширенные символы из 128-255 определяются различными кодами ANSI, чтобы обеспечить ограниченную поддержку других языков. Чтобы понять кодировку ANSI, вам нужно знать, какую кодовую страницу она использует.

Ответ 9

Я помню, когда текст ANSI ссылался на escape-коды псевдо-VT-100, используемые в DOS через драйвер ANSI.SYS, чтобы изменить поток потокового текста…. Вероятно, это не то, о чем вы говорите, но если оно см. http://en.wikipedia.org/wiki/ANSI_escape_code

Ответ 10

ANSI (aka Windows-1252/WinLatin1) является символьной кодировкой латинского алфавита, довольно похожей на ISO-8859-1. Вы можете захотеть взглянуть на в Википедии.

python — Как установить кодировку как ‘ANSI’, используя Python?

Я использую версию Python 3.7.4. Я хочу установить кодировку «ANSI» во время чтения текстового файла, а также записи текстового файла.

В другом случае я читаю файл, предоставляя «utf-8» (пожалуйста, найдите фрагмент кода ниже) в качестве кодировки, но в случае «ANSI» я не нахожу никакого значения для кодирования.

Фрагмент кода:

content = open(fullfile , encoding='utf-8').readlines()  

Что нужно сделать, чтобы установить кодировку как «ANSI» в Python?

0

Santanu Guha 27 Ноя 2019 в 16:36

3 ответа

Лучший ответ

Нет никакого «ANSI» -кодирования. «ANSI» означает «независимо от того, какая на вашем компьютере используется однобайтовая кодировка по умолчанию» — термин «ANSI» по своей сути неоднозначен. Это означает, что вы должны указать кодировку фактическую при чтении файла.

Для машин Windows в регионе Западной Европы «ANSI» обычно относится к Windows-1252. Другие регионы различаются, но конфигурация вашего компьютера может отличаться.

Python ссылается на Windows-1252 как cp1252. Если это действительно та кодировка, в которой находится ваш файл, зависит от самого файла, и узнать ее можно, только взглянув на нее.

Часто текстовые редакторы (не Notepad, real текстовые редакторы) имеют возможность интерпретировать файл в различных кодировках. Выберите тот, который заставляет данные выглядеть правильно (обратите внимание на акцентированные символы), а затем узнайте имя Python для него.

2

Tomalak 27 Ноя 2019 в 13:44

Попробуйте одну из кодировок ANSI:

encoding='cp1252'

Чтобы получить дополнительную информацию, посмотрите здесь.

0

Gabriel Melo 27 Ноя 2019 в 13:44

%d0%ba%d0%be%d0%b4%d0%b8%d1%80%d0%be%d0%b2%d0%ba%d1%83 — English translation – Linguee

Что такое формат ANSI? | Newbedev

Кодировка ANSI — это немного общий термин, используемый для обозначения стандартной кодовой страницы в системе, обычно Windows. Более правильное название — Windows-1252 на Западе / США. системы. (Он может представлять некоторые другие кодовые страницы Windows в других системах.) По сути, это расширение набора символов ASCII в том смысле, что он включает все символы ASCII с дополнительными 128 кодами символов. Это различие связано с тем, что кодировка «ANSI» является 8-битной, а не 7-битной, как ASCII (в настоящее время ASCII почти всегда кодируется как 8-битные байты с MSB, установленным в 0).См. Статью для объяснения того, почему эта кодировка обычно называется ANSI.

Название «ANSI» — неправильное употребление, поскольку оно не соответствует никакому действительному стандарту ANSI, но название прижилось. ANSI — это не то же самое, что UTF-8.

Технически ANSI должен быть таким же, как US-ASCII. Это относится к стандарту ANSI X3.4, который является просто утвержденной организацией ANSI версией ASCII. Использование символов верхнего набора битов не определено в ASCII / ANSI, поскольку это 7-разрядный набор символов.

Однако годы неправильного использования этого термина сообществом DOS, а затем и Windows оставили его практическое значение как «системная кодовая страница любой используемой машины». Системную кодовую страницу также иногда называют «mbcs», поскольку в восточноазиатских системах она может быть многобайтовой кодировкой на символ. Некоторые кодовые страницы могут даже использовать байты с очисткой верхнего бита в качестве завершающих байтов в многобайтовой последовательности, так что это даже не строго совместимо с обычным ASCII … но даже тогда это все еще называется «ANSI».

В настройках по умолчанию для США и Западной Европы «ANSI» соответствует кодовой странице Windows 1252. Это не то же самое, что ISO-8859-1 (хотя и очень похоже). На других машинах это могло быть что угодно. Это делает «ANSI» совершенно бесполезным в качестве внешнего идентификатора кодировки.

Строго говоря, кодировки ANSI не существует. В просторечии термин ANSI используется для нескольких различных кодировок:

1. ISO 8859-1
2. Окна CP1252
3. Текущая системная кодировка на машине Windows (в терминологии Win32 API).

Кодировка, которую Notepad ++ называет просто «ANSI». Кто-нибудь знает, как ее назвать для Ruby?

Я думаю, что это cp1252, псевдоним windows-1252.

Прочитав ответ Йорга, я вернулся на страницу кодирования на ruby-doc.org, пытаясь найти ссылки на конкретные кодировки, которые он упомянул, и именно тогда я обнаружил метод Encodings.aliases .

Итак, я запутался в методе в конце этого ответа.

Затем я посмотрел на вывод в notepad ++, рассматривая его как «ANSI» и как utf-8, и сравнил его с выводом в irb…

Я смог найти только два места в выводе irb, где файл utf-8 был искажен точно так же, как он появился в блокноте ++ при просмотре его как «ANSI», и эти места были для cp1252 и cp1254.

cp1252, по-видимому, является моей кодировкой «файловой системы», поэтому я придерживаюсь этого.

Я написал сценарий для создания копий всех файлов, преобразованных в формат UTF-8, пробуя как из 1252, так и из 1254.

utf-8, похоже, пока работают с обоими наборами файлов.

Теперь я должен попытаться вспомнить, что я на самом деле пытался выполнить, чтобы выполнить , прежде чем я столкнулся со всеми этими головными болями при кодировании.xD

  def compare_encodings файл1, файл2
    file1_probs = []
    file2_probs = []

    txt = File.open ('encoding_test_output.txt', 'w')

    Encoding.aliases.sort.each do | k, v |
        Encoding.default_external = k
        ename = [k.downcase, v.downcase] .join "---"
        s = ""
        начинать
            s << "# {File.read (file1)}"
        спасать
            s << "нету нету нету"
            file1_probs << ename
        конец
        s << "\ t | # {ename} | \ t"
        начинать
            s << "# {Файл.читать (файл2)} "
        спасать
            s << "нету нету нету"
            file2_probs << ename
        конец
        Encoding.default_external = 'utf-8'
        txt.puts s.center (58)
        ставит s.center (58)
    конец
    ставит
    помещает "file1, \" # {file1} \ "исключения из попытки преобразования в: \ n \ n"
    помещает file1_probs
    ставит
    помещает "file2, \" # {file2} \ "исключения из попытки преобразования в: \ n \ n"
    помещает file2_probs
    txt.close
конец

compare_encodings "utf-8.txt", "np ++ 'ANSI'.txt"
  

символов - от ANSI до UTF-8 в Notepad ++

Выберите Преобразовать в UTF-8 вместо Кодировать в UTF-8

UTF-8 - это , а не кодировка, а просто , кодирующая для Unicode.Первые 128 байтовых значений такие же, как ASCII (и большинство других нормальных наборов символов). Однако байты с установленным старшим битом (или ≥ 0x80) являются расширенными символами в ASCII, тогда как в UTF-8 они обозначают многобайтовую последовательность .

Это случай 0x93 или 0x94 выше. Если вы откроете файл в ANSI, он будет использовать текущую кодовую страницу Windows, которая часто является Windows-1252 по умолчанию в США и большинстве стран Западной Европы. В Windows-1252 эти байты представляют собой «умные кавычки» (или изогнутые кавычки с разными формами открытия и закрытия), которые вы часто видите при использовании редактора форматированного текста, такого как MS Word.Однако, если вы выберете «Кодировка»> «Кодировать в UTF-8» , тогда файл будет обрабатываться так, как если бы он был закодирован в UTF-8. Пункты меню Encode in ... используются для того, чтобы сообщить Notepad ++ о кодировке real , если у вас отображаются неправильные символы ¹ . Поскольку 0x93 и 0x94 сами по себе являются некорректно сформированными многобайтовыми последовательностями UTF-8, в редакторе

Значит, в файле нет ничего странного. Просто вы выбрали не тот инструмент.Вам нужно нажать Convert to UTF-8 , чтобы преобразовать всю последовательность входных байтов в выбранную кодировку

У вас также есть небольшая путаница по поводу ANSI и ASCII. ANSI не является определенным набором символов и может означать любые кодовые страницы, хотя часто относится к Windows-1252. Windows-1252 - это расширенный набор ISO-8859-1 (AKA Latin-1), а ISO-8859-1 - это первые 256 кодовых точек Unicode. ASCII представляет собой 7-битный набор символов и представляет собой подмножество почти всех кодовых страниц ANSI, закодированных в 8 бит или более.Юникод

¹ Этот прискорбный факт происходит потому, что в текстовые файлы нет информации о кодировке, и мы должны угадывать, но невозможно угадать правильно каждый раз, и проблемы действительно возникают, например, знаменитый Буш скрыл ошибку фактов. См.

По историческим причинам Windows работает с текстовыми файлами ANSI и Unicode одновременно. Следовательно, чтобы различать их, он должен использовать метку порядка байтов как своего рода подпись, чтобы обозначить, что это текстовый файл с определенной кодировкой.Несмотря на название, это , а не для маркировки «порядка байтов», как всегда утверждают парни из Unix, а просто для подписи. Наличие подписи — это на самом деле хорошо, и это делают все подходящие форматы двоичных файлов. Без подписи спецификации используется кодировка ANSI, в противном случае — Unicode. Поскольку в настоящее время Unices всегда используют UTF-8 и на самом деле не должны работать с множеством текстовых кодировок, часто нет проблем, как в Windows

ASCII и ANSI

ASCII и ANSI

ASCII — это аббревиатура от American Standard Code for Information Interchange и 7-битная кодировка символов.Он составляет основу многих других кодировок символов. В ASCII определены 128 символов, из которых 95 — печатные, а 33 — непечатаемые. В следующей таблице перечислены символы и их десятичная запись.

Таблица ASCII

Как видно, набор символов ASCII включает латинский алфавит, десять арабских цифр и некоторые знаки препинания и управляющие символы. Диакритические символы, такие как Ä или À, используемые в большинстве языков, основанных на латинском алфавите, не существуют в диапазоне ASCII.7 = 128 вариантов кодирования). На самом деле ANSI означает Американский национальный институт стандартов, но в компьютерных технологиях он используется почти исключительно для группы наборов символов, описанной ниже. ANSI обычно совместим со 128 символами ASCII, а также содержит некоторые дополнительные характерные для языка символы, такие как Ä, À, ß и т. Д. В зависимости от того, какое расширение используется, в качестве расширения используются 128 различных других символов.

Latin 1

Наиболее распространенное расширение ASCII показано в следующей таблице и называется Latin 1 (ISO 8859-1).

Таблица Latin-1

Есть также другие улучшения, такие как Latin 5 (ISO 8859-5, турецкий), Latin 7 (ISO 8859-7 Celtic) или Latin 10 (ISO 8859-10, Юго-Восточная Европа). Даже с этими расширениями первые 128 символов являются общими символами ASCII, в то время как остальные 128 символов являются символами, которые требуются для соответствующего языка или соответствующего набора символов.

Ограничения

Хотя кодировка ANSI требует только одного байта на символ и, таким образом, является наиболее эффективной кодировкой, она имеет недостатки, поскольку такая эффективность возникает из-за невозможности хранить различные системы символов или другие специальные символы в одном файле.Для чисто английского, немецкого, испанского или французского текста, конечно, достаточно ANSI (для английского даже ASCII). Но как только в тексте появляются другие символы, такие как буквы кириллицы или специальные символы, эти символы не могут быть сохранены с помощью ANSI. Кроме того, проблема несовместимости возникает при обмене файлами, поскольку может случиться так, что отправитель сохранил файл как Latin-1, а получатель работает с Latin-10. В этом случае символы вне диапазона ASCII 128 символов могут отображаться некорректно, потому что тот же код обозначает другие символы в Latin-1 и Latin-10.Чтобы избежать этой опасности, рекомендуется сохранять файлы в независимом от языка кодовом формате, таком как Unicode UTF-7, UTF-8, UTF-16 или UTF-32. В этих кодировках у каждого символа есть только один код, который не отличается, поэтому нет возможности отобразить неправильный символ.

ANSI и ASCII не имеют отметки порядка байтов. На самом деле в этом нет необходимости, так как в любом случае записывается только один байт на символ, и поэтому порядок следования байтов не имеет значения. Однако могут возникнуть некоторые проблемы, если нет метки, независимо от того, является ли файл ANSI или ASCII или нет, потому что также с такими форматами, как UTF-8, не обязательно иметь метку порядка байтов.Таким образом, подходящим файлом может быть ANSI, ASCII, UTF-8 или другая кодировка, и эти файлы трудно интерпретировать, если вы попытаетесь отобразить их правильно.

Что такое формат ANSI? | Techwalla

Формат ANSI Американского национального института стандартов — это связанный с Microsoft стандарт кодирования набора символов и модификация набора символов Американского стандартного кода обмена информацией (ASCII). Код ASCII использует 7 битов для представления каждого символа, тогда как формат ANSI использует 8 битов для каждого символа.

Из ASCII в ANSI

8-битный формат ANSI — это лишь одно из достижений в истории усилий по улучшению способности электрических машин взаимодействовать быстрее и надежнее. Ранние компьютеры были не более чем «вычислителями чисел», необходимыми для обработки только числовых данных. По мере того, как устройства связи становились все сложнее, а компьютеры стали глобальными, возникла потребность в том, чтобы компьютеры могли представлять больше, чем просто числа. Первым ответом на эту потребность стал 7-битный формат ASCII.8-битный формат ANSI удвоил количество символов исходного ASCII.

ANSI против ASCII

Введение 8-битного формата ANSI, в то время как большое улучшение по сравнению с ASCII, было суждено стать недолгим поводом для празднования, поскольку компьютеры стали более широко использоваться людьми в других странах, где английский не был родным языком. Даже с 256 (от 0 до 255) возможных символов 8-битный формат ANSI сильно не мог быть применен к компьютерам, использующим разрозненные наборы символов и управляющих кодов.Однако оба стандарта по-прежнему полезны для западных языков.

История

Добавление 8-го бита в формат ANSI заставило различные группы и правительство задуматься о том, как использовать дополнительные 128 мест для символов. Поскольку между этими группами не было соглашения о том, как их использовать, в результате документы, отправленные из одной системы в другую, часто были нечитаемыми из-за различных стандартов кодирования. Эта ситуация была решена путем создания систем IBM (OEM) и Microsoft (ANSI), которые определили кодовые страницы, состоящие из ASCII для нижних 127 символов и заданного языкового варианта для верхних 128 символов.

Еще немного истории

Название ANSI, применяемое к кодовым страницам, используемым операционными системами Microsoft, похоже, указывает на то, что Американский национальный институт стандартов (ANSI) фактически стандартизировал сопоставления. Это не так, поскольку ANSI официально не стандартизировал кодировку символов Microsoft Windows-1,252. Термин ANSI принят более или менее из-за наследия Microsoft в компьютерном мире.

Будущее формата ANS

Поскольку Интернет стал практически повсеместным, и все больше людей используют разные языки, неудивительно, что старые стандарты кодирования символов уступили место более новым, более всеобъемлющим стандартам.Юникод Windows (UTF-16) от Microsoft предоставляет коды длиной более 65 000 символов. Это намного больше 256, доступных в 8-битном формате ANSI, и обеспечивает полную функциональность почти на всех языках.

формат ANSI (8-битное кодирование) | Блог EDI

Формат ANSI: «удвоенная» модификация прежнего ASCII

ANSI был разработан Американским национальным институтом стандартов и представляет собой связанный с Microsoft стандарт кодирования набора символов.Также формат ANSI служит модифицированным набором символов ASCII (американский стандартный код для обмена информацией). Если мы сравним код ASCII и формат ANSI, первый использует 7 бит для представления каждого символа. В то же время в формате ANSI для каждого символа используется 8 бит.

История формата ANSI

После того, как 8-й бит был добавлен в формат ANSI, многие учреждения, включая правительство, столкнулись с проблемой нечитаемых документов. Различным органам приходилось решать эту проблему, но на это требовалось время.Сначала возникали недопонимания, и стороны обменивались документами, которые не могли быть прочитаны из-за использования разных форматов. Таким образом, основная проблема заключалась в том, как использовать дополнительные 128 мест для символов, поскольку были внесены изменения и кодировка была другой. Решением было создание систем IBM (OEM) и Microsoft (ANSI). Эти системы определили кодовые страницы, состоящие из ASCII для нижних 127 символов и заданного языкового варианта для верхних 128 символов.

Можно ли преобразовать текст в ANSI и как?

Общие документы (текстовые файлы) состоят из символов, определенных в наборе ASCII (Американский стандартный код для обмена информацией).Итак, стандартный набор ASCII состоит из 128 символов. Также он включает буквы, а также символы (восклицательные знаки, запятые и т. Д.). Иногда текстовые документы могут содержать символы, отличные от ASCII. Для правильного отображения текстового документа ANSI кодирует расширенный набор символов. Есть некоторые инструменты для преобразования файлов, такие как приложение «Блокнот» или редактор по умолчанию в Windows. Используя эти инструменты, вы можете преобразовать текст в формат ANSI.

Сегодня компьютеры и устройства связи становятся все более сложными.Глобальная задача — научить их оперировать не только числами. 7-битный формат ASCII был первоначальным решением, поскольку 8-битный формат ANSI был двойным ответом на эту потребность.

Узнайте больше о стандартах EDI и электронной коммуникации на наших вебинарах.

Как установить кодировку в ANSI

Проблема:
Люди, живущие в странах, с языками, включающими символы, отличные от ANSI, и которым нужна полностью английская среда Windows.
Если пользователь устанавливает системный языковой стандарт (язык для программ, не поддерживающих Юникод), для страны, в которой он живет, то многие приложения будут проверять этот параметр и, не предоставляя пользователю никаких опций, устанавливаются с локализованным интерфейсом, т. Е. С графическим интерфейсом пользователя на основе Системный языковой стандарт, который может быть нежелательным.

Очевидным решением является изменение языкового стандарта системы на английский (США), что решает проблему интерфейса приложений, но поскольку мы говорим о Microsoft Windows, существует (как всегда…) исключение.В данном случае это Блокнот…
Блокнот имеет ANSI (= ASCII и расширенный ASCII) в качестве настройки по умолчанию для сохранения текстовых файлов. Если текстовый файл содержит символы, отличные от ANSI, он выдает предупреждение … которое, если вы случайно обойдете и сохраните файл с кодировкой ANSI, все символы, отличные от ANSI, станут нечитаемыми.

Поскольку я являюсь таким пользователем, у меня установлена ​​английская (США) версия, и, чтобы избежать локализованного интерфейса приложения, я установил системный языковой стандарт на английский (США).
По какой-то причине, которую я еще не нашел, до версии 1803 я мог сохранять текстовые документы с греческими (не ANSI) символами, и поскольку я не получал предупреждения о кодировке (по крайней мере, не так часто) при сохранении файл, многие файлы с греческими символами были сохранены в формате ANSI и не имели проблем.

Эта проблема с кодировкой стала более строгой в 1803 году. Я предполагаю, что параметр «Бета: использовать Unicode UTF-8 для всемирной поддержки языков», который был добавлен при изменении языкового стандарта системы, имеет к этому какое-то отношение. В любом случае это, как было сказано, все еще находится в стадии бета-тестирования, поэтому пока не работает должным образом!

Итак, как читать все эти текстовые файлы с кодировкой ANSI, которые содержат символы, отличные от ANSI, которые теперь не читаются?

Решение:
Шаг 1
Перейдите в: Настройки> Время и язык> Регион и язык> Связанные настройки> Настройки административного языка (открывает Панель управления)> Системный язык (Язык для программ, не поддерживающих Юникод)

В качестве альтернативы, для краткости введите в поиск Windows / Cortana:
control.exe / NAME Microsoft.RegionalAndLanguageOptions / PAGE / p: «Administrative»

и измените «Системный языковой стандарт (язык для программ, не поддерживающих Unicode)» на языковой стандарт страны, в которой вы живете (в моем случае — Греция).
Потребуется перезагрузка системы. Щелкните «Перезагрузить».

Шаг 2
Загрузите UnicodeConverter.zip, сохраните и распакуйте его на рабочем столе. ZIP-файл содержит три сценария:
CheckFileEncoding.ps1
ConvertFilesToUnicode.ps1
ConvertFilesToUnicode_NoBOM.ps1 (для опытных пользователей)

Шаг 3
Откройте PowerShell с повышенными привилегиями и введите команду:
Код:

Код:

 Set-ExecutionPolicy Bypass -Scope Process -Force 

Код:

 $ env: ПРОФИЛЬ ПОЛЬЗОВАТЕЛЯ \ Рабочий стол \ CheckFileEncoding.ps1 

Вы можете проверить некоторые с символами, отличными от ANSI, и убедиться, что они читаемы. (Должны, так как ваш регион не соответствует стандарту ANSI).

Шаг 4
Теперь вы можете запустить команду:
Код:

Код:

 $ env: ПРОФИЛЬ ПОЛЬЗОВАТЕЛЯ \ Рабочий стол \ ConvertFilesToUnicode.ps1 

После этого вы можете повторить шаг 3, чтобы убедиться, что в ваших пользовательских папках нет файлов ANSI.

Шаг 5
Перейдите к: Настройки> Время и язык> Регион и язык> Связанные настройки> Настройки административного языка (открывает Панель управления)> Системный языковой стандарт (Язык для программ, не поддерживающих Юникод)

Или, для краткости, введите в поиске Windows / Cortana:
control.exe / NAME Microsoft.RegionalAndLanguageOptions / PAGE / p: «Administrative»

и измените «Системный языковой стандарт (язык для программ, не поддерживающих Unicode)» на английский язык по вашему выбору.
Потребуется перезагрузка системы. Щелкните «Перезагрузить».

Вот и все. После перезагрузки компьютера и поскольку все текстовые файлы теперь сохранены в Юникоде, их можно будет читать с любым языковым стандартом системы.

Важное примечание:
Если вы хотите изменить расположение резервной копии или папки, в которых находятся текстовые файлы ANSI (например,грамм. поиск по всему C: \), откройте скрипт «ConvertFilesToUnicode.ps1» и, как показано в красном поле на изображении ниже, перейдите в раздел, где мы определяем местоположения и меняем их в соответствии с вашими потребностями (например, $ SourceDirectory = ‘ C: \ Personal \ My Files ‘). Не забудьте заключить папку в кавычки (например, «C: \ Backup \ My ASCII files»).

Для опытных пользователей
Microsoft Notepad сохраняет все файлы Unicode с BOM (меткой порядка байтов). Если вы не хотите использовать BOM в текстовых файлах Unicode, используйте ConvertFilesToUnicode_NoBOM.ps1 ». Он будет делать именно то, что делает «ConvertFilesToUnicode.ps1», но вместо этого сохранит текстовый файл в любой кодировке Unicode без спецификации.

Кроме того, чтобы изменить кодировку Unicode на другой формат, в разделе преобразования сценария измените Unicode в части «set-content $ _. FullName -Encoding Unicode» на любое другое из доступных значений:

‘ ASCII ‘: использует кодировку для набора символов ASCII (7-бит).
‘BigEndianUnicode’: кодирует в формате UTF-16 с использованием порядка байтов с прямым порядком байтов.
‘BigEndianUTF32’: кодирует в формате UTF-32 с использованием порядка байтов с прямым порядком байтов.
«По умолчанию»: кодируется с использованием значения по умолчанию: ASCII.
«Байт»: кодирует набор символов в последовательность байтов.
‘String’: Использует тип кодировки для строки.
«Юникод»: кодирует в формате UTF-16 с использованием порядка байтов с прямым порядком байтов.
‘UTF7:’ Кодирует в формате UTF-7.
«UTF8»: кодирует в формате UTF-8.