Вопросы с меткой [utf-8]

UTF-8 — одна из общепринятых и стандартизированных кодировок текста, которая позволяет хранить символы Юникода.

Фильтрация
Сортировка
Метки
0 голосов
1 ответ
23 показа

Как раскодировать процентное кодирование url Python?

Хочу достать данные из url, но ресурс отдает мне закодированный url. Как с помощью Python раскодировать его, как указано в примере на картинке?
0 голосов
1 ответ
12 показов

Как удобно работать с URL написанном на русском языке?

Типичный URL содержащий русский текст, при вставке в любой текстовой редактор превращается в подобный нечитабельный набор кода. Пример: Несколько вопросов по редактору Sublime Text Выглядит как: ...
-1 голос
0 ответов
26 показов

Проблема с кириллической кодировкой PostgreSQL

Изучаю PostgreSQL. Как и рекомендовали, для работы в консольном клиенте установил кодовую страницу 1251. Но ничего не могу поделать, данные выводятся вот в таком виде: Такое ощущение, что это UTF-8, ...
0 голосов
0 ответов
41 показ

PHPStorm: Открывает файл в UTF-8 вместо windows-1251

У меня проект в UTF-8. Но есть каталог в windows-1251. Настройки следующие: Setting | Editor | File Encodings Global Encoding: UTF-8 Project Encoding: UTF-8 Patch Encoding ...\public ...
0 голосов
0 ответов
51 показ

как исправить эту ошибку при чтении файла?

При попытке чтения файла вылезает такая ошибка: se = f.readlines() ^^^^^^^^^^^^^ File "<frozen codecs>", line 322, in decode UnicodeDecodeError: 'utf-8' codec can't decode ...
-1 голос
1 ответ
64 показа

Какой минимальный набор функций C необходимо реализовать для работы с UTF-8 в этом случае? [закрыт]

Какой минимально необходимый набор функций из вашего опыта нужно реализовать для работы с кодировкой UTF-8, чтобы поверх них можно было писать другие типичные функции для работы со строками уже без ...
0 голосов
1 ответ
48 показов

iconv() не может перекодировать из windows1251 в utf8

Есть функция-обертка над iconv() для загрузки текстового файла и конвертации текста из кодировки в кодировку: #include <iconv.h> #include <string> #include <fstream> #include <...
1 голос
1 ответ
66 показов

Не отображаются русские символы в СИ. Вместо них появляются английские аналоги

Не отображаются русские символы в СИ. Вместо них появляются английские аналоги. Можете сами скомпилировать если хотите. Помогите Программа должна выводить список гласных букв, содержащихся в каждом ...
0 голосов
0 ответов
30 показов

Как узнать код раскладки клавиатуры?

Нужно создать приложение клавиатуры на ингушском языке. Алфавит в целом латинский, но есть буква состоящая из двух букв. а б в г д е ё ж з и й к л м н о п р с т у ф х ц ч ш щ ъ ы ь э ю я, Ӏ, гӀ, аь, ...
0 голосов
0 ответов
39 показов

Linux кодировка русских сообщений скриптов python в командной строке в виде абракадабры

В командной строке скрипты пайтон выводят сообщения на русском языке в виде абракадабры Локаль ютф русский установлена: Подскажите, пожалуйста, как сделать чтобы русские сообщения выводились на ...
  • 1
1 голос
0 ответов
29 показов

Перевести cp855 в utf-8

Подскажите, как на php преобразовать кодировку cp855 в utf-8. Пытался через utf8_encode и получал знаки вопроса. Через iconv, на что получал ошибку, что cp855 неизвестная кодировка.
0 голосов
0 ответов
39 показов

Сломалась кодировка русского языка Visual Studio

В Visual Studio ASP.NET Core 7, я пишу код app.Run(async(context) => await context.Response.WriteAsync("Привет")); это для ответа или вывода текста, пишу в Program.cs Но при запуске мне ...
0 голосов
0 ответов
38 показов

Почему кириллица превращается в непонятные символы

Когда я пишу данные в форму икрилицей в php хранит данные как непонятные символы (нп. ДанилÐ) Форма <form action="scripts/settings.php" method="POST"> ...
0 голосов
0 ответов
22 показа

Кодировка phpMyAdmin для PHP

Помогите пожалуйста, я понять не могу почему у меня показывает Русский текст -> ??????????? Я кодировку поменял utf8mb4 потому что показывало так, поменял на utf8_general_ci и даже в такой ...
0 голосов
0 ответов
40 показов

Терминал мака вместо кириллицы отображает '?' [дубликат]

#include <iostream> #include <string> using namespace std; int main() { setlocale(LC_ALL, ""); int n; string str; cout << "Введите строку: " <...
0 голосов
0 ответов
36 показов

Как получить номер юникод символа из std::string

У меня есть переменная типа std::string. Мне нужно получить текст в символах в юникода. Как это можно сделать? Всё что нагуглил - это использование codecvt через wstring_convert который помечен как ...
0 голосов
0 ответов
31 показ

Как сохранить html теги при записи xml

Не получается сохранить html теги из начального xml файла после обработки скриптом Python. Начальный файл В конце получаю: Выяснил, что это из-за проблем с кодировкой. В скрипте все обрабатывается в ...
0 голосов
1 ответ
63 показа

Hex To Text python

все кодировки перебрал уже : text = '0500031F0202DE0200200418044004380448043A0430002004320020043C043E04380445002004410430043F043E043304300445002004430448043B0435043F0430043B0430D83DDE02' print(bytes....
3 голоса
4 ответа
230 показов

Алгоритм чтения символов UTF-8 из текстового файла

Нашёл статью https://habr.com/ru/company/ruvds/blog/551060/, но не понимаю её, поскольку не знаком с С++ (там есть исходник). Также нашёл RFC на русском https://efim360.ru/rfc-3629-utf-8-format-...
0 голосов
1 ответ
78 показов

Иероглифы в PostgresQL

Установил postgres 14.5, при запуске sql shell частично выводит текст кракозябрами. Как мне это исправить? В настройках стоит Lucida Console 14. Пробовал делать как в похожих проблемах, не помогает. ...
  • 9
0 голосов
0 ответов
14 показов

Кодировка русского текста

С фронта приходит русский текст в userPassword но получаю кракозябры. Использовал MediaType разные, не помогло. Пробовал добавлять @ResponseBody не помогает. На фронте настроил UTF-8 данные приходят ...
0 голосов
0 ответов
58 показов

Проблемы при попытке перевести проект в кодировку UTF-8

Пришла задача привести проект самописной CMS в PSR-12, а значит кодировка файлов приложения должна быть UTF-8 (No BOM). Я, с помощью PHPStorm, разом перевел все документы в UTF-8 (settings -> ...
0 голосов
0 ответов
28 показов

Не добавляется текст в mssql server через Python

Есть таблица в БД mssql - в ней collation по умолчанию Cyrillic_General_CI_AI Из нее , из проблемной колонки старые текстовые данные отображаются в python как ÃÁÓÇ ÐÀ ÀÐÊÁ - это меня не волнует старые ...
1 голос
2 ответа
197 показов

Java - Как преобразовать символы из unicode(10) &#1057 в русские буквы?

Есть файл xml, в котором часть полей представлена в виде: Компенсаци Как в Java сделать преобразование текста из &#1057 (как понимаю это Unicode decimal) в русские буквы? На чистом коде Java 8, ...
1 голос
2 ответа
579 показов

Неправильно отображается кириллица в vscode (почему то только с python). Знаки вопроса вместо символов

Выходные данные в консоли не нормальные русские символы, а ромбики со значками вопроса (ну или как я видел у других людей просто всякие символы непонятные). Менял кодировку файла UFT-8, и кодировку в ...
0 голосов
0 ответов
54 показа

Проблема с чтением html файла. UnicodeEncodeError: 'charmap' codec can't encode character

Тренируюсь писать парсеры. Получив данные по ссылке сохраняю в файл html. Далее открываю файл, и ищу в нем по тегу необходимое. При промежуточной попытке проверить через print, что нашлось, выдает ...
4 голоса
1 ответ
86 показов

Почему компиляторы не могут оптимизировать цикл для std::string?

Почему gcc и clang оптимизируют цикл в memset для std::u8string, но не для std::string? Неужели они считают, что по char& можно изменить N? Значит ли это, что с точки зрения производительности UTF-...
  • 41
0 голосов
0 ответов
55 показов

Слетевшая кодировка в VS Code в расширении Run Code

Расширение Run Code при запуске куска кода выдает результат со слетевшей кодировкой, как испрваить?
0 голосов
0 ответов
17 показов

Не удается прочитать csv модулем Pandas

у нас есть csv в кодировке utf-8, состоящий из данных спарсенных из вк. В нем столбцы id группы, Название группы, Id пользователя. Но по той причине, что в названии группы (второй столбец) могут быть ...
  • 1
0 голосов
1 ответ
96 показов

При объединении файлов SVG с помощью svgutils слетает кириллица

У меня есть 2 SVG файла. В одном из них (петля мебиуса) текст написан кириллицей. Когда объединяю его с другим SVG (со штрих кодом) и открываю получившийся SVG, то текст кириллицей превращается в ...
  • 11
0 голосов
0 ответов
43 показа

Проблема с кодировкой (название сервера)

Столкнулся с проблемой - с сервера (SAMP) приходит название сервера, но в неизвестно какой кодировке. Текст должен быть: RUSSIAN STATE | ТЕСТОВЫЙ. Вот в кодировке utf8: А по факту, как видим ...
0 голосов
0 ответов
692 показа

JS Как перевести unicode в utf-8

У меня проблема, не знаю как преобразовать unicode в UTF-8. У меня есть простенький код. Пытался сменить кодировку с помощью: const utf8 = require('utf8'); utf8.encode(string) Но не вышло. Вот сам ...
0 голосов
0 ответов
146 показов

Решение проблемы кодировки UTF-8 в виде переменной на Windows 10

Всем доброе время суток! Только начал учиться программировать и дошёл до темы записи/чтения в файл. При чтении файла с русским языком внутри в консоли отображаются кракозябры (нарушение кодировки). ...
0 голосов
1 ответ
138 показов

Кракозябры в консоли Clion на Windows 10

#include <cstdio> int main() { (void)std::puts("привет 😊"); } Установил CLion на Windows 10. Поставил encoding для исходника UTF-8. Всё равно печатает как в консоли IDE, так и в ...
0 голосов
0 ответов
13 показов

Кодировка UTF-8 в Clion в Windows 10 не работает [дубликат]

#include <cstdio> int main() { (void)std::puts("привет 😊"); } Установил CLion на Windows 10. Поставил encoding для исходника UTF-8. Всё равно печатает как в консоли IDE, так и в ...
0 голосов
0 ответов
965 показов

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xff in position 0: invalid start byte in django

Сейчас учусь делать проекты на Django и столкнулся с такой проблемой. У меня есть база данных с продуктами, а так же есть dump файл формата json. Этот файл сделал командой python manage.py dumpdata ...
  • 140
0 голосов
0 ответов
18 показов

Изменил utf-8 на utf-16 потом обратно utf-8 вручную в activity_main.xml в строке <?xml version="1.0" encoding="utf-8"?> Появились ошибки. Как решить?

Очень долго мучался как изменить кодировку чтобы в приложении вместо знаков вопросов изображался русский язык. Так и не решил проблему. Перебором случайных значений изменил в activity_main.xml ...
0 голосов
1 ответ
403 показа

Как объяснить VisualStudio, что необходимо использовать utf-8 при сохранении и запуске файла с .py кодом?

Впервые пытаюсь создать файл с кодом на python в VS. на код: print("Привет") ругается сообщением об ошибке: File "D:..." line 1 print("������") ^ ...
0 голосов
1 ответ
555 показов

Кодек utf-8 не может декодировать байт 0xd0 в позиции 0 [закрыт]

Проблема такова - учусь питону, создал код себе для наглядности, а там через раз выскакивает ошибка: Traceback (most recent call last): File "/home/maminhacker/PycharmProjects/pythonProject/txt....
0 голосов
1 ответ
56 показов

Не работает вставка utf8 символов в mssql из-под Апача

Есть сайт написанный на Perl, работает на старой версии Ubuntu server. Начали переезд на новую версию сервера и сделали тестовую инсталяцию на убунте 20.04. Столкнулись с тем, что вставка utf8 ...
  • 195
0 голосов
0 ответов
128 показов

Ошибка UnicodeDecodeError при открытии файла

При попытке открыть текстовый файл docx вылетает ошибка. Такое же происходит и с другими файлами. Я в основном работаю на маке, но решил проверить и на винде, там всё работает. Кто знает в чём ...
  • 1
1 голос
0 ответов
30 показов

Замена backslash при сохранении url в utf8

Сохраняю pandas датафрейм в json в кодировке utf8. В датафрейм есть урлы. | | code | url | |---:|-------:|:---------------------------...
  • 97
0 голосов
1 ответ
41 показ

Текст в csv отображается символами

При парсинге сайта print выводит весь текст в читаемом виде, а при записи в csv, весь не английский текст в виде символов import requests from bs4 import BeautifulSoup import csv headers = { 'Host':...
0 голосов
1 ответ
562 показа

Как с помощью библиотеки jsPDF корректно отобразить в pdf файле русскоязычный текст?

С помощью метода doc.text() пытаюсь добавить русскоязычный текст, но вместо него в pdf файле выводятся цифры и случайные символы, хотя с английским и немецкоязычным текстом все правильно выводится. В ...
0 голосов
1 ответ
45 показов

Как исправить кодировку, чтобы выводились русскоязычные данные?

С помощью Scanner считываю путь до файла, потом эти данные обрабатываю с помощью стримов и вывожу обработанные данные в консоль. Пример кода: public static void main(String[] args) throws ...
0 голосов
1 ответ
55 показов

C++ тесты для валидации UTF-8

Мне нужно написать unit тесты для валидации UTF-8, но не понимаю, как указать некорректную UTF-8 строку в С++: TEST(validation, Tests) { std::string str = "hello"; EXPECT_TRUE(...
  • 713
0 голосов
1 ответ
86 показов

Кодировка в dart

Я делаю запрос на сервер и получаю html с русскими символами, вытаскиваю из него информацию и выдаю. Проблема в том, что символы отображаются вот так: [{\u041f\u0440\u043e\u0447\u0438\u0442\u0430\...
1 голос
3 ответа
182 показа

Кодировка nestJS

Когда я получаю значение от запроса nestJS, то оно возвращает вместо букв "�" такие знаки. Что можно сделать? Как можно поменять кодировку nestJS? Была замена этого @Injectable() export ...
0 голосов
1 ответ
111 показов

Python. Отправить POST запрос со строкой на русском языке

Пытаюсь отправить post запрос r = requests.post(api_server, data=xml, auth=(api_key, api_token)) В переменной xml лежит что-то наподобе: xml = """<?xml version="1.0" ...
0 голосов
0 ответов
71 показ

Как в датафрейме Pandas перекодировать символы на utf-8?

Немного глупый вопрос, но что-то загнался. Реализую прообраз поисковика: он парсит конкретный сайт, сохраняет его тексты, разбирает их аналитически, а следом поможет искать пользователю нужные ему ...