Как заставить MySQL правильно обрабатывать UTF-8

Один из ответов на вопрос, который я задал вчера, предполагал, что я должен убедиться, что моя база данных может правильно обрабатывать символы UTF-8. Как я могу это сделать с MySQL?

Обновить:

Краткий ответ - вы почти всегда должны использовать utf8mb4кодировку и utf8mb4_unicode_ciсопоставление.

Чтобы изменить базу данных:

ALTER DATABASE dbname CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Видеть:

• Комментарий Аарона к этому ответу Как заставить MySQL правильно обрабатывать UTF-8

• В чем разница между utf8_general_ci и utf8_unicode_ci

• Руководство по преобразованию: https://dev.mysql.com/doc/refman/5.5/en/charset-unicode-conversion.html

Оригинальный ответ:

MySQL 4.1 и выше имеет набор символов по умолчанию UTF-8. Вы можете проверить это в своем my.cnfфайле, не забудьте установить и клиент, и сервер ( default-character-setи character-set-server).

Если у вас есть данные, которые вы хотите преобразовать в UTF-8, сделайте дамп своей базы данных и импортируйте ее обратно как UTF-8, убедившись, что:

• использовать SET NAMES utf8перед запросом / вставкой в ​​базу данных
• использовать DEFAULT CHARSET=utf8при создании новых таблиц
• на этом этапе ваш клиент и сервер MySQL должны быть в UTF-8 (см. my.cnf). помните, что любые используемые вами языки (например, PHP) также должны быть UTF-8. Некоторые версии PHP будут использовать собственную клиентскую библиотеку MySQL, которая может не поддерживать UTF-8.

Если вы действительно хотите перенести существующие данные, не забудьте сначала сделать резервную копию! Когда что-то пойдет не так, как планировалось, может произойти много странного измельчения данных!

Некоторые ресурсы:

• полная миграция UTF-8 (cdbaby.com)
• статья о готовности функций php к UTF-8 (обратите внимание, что часть этой информации устарела)

Чтобы сделать это «постоянным», в my.cnf:

[client]
default-character-set=utf8
[mysqld]
character-set-server = utf8

Чтобы проверить, зайдите в клиент и покажите несколько переменных:

SHOW VARIABLES LIKE 'character_set%';

Убедитесь, что они все utf8, кроме того ..._filesystem, что должно быть binaryи ..._dir, что указывает где-то в установке MySQL.

MySQL 4.1 и выше имеет вызываемый по умолчанию набор символов, utf8но на самом деле это только подмножество UTF-8 (допускает только трехбайтовые символы и меньше).

Используйте в utf8mb4качестве кодировки, если хотите "полный" UTF-8.

Краткий ответ: Используйте utf8mb4в 4 местах:

• Байты в вашем клиенте - это utf8, а не latin1 / cp1251 / etc.
• SET NAMES utf8mb4 или что-то подобное при установке клиентского подключения к MySQL
• CHARACTER SET utf8mb4 во всех таблицах / столбцах, кроме столбцов, которые имеют строго ascii / hex / country_code / zip_code / и т. д.
• <meta charset charset=UTF-8>если вы выводите в HTML. (Да, здесь другое написание.)

Больше информации ;
UTF8 полностью

Вышеупомянутые ссылки предоставляют «подробный канонический ответ, необходимый для решения всех проблем». - На этом форуме есть ограниченное пространство.

редактировать

В дополнение к тому, что в нем CHARACTER SET utf8mb4содержатся «все» символы мира, COLLATION utf8mb4_unicode_520_ciможно утверждать, что это «лучшее универсальное» сопоставление для использования. (Есть также сопоставления на турецком, испанском и т. Д. Для тех, кому нужны нюансы на этих языках.)

Кодировка - это свойство базы данных (по умолчанию) и таблицы. Вы можете посмотреть (команды MySQL):

show create database foo; 
> CREATE DATABASE  `foo`.`foo` /*!40100 DEFAULT CHARACTER SET latin1 */

show create table foo.bar;
> lots of stuff ending with
> ) ENGINE=InnoDB AUTO_INCREMENT=252 DEFAULT CHARSET=latin1

Другими словами; Проверить кодировку базы данных или изменить ее довольно легко:

ALTER TABLE `foo`.`bar` CHARACTER SET utf8;

Чтобы изменить кодировку набора символов на UTF-8 для самой базы данных, введите следующую команду в командной строке mysql>. ИСПОЛЬЗОВАНИЕ ALTER DATABASE.. Замените DBNAME именем базы данных:

ALTER DATABASE DBNAME CHARACTER SET utf8 COLLATE utf8_general_ci;

Это дубликат этого вопроса. Как преобразовать весь набор символов и сопоставление базы данных MySQL в UTF-8?

Я последовал решению Хавьера, но добавил несколько других строк в my.cnf:

[myslqd]
skip-character-set-client-handshake
collation_server=utf8_unicode_ci
character_set_server=utf8 

Я нашел эту идею здесь: http://dev.mysql.com/doc/refman/5.0/en/charset-server.html в первом / единственном комментарии пользователя внизу страницы. Он упоминает, что рукопожатие клиента с пропуском набора символов имеет некоторое значение.

Эти советы по MySQL и UTF-8 могут быть полезны. К сожалению, они не представляют собой полного решения, это просто общие ошибки.

Установите свой , database collationчтобы UTF-8 затем применить table collationк невыполнению базы данных.

Ваш ответ: вы можете настроить MySql Settings. В «Моем ответе» может быть что-то вырванное из контекста, но это также поможет вам.
как настроить Character SetиCollation .

Для приложений, которые хранят данные с использованием набора символов MySQL по умолчанию и функции сопоставления ( latin1, latin1_swedish_ci), не требуется специальной настройки. Если приложениям требуется хранение данных с использованием другого набора символов или сопоставления, вы можете настроить информацию о наборе символов несколькими способами:

• Укажите параметры символов для каждой базы данных. Например, приложениям, использующим одну базу данных, может потребоваться utf8, тогда как приложениям, использующим другую базу данных, может потребоваться sjis.
• Укажите параметры символов при запуске сервера. Это заставляет сервер использовать данные настройки для всех приложений, которые не делают других договоренностей.
• Укажите параметры символов во время конфигурации , если вы собираете MySQL из исходников. Это заставляет сервер использовать данные настройки для всех приложений без необходимости указывать их при запуске сервера.

Примеры, показанные здесь для вашего вопроса, чтобы установить набор символов utf8, здесь также установите сопоставление для большей полезности ( utf8_general_ciсопоставление`).

Укажите параметры символов для каждой базы данных

  CREATE DATABASE new_db
  DEFAULT CHARACTER SET utf8
  DEFAULT COLLATE utf8_general_ci;

Укажите параметры персонажа при запуске сервера

[mysqld]
character-set-server=utf8
collation-server=utf8_general_ci

Укажите параметры символов во время конфигурации MySQL

shell> cmake . -DDEFAULT_CHARSET=utf8 \
           -DDEFAULT_COLLATION=utf8_general_ci

Чтобы увидеть значения системных переменных набора символов и сопоставления, которые применяются к вашему соединению, используйте эти операторы:

SHOW VARIABLES LIKE 'character_set%';
SHOW VARIABLES LIKE 'collation%';

Это может быть длинный ответ, но есть все способы, которыми вы можете воспользоваться. Надеюсь, мой ответ будет вам полезен. для получения дополнительной информации http://dev.mysql.com/doc/refman/5.7/en/charset-applications.html

SET NAMES UTF8

Это трюк

ПОДКЛЮЧЕНИЕ БАЗЫ ДАННЫХ К UTF-8

$connect = mysql_connect('$localhost','$username','$password') or die(mysql_error());
mysql_set_charset('utf8',$connect);
mysql_select_db('$database_name','$connect') or die(mysql_error());

Установите соединение с базой данных в UTF8:

  if($handle = @mysql_connect(DB_HOST, DB_USER, DB_PASS)){          
         //set to utf8 encoding
         mysql_set_charset('utf8',$handle);
  }

Смогла найти решение. Выполните следующее, как указано на http://technoguider.com/2015/05/utf8-set-up-in-mysql/

SET NAMES UTF8;
set collation_server = utf8_general_ci;
set default-character-set = utf8;
set init_connect = ’SET NAMES utf8′;
set character_set_server = utf8;
set character_set_client = utf8;