Como fazer o MySQL lidar com UTF-8 corretamente

Uma das respostas a uma pergunta que fiz ontem sugeriu que eu deveria ter certeza de que meu banco de dados pode lidar com caracteres UTF-8 corretamente. Como posso fazer isso com o MySQL?

Atualizar:

Resposta curta - você quase sempre deve usar o conjunto de utf8mb4caracteres e o utf8mb4_unicode_ciagrupamento.

Para alterar o banco de dados:

ALTER DATABASE dbname CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Vejo:

• Comentário de Aaron sobre esta resposta Como fazer o MySQL lidar com UTF-8 corretamente

• Qual é a diferença entre utf8_general_ci e utf8_unicode_ci

• Guia de conversão: https://dev.mysql.com/doc/refman/5.5/en/charset-unicode-conversion.html

Resposta Original:

O MySQL 4.1 e superior tem um conjunto de caracteres padrão UTF-8. Você pode verificar isso em seu my.cnfarquivo, lembre-se de definir o cliente e o servidor ( default-character-sete character-set-server).

Se você tiver dados que deseja converter para UTF-8, descarte seu banco de dados e importe-o de volta como UTF-8 certificando-se de:

• use SET NAMES utf8antes de consultar / inserir no banco de dados
• usar DEFAULT CHARSET=utf8ao criar novas tabelas
• neste ponto, seu cliente e servidor MySQL devem estar em UTF-8 (consulte Recursos my.cnf). lembre-se de que todas as linguagens que você usa (como PHP) também devem ser UTF-8. Algumas versões do PHP usarão sua própria biblioteca cliente MySQL, que pode não ser compatível com UTF-8.

Se você deseja migrar os dados existentes, lembre-se de fazer o backup primeiro! Muitos dados estranhos podem acontecer quando as coisas não saem como planejado!

Alguns recursos:

• migração UTF-8 completa (cdbaby.com)
• artigo sobre UTF-8 prontidão de funções php (observe que algumas dessas informações estão desatualizadas)

Para tornar isso 'permanente', em my.cnf:

[client]
default-character-set=utf8
[mysqld]
character-set-server = utf8

Para verificar, vá até o cliente e mostre algumas variáveis:

SHOW VARIABLES LIKE 'character_set%';

Verifique se eles são todos utf8, exceto o ..._filesystemque deve ser binarye ..._dir, que aponta para algum lugar na instalação do MySQL.

O MySQL 4.1 e superior tem um conjunto de caracteres padrão que ele chama, utf8mas que na verdade é apenas um subconjunto de UTF-8 (permite apenas caracteres de três bytes e menores).

Use utf8mb4como seu conjunto de caracteres se desejar UTF-8 "completo".

A resposta curta: Use utf8mb4em 4 lugares:

• Os bytes em seu cliente são utf8, não latin1 / cp1251 / etc.
• SET NAMES utf8mb4 ou algo equivalente ao estabelecer a conexão do cliente ao MySQL
• CHARACTER SET utf8mb4 em todas as tabelas / colunas - exceto colunas estritamente ascii / hex / country_code / zip_code / etc.
• <meta charset charset=UTF-8>se você estiver enviando para HTML. (Sim, a grafia é diferente aqui.)

Mais informações ;
UTF8 até o fim

Os links acima fornecem a "resposta canônica detalhada necessária para resolver todas as questões". - Existe um limite de espaço neste fórum.

Editar

Além de CHARACTER SET utf8mb4conter "todos" os personagens do mundo, COLLATION utf8mb4_unicode_520_cié discutível o agrupamento "melhor versátil" para usar. (Existem também agrupamentos turco, espanhol, etc., para quem deseja as nuances nesses idiomas.)

O conjunto de caracteres é uma propriedade do banco de dados (padrão) e da tabela. Você pode dar uma olhada (comandos MySQL):

show create database foo; 
> CREATE DATABASE  `foo`.`foo` /*!40100 DEFAULT CHARACTER SET latin1 */

show create table foo.bar;
> lots of stuff ending with
> ) ENGINE=InnoDB AUTO_INCREMENT=252 DEFAULT CHARSET=latin1

Em outras palavras; é muito fácil verificar o conjunto de caracteres do seu banco de dados ou alterá-lo:

ALTER TABLE `foo`.`bar` CHARACTER SET utf8;

Para alterar a codificação do conjunto de caracteres para UTF-8 para o próprio banco de dados, digite o seguinte comando no prompt mysql>. USE ALTER DATABASE.. Substitua DBNAME pelo nome do banco de dados:

ALTER DATABASE DBNAME CHARACTER SET utf8 COLLATE utf8_general_ci;

Esta é uma duplicata desta questão. Como converter um conjunto de caracteres e agrupamento de banco de dados MySQL inteiro para UTF-8?

Segui a solução de Javier, mas adicionei algumas linhas diferentes em my.cnf:

[myslqd]
skip-character-set-client-handshake
collation_server=utf8_unicode_ci
character_set_server=utf8 

Eu encontrei essa ideia aqui: http://dev.mysql.com/doc/refman/5.0/en/charset-server.html no primeiro / único comentário do usuário na parte inferior da página. Ele menciona que o handshake skip-character-set-client-client tem alguma importância.

Essas dicas sobre MySQL e UTF-8 podem ser úteis. Infelizmente, eles não constituem uma solução completa, apenas pegadinhas comuns.

Defina seu database collationpara, em UTF-8 seguida, aplique table collationao padrão do banco de dados.

Sua resposta é que você pode configurar por MySql Settings. Em Minha Resposta pode haver algo fora do contexto, mas isso também é uma ajuda para você.
como configurar Character SeteCollation .

Para aplicativos que armazenam dados usando o conjunto de caracteres MySQL padrão e collation ( latin1, latin1_swedish_ci), nenhuma configuração especial deve ser necessária. Se os aplicativos exigem armazenamento de dados usando um conjunto de caracteres ou agrupamento diferente, você pode configurar as informações do conjunto de caracteres de várias maneiras:

• Especifique as configurações de caracteres por banco de dados. Por exemplo, os aplicativos que usam um banco de dados podem exigir utf8, enquanto os aplicativos que usam outro banco de dados podem exigir sjis.
• Especifique as configurações de caracteres na inicialização do servidor. Isso faz com que o servidor use as configurações fornecidas para todos os aplicativos que não fazem outros arranjos.
• Especifique as configurações de caracteres no momento da configuração , se você construir o MySQL a partir da fonte. Isso faz com que o servidor use as configurações fornecidas para todos os aplicativos, sem ter que especificá-las na inicialização do servidor.

Os exemplos mostrados aqui para sua pergunta definir conjunto de caracteres utf8, aqui também definir agrupamento para mais útil ( utf8_general_ciagrupamento`).

Especifique as configurações de caracteres por banco de dados

  CREATE DATABASE new_db
  DEFAULT CHARACTER SET utf8
  DEFAULT COLLATE utf8_general_ci;

Especifique as configurações de caractere na inicialização do servidor

[mysqld]
character-set-server=utf8
collation-server=utf8_general_ci

Especifique as configurações de caracteres no momento da configuração do MySQL

shell> cmake . -DDEFAULT_CHARSET=utf8 \
           -DDEFAULT_COLLATION=utf8_general_ci

Para ver os valores do conjunto de caracteres e das variáveis ​​do sistema de agrupamento que se aplicam à sua conexão, use estas instruções:

SHOW VARIABLES LIKE 'character_set%';
SHOW VARIABLES LIKE 'collation%';

Esta pode ser uma resposta demorada, mas há todas as maneiras que você pode usar. Espero que minha resposta seja útil para você. para obter mais informações http://dev.mysql.com/doc/refman/5.7/en/charset-applications.html

SET NAMES UTF8

Isso resolve o problema

CONEXÃO DA BASE DE DADOS COM UTF-8

$connect = mysql_connect('$localhost','$username','$password') or die(mysql_error());
mysql_set_charset('utf8',$connect);
mysql_select_db('$database_name','$connect') or die(mysql_error());

Defina sua conexão de banco de dados para UTF8:

  if($handle = @mysql_connect(DB_HOST, DB_USER, DB_PASS)){          
         //set to utf8 encoding
         mysql_set_charset('utf8',$handle);
  }

Consegui encontrar uma solução. Executou o seguinte conforme especificado em http://technoguider.com/2015/05/utf8-set-up-in-mysql/

SET NAMES UTF8;
set collation_server = utf8_general_ci;
set default-character-set = utf8;
set init_connect = ’SET NAMES utf8′;
set character_set_server = utf8;
set character_set_client = utf8;