Lumen MySQL 查询未按预期处理 UTF8 值

Question

我正在处理一个使用 UTF8 编码并且有许多包含特殊字符的用户名的数据库，例如“˒ђ ▫ Sony”

查询用户 table 时，Lumen 返回错误数据。我已经尝试使用 mysqli 和 PDO 查询相同的 table 并且我收到了预期的结果。我设置了一个示例路由来测试它：

$app->get("charset", function() {
    $mysqli = new mysqli("localhost", "user", "password", "database");
    $res = $mysqli->query("select name from users where id = 1");

    $dbh = new PDO('mysql:host=localhost;dbname=database', "user", "password");
    $stmt = $dbh->query("select name from users where id = 1");

    $lumen = DB::select("select name from users where id = 1");

    return response()->json([
        "mysqli" => $res->fetch_assoc(),
        "pdo" => $stmt->fetchAll(PDO::FETCH_ASSOC),
        "framework" => $lumen
    ]);
});

访问路由时，得到如下响应：

{
  "mysqli": {
    "name": "Ғђ ▫ Sony"
  },
  "pdo": [
    {
      "name": "Ғђ ▫ Sony"
    }
  ],
  "framework": [
    {
      "name": "Ò’Ñ’ â–« Sony"
    }
  ]
}

以下是响应的屏幕截图，以防上面的文本显示不正确：

据我所知，Lumen 的 MySQL 配置默认为 UTF8 且不可更改 - 我在 vendor/laravel/lumen-framework/config/database 中发现以下内容：

'mysql' => [
    'driver'    => 'mysql',
    'host'      => env('DB_HOST', 'localhost'),
    'database'  => env('DB_DATABASE', 'forge'),
    'username'  => env('DB_USERNAME', 'forge'),
    'password'  => env('DB_PASSWORD', ''),
    'charset'   => 'utf8',
    'collation' => 'utf8_unicode_ci',
    'prefix'    => env('DB_PREFIX', ''),
    'timezone'  => env('DB_TIMEZONE','+00:00'),
    'strict'    => false,
],

我不知道是什么原因造成的。我还能做些什么来尝试找出这种差异？

Answer 1

此答案基于我之前的上述评论。

MySQL 连接字符集定义了 MySQL 客户端 (PHP) 和服务器之间通信使用的编码。在实际的 MySQL table 中使用什么编码作为内部编码并不重要。 MySQL 服务器会自动在 table 编码和连接编码之间转换数据。因此，连接编码基本上定义了您希望从 MySQL 获取数据的格式，以及您将数据插入到 MySQL.

的格式。

您确定数据库中的数据以 utf8 编码正确吗？

似乎您只将 UTF8 用于 lumen DB 连接（如果这是默认设置），但您没有将 UTF8 用于 mysqli 或 PDO 连接示例。如果使用 $mysqli->set_charset("utf8"); 设置 mysqli 字符集，使用 new PDO('mysql:host=localhost;dbname=database;charset=utf8', "user", "password"); 设置 PDO 字符集，是否会得到相同的结果？

根据您的代码和输出示例，您似乎正确地从 lumen DB 连接获取 UTF8 格式的数据，但输出未显示为 UTF8。

这也解释了为什么 mysqli 和 PDO 输出正确显示，因为它们没有以 UTF8 格式返回数据（因为您没有将它们的连接字符集设置为 UTF8），但默认情况下它们似乎与您使用的任何编码相匹配'正在显示输出（显然 "latin1" 或兼容）。

如果您在网络浏览器中查看输出，请确保输出页面字符集定义正确（例如使用 header）。

编辑：

顺便说一句，只要连接编码与通过连接发送的数据的编码相匹配，插入数据的其他系统使用什么连接编码并不重要。

将连接编码设置为 latin1 意味着当您执行 SELECT 时，您将获得 latin1 的字符串数据。所以看起来你的输出被处理为 latin1 而不是 UTF-8。如果您修复脚本输出以正确显示 "as UTF-8" 而不是您的输出环境（例如网络浏览器）支持它，可能会更好。因为否则，如果您需要处理无法在 latin1 中显示的字符，就会遇到问题。尽管如果您输出到 CLI terminal/console 而不是，那么您当然应该使用与默认终端编码相同的编码（可以是 UTF-8 或其他）。我更喜欢将我的 Linux 终端也配置为 UTF-8。

Lumen MySQL 查询未按预期处理 UTF8 值

Lumen MySQL query not handling UTF8 value as expected

php

mysql

laravel

illuminate-container

lumen