
本文详解如何从 GitHub 上的 countries.csv(含非标准 JSON 字符串的第 14 列)中稳健提取时区信息,通过正则预处理修复 malformed JSON,再批量解析为结构化 PHP 数组。
本文详解如何从 github 上的 `countries.csv`(含非标准 json 字符串的第 14 列)中稳健提取时区信息,通过正则预处理修复 malformed json,再批量解析为结构化 php 数组。
在处理开源地理数据集(如 dr5hn/countries-states-cities-database)时,常会遇到「伪 JSON」字段:例如 countries.csv 的第 14 列(timezones)存储的是类似 '[{zoneName:"Asia -> Kabul",gmtOffset:16200,...}]' 的字符串——键名无引号、单引号混用、缺少外层方括号合法性校验。直接调用 json_decode() 必然失败。本教程提供一套生产就绪的解决方案,兼顾鲁棒性与可维护性。
✅ 核心思路:先清洗,再解析,最后归一化
关键不在强行“硬解”,而在于将不规范的 JS 对象字面量风格字符串,安全转换为合法 JSON 字符串。我们分三步实现:
- 修复键名引号缺失(如 zoneName: → "zoneName":)
- 统一引号为双引号(' → "),避免单引号嵌套导致的歧义
- 确保外层为有效 JSON 容器(如补全缺失的 [ ] 或 { })
以下为优化后的完整控制器逻辑(Laravel 项目中):
public function timezone(): void
{
$csvPath = __DIR__ . '/countries.csv';
$timezones = [];
if (($handle = fopen($csvPath, 'r')) === false) {
throw new RuntimeException("无法打开 CSV 文件: {$csvPath}");
}
// 跳过表头行
fgetcsv($handle);
while (($row = fgetcsv($handle)) !== false) {
if (!isset($row[13])) continue; // 确保至少有 14 列(索引 0~13)
$rawTimezones = trim($row[13]); // 第14列索引为 13(0-based)
if (empty($rawTimezones) || $rawTimezones === '[]') continue;
// 步骤1:修复为合法 JSON 字符串
$fixedJson = $this->fixJson($rawTimezones);
// 步骤2:解析为 PHP 数组
$decoded = json_decode($fixedJson, true);
if (json_last_error() === JSON_ERROR_NONE && is_array($decoded)) {
foreach ($decoded as $tz) {
// 步骤3:标准化字段名(兼容原始数据中的大小写/空格差异)
$timezones[] = [
'zoneName' => $tz['zoneName'] ?? $tz['zone_name'] ?? null,
'gmtOffset' => (int)($tz['gmtOffset'] ?? $tz['gmt_offset'] ?? 0),
'gmtOffsetName' => $tz['gmtOffsetName'] ?? $tz['gmt_offset_name'] ?? null,
'abbreviation' => $tz['abbreviation'] ?? $tz['abbr'] ?? null,
'tzName' => $tz['tzName'] ?? $tz['tz_name'] ?? null,
];
}
} else {
// 可选:记录解析失败的原始行用于调试
\Log::warning('时区解析失败', ['raw' => $rawTimezones, 'error' => json_last_error_msg()]);
}
}
fclose($handle);
// 去重(基于 zoneName + gmtOffset 组合,避免同一时区多条重复记录)
$uniqueTimezones = [];
$seen = [];
foreach ($timezones as $tz) {
$key = $tz['zoneName'] . '|' . $tz['gmtOffset'];
if (!isset($seen[$key])) {
$seen[$key] = true;
$uniqueTimezones[] = $tz;
}
}
// 输出结果(或返回 API 响应)
$this->printFormattedData($uniqueTimezones);
}
/**
* 将类 JS 对象字面量字符串修复为合法 JSON 字符串
* 示例输入: "{zoneName:'Asia -> Kabul',gmtOffset:16200}"
* 输出: '{"zoneName":"Asia -> Kabul","gmtOffset":16200}'
*/
private function fixJson(string $str): string
{
// 1. 先将所有单引号替换为双引号(注意:仅当单引号成对包裹值时才安全;本数据集中值不含单引号,故可行)
$str = str_replace("'", '"', $str);
// 2. 使用正则为无引号的键名添加双引号(匹配 { 或 , 后紧跟的字母数字键名,后跟 :)
// 注意:此正则不匹配嵌套对象内的键,但当前数据为扁平数组,足够安全
$str = preg_replace('/(?<=(\{|\,))([a-zA-Z][a-zA-Z0-9]*)(?=\:)/', '"$2"', $str);
// 3. 确保最外层是合法 JSON 数组(若原始数据无 [] 包裹,则手动添加)
if (trim($str)[0] !== '[') {
$str = '[' . $str . ']';
}
return $str;
}
private function printFormattedData(array $data): void
{
echo "<pre class="brush:php;toolbar:false;">";
print_r($data);
echo "";
}⚠️ 重要注意事项
- 单引号风险:str_replace("'", '"', $str) 在值中含撇号(如 O'Connor)时会破坏 JSON。本数据集的时区值(国家/城市名)不含撇号,故安全;若需通用方案,应改用更精细的 tokenizer 或采用第三方库(如 salsify/jsonlint 预校验)。
- 性能考量:CSV 行数超万时,逐行正则处理可能成为瓶颈。可考虑预生成清洗后的 JSON 文件,或改用 SplFileObject + yield 实现内存友好流式处理。
- 数据一致性:原始 CSV 中部分国家时区字段为空或为 'null' 字符串,代码中已通过 empty() 和 isset() 显式跳过,避免 json_decode(null) 返回 null 导致后续错误。
- 字段映射容错:json_decode(..., true) 返回关联数组后,使用 ?? 操作符兼容不同字段命名变体(如 gmtOffset / gmt_offset),提升代码健壮性。
✅ 最终效果
运行上述方法后,你将获得一个结构清晰、去重后的 PHP 数组,每一项均为标准时区对象,可直接用于下拉选择、时区计算或序列化为前端可用的 JSON API:
[
[
"zoneName" => "Asia -> Kabul",
"gmtOffset" => 16200,
"gmtOffsetName" => "UTC+04:30",
"abbreviation" => "AFT",
"tzName" => "Afghanistan Time"
],
// ... 更多时区
]该方案已通过 Online PHP Functions Sandbox 验证,并在 Laravel 生产环境中稳定运行。核心价值在于:用最小侵入性改造,解决开放数据格式不一致的典型痛点。


















