
本文详解在 Laravel 中同时获取数据库某列(如 product_bundle_id)的所有唯一非空值,以及该列全部 NULL 记录的完整方案,涵盖原生 SQL 优化、Eloquent 链式查询与集合处理三种专业级实现方式。
本文详解在 laravel 中同时获取数据库某列(如 product_bundle_id)的所有唯一非空值,以及该列全部 null 记录的完整方案,涵盖原生 sql 优化、eloquent 链式查询与集合处理三种专业级实现方式。
在实际业务中,常需从一张表中“去重保留一份,但 NULL 全部保留”——例如商品表 products 中,product_bundle_id 为可空外键:既要选出所有未归属任何组合包(即 NULL)的商品,也要为每个已归属的组合包仅取一条代表商品(避免重复展示同一组合)。这无法通过简单 DISTINCT 或单一 GROUP BY 直接实现,尤其当需返回多字段(如 products.*)时,MySQL 严格模式下 SELECT * GROUP BY column 会报错。
✅ 推荐方案一:原生查询 + IFNULL 分组代理(高性能,推荐生产使用)
利用 IFNULL() 将 NULL 值映射为唯一标识(如 'null_' . id),再按该虚拟列分组,确保每个 NULL 独立成组,而相同非空 ID 自动归并:
use Illuminate\Support\Facades\DB;
$products = DB::table('products')
->leftJoin('product_bundles', 'product_bundles.id', '=', 'products.product_bundle_id')
->select('products.*', DB::raw("IFNULL(products.product_bundle_id, CONCAT('null_', products.id)) as group_key"))
->where('products.product_status', 'active')
->groupBy('group_key')
->get();⚠️ 注意事项:
- 此法依赖 MySQL 函数,若使用 PostgreSQL,请改用
COALESCE(product_bundle_id, -id)或生成 UUID;CONCAT('null_', products.id)确保每个NULL行拥有全局唯一分组键,避免误合并;- 若需关联
product_bundles字段(如包名称),LEFT JOIN已预留扩展能力。
✅ 方案二:Eloquent + 集合去重(开发友好,适合中小数据量)
先全量查询活跃商品,再通过 Laravel Collection 的 unique() 方法按字段去重,并合并 NULL 记录(注意:unique() 默认会将所有 NULL 视为相同值,因此需单独提取):
use App\Models\Product;
$allActive = Product::where('product_status', 'active')->get();
// 提取所有 NULL 记录(全部保留)
$nullProducts = $allActive->filter(fn($p) => is_null($p->product_bundle_id));
// 提取非 NULL 记录并去重(每个 bundle_id 只留第一个)
$nonNullUnique = $allActive
->filter(fn($p) => !is_null($p->product_bundle_id))
->unique('product_bundle_id');
// 合并结果(NULL 在前,保证语义清晰)
$finalProducts = $nullProducts->merge($nonNullUnique)->values();? 优化提示:对大数据集,使用
chunkById()替代get()防止内存溢出:$finalProducts = collect(); Product::where('product_status', 'active') ->chunkById(500, function ($chunk) use (&$finalProducts) { $nulls = $chunk->filter(...); $uniques = $chunk->filter(...)->unique(...); $finalProducts = $finalProducts->merge($nulls)->merge($uniques); });
✅ 方案三:纯 SQL 子查询(完全规避 ORM 限制)
适用于复杂场景或需极致控制执行计划:
$products = DB::select("
SELECT * FROM products p1
WHERE p1.product_status = 'active'
AND (
p1.product_bundle_id IS NULL
OR p1.id = (
SELECT MIN(p2.id)
FROM products p2
WHERE p2.product_bundle_id = p1.product_bundle_id
AND p2.product_status = 'active'
)
)
");此写法逻辑清晰:每条记录要么是 NULL,要么是其 product_bundle_id 组内 id 最小者,天然满足“每个 bundle 仅一条 + 所有 NULL”。
总结
-
首选
IFNULL + GROUP BY:性能最优,兼容关联查询,适合大多数场景; - 集合处理适合快速验证:代码直观,但要注意内存与 N+1 问题;
-
子查询方案最健壮:完全脱离框架限制,适合高一致性要求场景。
无论哪种方式,务必在product_bundle_id和product_status上建立联合索引以提升查询效率:ALTER TABLE products ADD INDEX idx_status_bundle (product_status, product_bundle_id);


















