使用xorm框架的distinct方法去除重复数据,核心是调用引擎或会话对象的`distinct`函数指定去重列名,并配合`find`或`count`执行查询。该方法会生成带有`distinct`关键字的sql语句,直接作用于数据库层面进行过滤。若需获取去重后的完整记录,通常结合`group`使用;若仅需统计数量,则直接使用`count`即可。

如何查询特定列的去重值列表
要获取某一列(如用户名)的所有不重复值,应使用`engine.Distinct("column_name").Find(&results)`。这里`results`必须是一个结构体切片,即使你只关心那一列的值,XORM也需要一个目标对象来映射结果。如果只想看数值而不需要映射到结构体字段,可以查询后从结构体中提取对应字段。注意,`Distinct`生成的SQL通常只包含指定的列,如果查询其他列,行为取决于数据库模式(如MySQL的ONLY_FULL_GROUP_BY)。

package main
import (
"fmt"
_ "github.com/go-sql-driver/mysql"
"xorm.io/xorm"
)
type User struct {
ID int64 `xorm:"pk autoincr"`
Name string `xorm:"varchar(50)"`
Age int `xorm:"int"`
}
func main() {
// 初始化引擎,替换为你的DSN
env, err := xorm.NewEngine("mysql", "root:root@tcp(127.0.0.1:3306)/testdb")
if err != nil {
panic(err)
}
defer env.Close()
// 同步表结构
env.Sync2(new(User))
// 假设表中已有数据:Alice(1), Bob(2), Alice(3)
// 查询所有不重复的 Name
var names []User
err = env.Distinct("name").Find(&names)
if err != nil {
panic(err)
}
for _, u := range names {
fmt.Printf("Unique Name: %s\n", u.Name)
}
}预期输出:
Unique Name: Alice
Unique Name: Bob
如何统计去重后的记录总数
当只需要知道去重后有多少条记录时,使用`engine.Distinct("column_name").Count()`是最优解。它直接返回整数类型的计数结果,避免了将数据加载到内存中的开销。此方法同样生成标准的`SELECT COUNT(DISTINCT column) FROM table` SQL语句,适用于任何支持DISTINCT COUNT语法的数据库。

package main
import (
"fmt"
_ "github.com/go-sql-driver/mysql"
"xorm.io/xorm"
)
type User struct {
ID int64 `xorm:"pk autoincr"`
Name string `xorm:"varchar(50)"`
Age int `xorm:"int"`
}
func main() {
env, err := xorm.NewEngine("mysql", "root:root@tcp(127.0.0.1:3306)/testdb")
if err != nil {
panic(err)
}
defer env.Close()
env.Sync2(new(User))
// 统计不重复的 Name 数量
count, err := env.Distinct("name").Count(new(User))
if err != nil {
panic(err)
}
fmt.Printf("Total unique names: %d\n", count)
}预期输出:
Total unique names: 2
Distinct在组合条件查询时的具体表现
当`Distinct`与`Where`等条件链式调用时,它仅对满足条件的数据进行去重。例如`env.Where("age > 18").Distinct("name").Find(&users)`,数据库会先过滤出年龄大于18的记录,再在这些记录中对`name`列进行去重。此时返回的结构体切片中,每个元素的`Name`字段值是唯一的,但其他字段(如`ID`、`Age`)的值是不确定的,因为SQL标准中非分组列的值在未聚合时是任意的。因此,这种用法适合仅验证某列值的唯一性存在,而不适合依赖其他字段的业务逻辑。


















