讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 Qdrant 中安全地向现有图像集合追加新数据而不清空旧数据

小静姑娘_1545

小静姑娘_1545

发布时间:2026-02-01 10:08:01

|

182人浏览过

|

来源于php中文网

原创

如何在 Qdrant 中安全地向现有图像集合追加新数据而不清空旧数据

qdrant 支持动态扩展现有集合,无需重建数据库;关键在于避免使用 recreate_collection,改用 create_collection(仅首次调用),并确保新增记录使用唯一 id。

在使用 Qdrant 进行图像相似性搜索时,一个常见误区是误将 recreate_collection() 当作“初始化或更新集合”的通用方法。实际上,recreate_collection 会无条件删除已有同名集合及其全部数据,再新建空集合——这正是您每次运行脚本时旧图像丢失的根本原因。

✅ 正确做法:创建一次,持续追加

您应当将集合创建与数据插入逻辑分离:

macOS UI 自动化技能包 —— 用 Python 控制你的 Mac
macOS UI 自动化技能包 —— 用 Python 控制你的 Mac

让 macOS 自动化像说话一样简单 —— 用代码控制你的 Mac,无需学习 AppleScript 系统要求 macOS 14+ (Sonoma) Python 3.9+ 需要开启:辅助功能 + 屏幕录制权限

下载
  • 首次运行:调用 create_collection() 创建集合(需确保集合尚不存在);
  • 后续运行:跳过创建步骤,直接调用 upload_records() 或 upsert_points() 追加新向量与元数据;
  • 关键保障:所有插入记录的 id 必须全局唯一(例如使用 UUID、哈希文件路径或自增序列),避免因 ID 冲突导致覆盖或报错。

以下是修正后的核心逻辑片段(适配您的 image_to_database 方法):

# ✅ 替换原来的 recreate_collection 调用
if not qclient.collection_exists(collection_name):
    qclient.create_collection(
        collection_name=collection_name,
        vectors_config=VectorParams(
            size=embedding_length,
            distance=Distance.COSINE
        )
    )
    print(f"✅ Collection '{collection_name}' created.")
else:
    print(f"ℹ️ Collection '{collection_name}' already exists. Skipping creation.")

# ✅ 为每条新记录生成唯一 ID(推荐使用 UUID)
import uuid
records = [
    models.Record(
        id=str(uuid.uuid4()),  # ← 关键:确保每次插入 ID 唯一
        payload=payload_dicts[idx],
        vector=embeddings[idx].tolist()  # 注意:.tolist() 确保为 Python list,非 torch.Tensor
    )
    for idx in range(len(payload_dicts))
]

# ✅ 使用 upload_records 追加(自动去重 ID,不覆盖已有数据)
qclient.upload_records(
    collection_name=collection_name,
    records=records
)

⚠️ 注意事项与最佳实践

  • 向量类型兼容性:确保新增向量维度(size)与原始集合完全一致,否则 upload_records 将报错;
  • ID 冲突风险:若重复使用相同整数 ID(如 idx),新记录将覆盖旧记录——务必使用不可预测/全局唯一的 ID;
  • 批量性能优化:单次 upload_records 可处理数千条记录;如需高频小批量插入,可改用 upsert_points;
  • 生产环境建议:将集合初始化逻辑抽离为独立脚本或增加幂等检查(如 collection_exists),避免部署时误删数据。

通过以上调整,您即可实现图像库的平滑演进:无论何时新增图片,只需运行同一段代码,历史数据毫发无损,真正发挥 Qdrant 作为向量数据库的持久化与扩展能力。

热门AI工具

更多
UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

相关专题

更多
数据库三范式
数据库三范式

数据库三范式是一种设计规范,用于规范化关系型数据库中的数据结构,它通过消除冗余数据、提高数据库性能和数据一致性,提供了一种有效的数据库设计方法。本专题提供数据库三范式相关的文章、下载和课程。

2865

2023.06.29

如何删除数据库
如何删除数据库

删除数据库是指在MySQL中完全移除一个数据库及其所包含的所有数据和结构,作用包括:1、释放存储空间;2、确保数据的安全性;3、提高数据库的整体性能,加速查询和操作的执行速度。尽管删除数据库具有一些好处,但在执行任何删除操作之前,务必谨慎操作,并备份重要的数据。删除数据库将永久性地删除所有相关数据和结构,无法回滚。

4041

2023.08.14

vb怎么连接数据库
vb怎么连接数据库

在VB中,连接数据库通常使用ADO(ActiveX 数据对象)或 DAO(Data Access Objects)这两个技术来实现:1、引入ADO库;2、创建ADO连接对象;3、配置连接字符串;4、打开连接;5、执行SQL语句;6、处理查询结果;7、关闭连接即可。

3211

2023.08.31

MySQL恢复数据库
MySQL恢复数据库

MySQL恢复数据库的方法有使用物理备份恢复、使用逻辑备份恢复、使用二进制日志恢复和使用数据库复制进行恢复等。本专题为大家提供MySQL数据库相关的文章、下载、课程内容,供大家免费下载体验。

1007

2023.09.05

vb中怎么连接access数据库
vb中怎么连接access数据库

vb中连接access数据库的步骤包括引用必要的命名空间、创建连接字符串、创建连接对象、打开连接、执行SQL语句和关闭连接。本专题为大家提供连接access数据库相关的文章、下载、课程内容,供大家免费下载体验。

2807

2023.10.09

数据库对象名无效怎么解决
数据库对象名无效怎么解决

数据库对象名无效解决办法:1、检查使用的对象名是否正确,确保没有拼写错误;2、检查数据库中是否已存在具有相同名称的对象,如果是,请更改对象名为一个不同的名称,然后重新创建;3、确保在连接数据库时使用了正确的用户名、密码和数据库名称;4、尝试重启数据库服务,然后再次尝试创建或使用对象;5、尝试更新驱动程序,然后再次尝试创建或使用对象。

2807

2023.10.16

vb连接access数据库的方法
vb连接access数据库的方法

vb连接access数据库方法:1、使用ADO连接,首先导入System.Data.OleDb模块,然后定义一个连接字符串,接着创建一个OleDbConnection对象并使用Open() 方法打开连接;2、使用DAO连接,首先导入 Microsoft.Jet.OLEDB模块,然后定义一个连接字符串,接着创建一个JetConnection对象并使用Open()方法打开连接即可。

2933

2023.10.16

vb连接数据库的方法
vb连接数据库的方法

vb连接数据库的方法有使用ADO对象库、使用OLEDB数据提供程序、使用ODBC数据源等。详细介绍:1、使用ADO对象库方法,ADO是一种用于访问数据库的COM组件,可以通过ADO连接数据库并执行SQL语句。可以使用ADODB.Connection对象来建立与数据库的连接,然后使用ADODB.Recordset对象来执行查询和操作数据;2、使用OLEDB数据提供程序方法等等。

2621

2023.10.19

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

20

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn