讲师中心 微信公众号
AI工具推荐 视频效率加速

个人数据看板_本地大模型分析消费记录

轻明君_2985

轻明君_2985

发布时间:2026-05-07 20:02:20

|

264人浏览过

|

来源于php中文网

原创

应统一账单格式、注入领域知识提示词、用Qwen2.5-72B本地推理、构建静态HTML看板;需预处理为四字段DataFrame,用固定9类JSONL输出,分块推理校验,本地绘图嵌入HTML。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

如果您尝试用本地大模型分析个人消费记录并构建可视化看板,但数据无法被准确解析或分类结果失真,则可能是由于原始账单格式混乱、字段未对齐或模型缺乏上下文约束。以下是解决此问题的步骤:

一、统一账单格式与结构化预处理

本地大模型不具备直接解析多源异构CSV的能力,必须先将微信、支付宝、拼多多等平台导出的账单转换为标准字段结构。预处理目标是生成含时间、金额、商户名、交易类型四列的干净DataFrame,消除编码错误、空行、标题偏移等问题。

1、使用chardet检测各账单文件真实编码,避免乱码导致字段错位。

2、按平台定制skip_rows参数:微信账单跳过前5行说明文字,支付宝跳过前3行汇总行,拼多多保留首行表头但重命名列名为“date,amount,merchant,type”。

3、对商户名执行标准化清洗:去除“【】”“*”等符号,合并“星巴克(上海)”“星巴克(北京)”为“星巴克”,统一大小写与空格。

4、将所有账单concat后按date列转为datetime64类型,并补全缺失的amount字段为0,确保数值列可参与后续聚合。

二、注入领域知识约束提示词

通用大模型在无约束下易对消费记录产生幻觉分类,例如将“京东物流”误判为“购物”,或将“医保统筹支付”归入“医疗”。需通过结构化提示词强制输出确定性标签体系,并限制输出格式为JSONL。

1、定义固定分类树:餐饮、交通、购物、医疗、娱乐、房租、工资、转账、其他,共9类,每类附3个典型商户示例。

2、构造系统提示:“你是一个家庭财务审计助手,仅根据商户名字符串判断消费类别。不推测、不联想、不补充信息。输出严格为JSON格式:{"id":整数序号,"merchant":"原商户名","category":"上述9类之一","confidence":0.0–1.0}。”

3、对每条记录拼接提示:“请分类以下交易:商户名=‘美团外卖’,金额=¥42.5,日期=2026-04-12。”

4、启用temperature=0.1与max_tokens=128,禁用流式响应,防止截断JSON结构。

三、本地部署Qwen2.5-72B进行批量推理

70亿参数模型在383行账单上已出现数字崩盘,720亿参数模型虽精度提升但仍会强行平滑趋势。Qwen2.5-72B在日文商户名识别与中文语义边界判断上表现稳定,且支持Ollama本地量化运行,避免API外泄风险。

qwencloud-usage
qwencloud-usage

管理账户认证,查询使用量和计费。用于:登录、登出、查询使用量、查看账单、免费套餐配额、编程计划状态、按量付费

下载

1、通过Ollama pull qwen2.5:72b,确认GPU显存≥24GB(如DGX Spark的A100 40GB)。

2、将预处理后的CSV按50行分块,每块保存为temp_chunk.jsonl,避免单次推理超长上下文溢出。

3、调用命令:ollama run qwen2.5:72b --format json output_chunk.jsonl。

4、对output_chunk.jsonl逐行校验JSON合法性,丢弃解析失败行并标记原始ID,供人工复核。

四、构建轻量级本地看板

无需依赖Web框架,用Python内置库即可生成静态HTML看板,所有数据保留在本地,不上传任何字段至云端。

1、用pandas读取全部output_chunk.jsonl,按category字段groupby求sum(amount),生成月度分类占比饼图(matplotlib)。

2、提取date与amount列,绘制时间序列折线图,标注每月消费峰值与谷值日期。

3、将图表保存为base64编码嵌入HTML模板,仅使用<p><strong><h2><font>标签,禁用JavaScript交互。

4、最终HTML文件包含三部分:顶部显示总支出与储蓄率,中部为饼图与折线图,底部列出top5高消费商户及对应金额。

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
数据分析的方法
数据分析的方法

数据分析的方法有:对比分析法,分组分析法,预测分析法,漏斗分析法,AB测试分析法,象限分析法,公式拆解法,可行域分析法,二八分析法,假设性分析法。php中文网为大家带来了数据分析的相关知识、以及相关文章等内容。

1842

2023.07.04

数据分析方法有哪几种
数据分析方法有哪几种

数据分析方法有:1、描述性统计分析;2、探索性数据分析;3、假设检验;4、回归分析;5、聚类分析。本专题为大家提供数据分析方法的相关的文章、下载、课程内容,供大家免费下载体验。

2550

2023.08.07

网站建设功能有哪些
网站建设功能有哪些

网站建设功能包括信息发布、内容管理、用户管理、搜索引擎优化、网站安全、数据分析、网站推广、响应式设计、社交媒体整合和电子商务等功能。这些功能可以帮助网站管理员创建一个具有吸引力、可用性和商业价值的网站,实现网站的目标。

6970

2023.10.16

数据分析网站推荐
数据分析网站推荐

数据分析网站推荐:1、商业数据分析论坛;2、人大经济论坛-计量经济学与统计区;3、中国统计论坛;4、数据挖掘学习交流论坛;5、数据分析论坛;6、网站数据分析;7、数据分析;8、数据挖掘研究院;9、S-PLUS、R统计论坛。想了解更多数据分析的相关内容,可以阅读本专题下面的文章。

3024

2024.03.13

Python 数据分析处理
Python 数据分析处理

本专题聚焦 Python 在数据分析领域的应用,系统讲解 Pandas、NumPy 的数据清洗、处理、分析与统计方法,并结合数据可视化、销售分析、科研数据处理等实战案例,帮助学员掌握使用 Python 高效进行数据分析与决策支持的核心技能。

4525

2025.09.08

Python 数据分析与可视化
Python 数据分析与可视化

本专题聚焦 Python 在数据分析与可视化领域的核心应用,系统讲解数据清洗、数据统计、Pandas 数据操作、NumPy 数组处理、Matplotlib 与 Seaborn 可视化技巧等内容。通过实战案例(如销售数据分析、用户行为可视化、趋势图与热力图绘制),帮助学习者掌握 从原始数据到可视化报告的完整分析能力。

6872

2025.10.14

Python 数据分析与可视化合集
Python 数据分析与可视化合集

聚焦 Python 在数据分析领域的核心应用,讲解 NumPy 数组运算、Pandas 数据清洗与聚合统计、缺失值与异常值处理、数据透视表生成,以及使用 Matplotlib、Seaborn、Pyecharts 制作折线图、柱状图、热力图、地图等多种可视化图表,适合数据分析师和运营人员快速掌握用 Python 从原始数据中挖掘洞察的能力。

336

2026.04.08

Python数据分析与Pandas高级实战
Python数据分析与Pandas高级实战

本专题围绕 Python 数据分析展开,系统讲解 Pandas 的高级用法,包括数据清洗、透视表、时间序列分析以及多表合并与分组操作。通过实战案例,帮助开发者掌握高效处理与分析数据的方法,提高数据处理效率与分析能力。

611

2026.04.13

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn