AI多模态个人知识库

人工智能其他案例ID：246818

梅花村卖火柴

2 年经验· 中国通信服务上海公司

微信扫码沟通，客服可协助直接对接工程师；如当前档期不合，也可继续推荐相似案例作者。

案例介绍

本项目是一套本地优先的AI多模态个人知识库系统，用于统一记录和管理日常工作、生活、学习与灵感内容。系统提供统一录入入口，支持文本、图片、音频和文本文件：文本内容可直接分析，图片通过视觉模型生成内容描述，音频通过ASR模型完成语音转写，随后由大模型自动生成摘要和分类标签。

处理后的内容采用多层方式沉淀。原始图片、音频和附件按日期保存；记录时间、内容类型、原文、AI摘要、标签和文件路径写入SQLite，便于程序查询；同时按天追加生成Markdown笔记，可直接使用Obsidian查看和编辑。该设计避免个人知识被锁定在单一应用中，即使更换界面或模型，原始文件和Markdown内容仍可长期保留。

系统提供时间轴页面，可按日期、内容类型和标签回顾记录；提供记忆详情页，同时展示原始内容、AI处理结果、文件位置和Markdown沉淀状态；提供基于指定日期记录的对话助手，用于快速回顾当天事项。针对外部磁盘、NAS或共享目录暂时不可用的情况，项目设计了本地缓冲优先机制：上传文件先可靠保存到本地，目标存储恢复后再自动迁移，并同步更新数据库中的文件路径。

本人在项目中独立完成需求设计、FastAPI后端、Streamlit前端、SQLite数据模型、多模态AI接入、文件流式上传、音频格式处理、Markdown生成、本地缓冲与存储同步等功能。该项目可进一步定制为个人第二大脑、工作日志助手、会议语音归档、家庭数字档案或企业个人知识工作台。

主要技术：Python、FastAPI、Streamlit、SQLite、SQLModel、OpenAI兼容API、视觉语言模型、ASR、Markdown、FFmpeg、Windows文件存储。