← 返回列表

multimodal-rag:跨文本、图像、音频与视频的统一搜索问答工具

Daubingweirdie414/multimodal-rag · Enable unified search and AI answers across text, images, audio, and video using multimodal retrieval-augmented generation with source citations.

GitHub原文发布 未知首次收录 2026-09-18上架 2026-09-18 07:01

☆ 收藏查看项目 ↗

ELI5:它是什么,解决什么问题

multimodal-rag 是一个本地运行的 Windows 应用,将文本、PDF、图像、音频和视频等不同格式文件统一处理为可检索数据,借助向量空间模型与 AI 模型实现一次输入即可跨文件类型搜索,并在回答中附带来源文件引用,点击引用可打开原始文件。

核心能力与快速开始

★ 4 · Python

能做什么
支持对文本(.txt)、PDF、图像(.jpg/.png/.bmp)、音频(.mp3/.wav)和视频(.mp4/.avi)等多种文件类型进行统一索引和搜索;通过向量空间模型把不同模态内容转为可比较的统一格式;AI 分析查询并返回最接近的匹配答案,附带来源文件引用,点击引用可打开原始文件;提供添加文件(按钮或拖拽)、搜索栏、结果条数设置、处理通知开关和开机自启等界面选项。
适用场景
搜索个人文档与笔记;从录制的讲座音频/视频中查找信息;整理多类型研究资料;在混合媒体项目中快速定位答案。
项目形态
可直接使用的工具
部署方式
README 说明为 Windows 桌面应用,提供安装程序(如 multimodal-rag-setup.exe)双击安装,本地运行,AI 功能需联网。
主要依赖
Windows 10 或更高版本(建议 64 位);至少 8 GB 内存;4 GB 可用磁盘空间;需要互联网连接以使用 AI 功能;现代 CPU(Intel i5 或同等);屏幕分辨率 1280x720 或更高。
使用限制
README 未说明许可协议、AI 服务的 API 成本、数据隐私处理方式、可处理文件大小上限、索引精度或支持的 Windows 之外平台;未提供文档或 Wiki 的具体链接(仅提及仓库页面上的 Wiki)。
许可证
未说明
最近推送
2026-09-17 14:50

资料检查:2026-09-18 07:00 · 卡片整理:2026-09-18 07:00
卡片由 AI 根据仓库资料整理,未进行安装或运行验证 · 本次更新未完成,保留上次成功内容

职业应用

程序员

在本地 Windows 环境中对代码仓库中的文本、PDF、图像、音频和视频文件进行统一检索,输入问题后获得带来源文件引用的答案,点击引用可打开原始文件,用于查找技术资料或项目文档中的信息。

查看内容依据
multimodal-rag lets you search across text, PDFs, images, audio, and video in one place. It uses AI to find answers quickly and shows where it found the information.

官方使用入口 ↗

由 AI 根据来源材料整理,未进行安装或运行验证

产品经理

将用户研究、需求分析相关的文档、图片、音频和视频等混合格式文件统一导入,通过一次搜索跨文件类型查找信息,并在回答中查看来源文件引用,用于整理研究资料和快速定位需求信息。

查看内容依据
You can use this app to: - Search your documents and notes - Find information in lectures recorded as audio/video - Organize research files of different types - Quickly find answers in mixed media projects

官方使用入口 ↗

由 AI 根据来源材料整理,未进行安装或运行验证

这是基于来源内容整理的摘要。原文链接失效后,本页摘要和讨论仍会保留。

讨论 0

登录后参与讨论,阅读资讯无需注册。

还没有评论,来分享第一个看法。