工程笔记
写给真正
交付技术栈的人
关于 React、Node.js、TypeScript 与 AI 的文章。有译文正文时显示译文。没有时显示英文,并注明这一点。
标签:multimodal
GCA详解:一种可解决大语言模型空间推理问题的任务契约
几何约束智能体将任务形式化与几何执行分开,因此大语言模型无需训练就能更好地进行空间推理。其工作原理如下。
阅读约 6 分钟大规模混合图像搜索:SigLIP、SPLADE、YOLOv8与Gemini Captions
设计一种可处理百万张图片的搜索系统,该系统将密集嵌入与稀疏嵌入相结合,并结合物体检测、实体识别、安全搜索以及由大语言模型生成的描述功能。
阅读约 6 分钟按语义搜索视频和音频:基于Gemini Embedding 2的多模态RAG构建方法
基于 Gemini Embedding 2 的多模态 RAG:为文本、音频、视频和 PDF 提供统一的向量空间,无需转录步骤,同时还具备分块处理、ChromaDB 存储以及重新排序功能。
阅读约 22 分钟基于OpenVINO的智能预测性维护:一个流程,五种工业应用场景
OpenVINO与LangGraph流程如何在英特尔硬件上,将预测结果转化为涉及管道、太阳能电池板、输电线路、音频及光栅数据的证据与工单。
阅读约 7 分钟AI视频需要编排:从VideoAgent流程设计中获得的经验。
AI视频更需要的是协同调度机制而非更先进的生成技术:全局规划、粗到细的检索、可执行图、修复循环以及VideoAgent存在的缺陷。
阅读约 8 分钟超越文本的推理:VLM、嵌入模型、语音、图像与视频的优化
每种模态都有其自身的瓶颈。了解如何通过恰当的批处理、内核、缓存及量化技术来优化VLM、嵌入模型、ASR、TTS以及图像和视频生成器。
阅读约 11 分钟用Gradio聊天界面封装多模态RAG功能。
将 CLI 多模态 RAG 引擎转换为具备拖放式文件上传功能的 Gradio 聊天应用,同时支持进度显示,并在内容生成过程中实时展示引用信息与答案。
阅读约 8 分钟
常见问题
关于这些文章
是。每篇都是为本站准备的英文原创改写。结构与代码跟随来源;正文重写并做过重合检查。
英文是来源。只有存在该语言的正文译文时才显示其他语言。缺失或空白的译文仍是英文,包括在本地化网址上。
草稿经编辑后进入发布队列。站点导入只收录新的或有变更的 slug,不会重复添加。
示例仅供说明。上线前请核对技术栈与许可。若需交付,请发来简报。