OmniQuery：增强多模态记忆以实现个人问答 (jiahaoli.net)

OmniQuery是一个学术项目，旨在利用检索增强生成技术，实现对个人记忆（例如相册中的私人数据）的自由问答。它采用基于分类法的上下文数据增强方法来提高检索精度，并使用大型语言模型根据检索到的记忆实例生成答案。OmniQuery可以回答需要多跳搜索和推理的问题，例如查找朋友婚礼的记忆并找到有关地点的信息，或回忆旅行经历并总结比较锻炼频率等。