LlamaIndex • 2024-03-12

LlamaIndex 周报 2024-03-12

各位 LlamaIndex 爱好者，大家好！🦙

在 LlamaLand 又度过了激动人心的一周！随着 Anthropic 发布新模型 Claude-3 Opus, Sonnet 和 Haiku，我们有大量教程、实用指南和更新与您分享。

温馨提示：我们正在进行我们的首次用户调查。只需 3 分钟，对我们帮助很大！现在让我们深入了解。

🤩 本周亮点：

LlamaParse JSON 模式：一项新功能，可将 PDF 内容转换为结构化数据，简化了处理包含图像、文本和表格的复杂文档时的 RAG 管道开发。Notebook, Tweet。
分层代码分割：一种新颖的技术，将大型代码库组织成层次结构，以增强代码理解，改善导航和任务解决。LlamaPack, Tweet。
Anthropic 实用指南系列：通过详细指南和教程，学习如何使用 Claude 3 构建各种 LLM 应用，从简单到复杂不等。实用指南, Tweet。

✨ 功能发布与增强

我们推出了 LlamaParse JSON 模式，这是一项新功能，可将 PDF 中的文本和图像结构化为 dict 格式。通过集成 claude-3 opus 等多模态模型，现在开发处理包含文本、图像和表格的复杂 PDF 的 RAG 管道变得更加简单。Notebook, Tweet。
我们推出了一种新颖的分层代码分割技术，以增强 RAG/代理的代码理解能力，该技术包含了 ryanpeach 的 CodeHierarchyNodeParser。此方法将大型代码文件分解为层次结构，从而实现类似知识图谱的方法，以进行高效的代码导航和任务解决。LlamaPack, Tweet。
我们集成了 Videodb，可以使用 LlamaIndex 对视频流运行 RAG。此工具允许您根据语音或视觉场景上传、搜索和流式传输视频，现已作为 LlamaIndex 中的内置检索器提供。Tweet。

🎥 演示

构建 AI 浏览器助手：这是Daniel Huynh 的一个项目，演示了如何使用 RAG、本地嵌入和 Mixtral 从 Colab notebook 创建一个浏览器代理来执行浏览器任务，并附带一个演示如何导航 HuggingFace 数据集的视频。
对您的代码运行 RAG：这是Akshay 的一个项目，关于如何使用 LlamaIndex、MistralAI 和 Streamlit 创建一个本地代码助手，对 GitHub 仓库进行索引和查询，为高级代码问答提供了基础指南。
https://nething.xyz/: 这是 Raymond Weitekamp 的一个项目，关于如何从文本提示生成可用于生产的 3D CAD 模型。它使用 LLM 代码生成功能，通过 LlamaIndex 从文本提示创建命令来生成可打印的 3D 对象。博客, Tweet。

🗺️ 指南

指南，介绍 Anthropic 实用指南系列：通过六个 notebook 和四个视频，学习如何使用 Claude 3 创建上下文增强的 LLM 应用，从基础 RAG 到高级代理。
视频指南，探索使用 LlamaIndex 工具实现 Claude-3 的各种应用，涵盖 Vanilla RAG、路由、子问题查询规划、结构化数据提取、文本到 SQL 和代理——是 Claude 爱好者的完美入门套件。

✍️ 教程

教程，由Ankush k Singal 撰写，关于如何使用 Llama.cpp 构建本地 LLM 代理，以进行分步执行并在执行过程中整合人工反馈。
“处理复杂 PDF 的 RAG V2"：由AI Makerspace 提供的综合教程，关于如何使用 LlamaParse 和 LlamaIndex 构建高级 RAG 管道来处理简单的 RAG 无法应对的混乱 PDF 文件。
教程，由 Anup Surendran 和 Berke Can Rizai 撰写，关于如何使用 Google Drive 和 Sharepoint 构建实时 RAG 聊天机器人。
循序渐进的教程，介绍如何使用 JinaAI reranker、LlamaIndex 和 MistralAI 提高您的 RAG 应用质量。

🎥 网络研讨会：

📅 活动

我们将于 3 月 27 日在巴黎举办一场 RAG 交流会，届时将 membahas 高级 RAG 策略、构建 RAG CLI 以及开源 RAG 在商业中的重要性。

相关文章