大模型应用

2024/5/19 18:30:56

一文读懂 RAG:它将如何重新定义 AI 的未来?

RAG 可以使 LLM 能够在实时请求提供事实信息时,访问外部来源的数据,比如经过审核的数据库或互联网上的信息。这样一来,RAG 就消除了大家对于 LLM 仅依赖其训练数据中获得的内部知识库的顾虑,毕竟,这些知识库可能存在缺…

RAG 修炼手册|一文讲透 RAG 背后的技术

今天我们继续剖析 RAG,将为大家详细介绍 RAG 背后的例如 Embedding、Transformer、BERT、LLM 等技术的发展历程和基本原理,以及它们是如何应用的。 01. 什么是 Embedding? Embedding 是将离散的非结构化数据转换为连续的向量表示的技术。 在自然语言…

复旦 北大 | 从头训练中文大模型:CT-LLM

引言 当前,绝大多数大模型(LLMs)基本上都是以英文语料库训练得到的,然后经过SFT来匹配不同的语种。然而,今天给大家分享的这篇文章旨在从头开始训练中文大模型,在训练过程中「主要纳入中文文本数据」&…

LLM系列(0+):大模型算法全流程解析与实战:从理论到落地的关键步骤,打造高效落地的解决方案实战应用之道

LLM系列(0+):大模型算法全流程解析与实战:从理论到落地的关键步骤,打造高效落地的解决方案实战应用之道 1. 引言 针对近期进行的关于大语言模型落地的相关实践,本文旨在能够较为系统的整理和介绍大模型系列内容,分享关于构建行业专属大模型系统以及进行大模型优化的一些…

NL2SQL进阶系列(1):DB-GPT-Hub、SQLcoder、Text2SQL开源应用实践详解

NL2SQL进阶系列(1):DB-GPT-Hub、SQLcoder、Text2SQL开源应用实践详解 NL2SQL基础系列(1):业界顶尖排行榜、权威测评数据集及LLM大模型(Spider vs BIRD)全面对比优劣分析[Text2SQL、Text2DSL] NL2SQL基础系列(2):主流…

每天积累一点概念:Langchain 和 RAG

知识需要不断的积累,才能有机会厚积薄发,肚子里面没有干货那是真的不行的,我们一起了解一下AI领域里的Langchain 和 RAG,它们到底是什么呢? Langchain Langchain 对于开发者和数据科学家来说很重要,因为它…

落地领域大模型应知必会 (1) :主要微调方法总览

在如今高速发展的人工智能领域,高效地利用大语言模型(LLMs)已经变得越来越重要。但是,利用大语言模型的方式太多了,如果你才刚刚开始接触它,可能会感到不知所措。 实质上,我们可以通过两种主要…