输入“/”快速插入内容

AI大模型私有化部署

2024年7月19日修改
如果对大模型私有化部署不感兴趣,可跳过。
什么是大模型底层原理?
自然语言处理(NLP)是一门交叉学科,它结合了计算机科学、人工智能和语言学的理论与技术,旨在使计算机能够理解、解释、生成和响应人类语言的内容。NLP 的目标是实现人机交互的自然化,让机器能够像人类一样处理和理解语言。这篇文章将带您深入了解 NLP 的世界,探索它的核心任务、技术、应用、Python 库实现、挑战以及未来趋势。
大模型概念 | AI人工智能能技术型名词释义
大模型概念 | NLP(自然语言处理)发展历史及应用领域
我们都知道,大模型的接入方式,目前流行的有两种,一种是通过api接入部署,另一种是通过私有化开源大模型项目部署。
接下来,我将详细介绍两种部署方式,因为各类大模型的数量实在是太多了,有大语言模型,也有针对某个赛道的垂类模型。因此,这里我们只介绍两个开源项目的私有化部署方案,一个是Meta开源的 Llama3 大模型,一个是阿里开源的通义千问大模型。
大模型概念 | LLM大模型全面介绍文档
接入方式之一:API方式接入大模型
演示1:ChatGPT使用API方式接入大模型
ChatGPT API 接入需要如下条件。
第一步:获取ChatGPT的API Key
1.
已成功注册 OpenAI 的账号。
2.
创建 API KEY,这个 API KEY 是用于 HTTP 请求身份验证的,可以创建多个。如下图点击“Create new secret key“,注意这个创建之后需要马上复制好保存,关闭弹框之后就看不到了。
要调用API,首先你得有一个apiKey。登录openai的官网,点击API方块进入后,点击左边菜单栏的API keys就可以进入API keys页面。
在页面中,你可以新建一个key,注意这个key只在创建的时候显示一次,需要自己保存下来。
3.
官方 API 文档链接 api-reference
4.
注意 API 调用是收费的,但是 OpenAI 已经为我们免费提供了18美元的用量,足够大家放心使用。
要看自己还有多少钱,可以查看Settings -> Billing。plus用户每月会送5美元,普通用户只会送一次并且1个月到期,记得及时去薅羊毛。