注：当前项目为 Serverless Devs 应用，由于应用中会存在需要初始化才可运行的变量（例如应用部署地区、服务名、函数名等等），所以不推荐直接 Clone 本仓库到本地进行部署或直接复制 s.yaml 使用，强烈推荐通过 s init 的方法或应用中心进行初始化，详情可参考部署 & 体验 。

fc-llm 帮助文档

部署大语言模型和向量数据库的相关应用到函数计算，向量计算与存储由RDS PostgreSQL提供支持

• 😺 代码

前期准备

使用该项目，您需要有开通以下服务：

服务	备注
函数计算 FC	对 AIGC 进行 CPU/GPU 推理计算
文件存储 NAS	存储大语言模型以及Embedding服务所需要的模型, 新用户请先领取免费试用资源包https://free.aliyun.com/?product=9657388&crowd=personal
RDS PostgreSQL数据库	提供OLTP和向量数据库服务, RDS新用户可领取免费试用https://free.aliyun.com/?searchKey=rds%20postgresql

推荐您拥有以下的产品权限 / 策略：

您还需要注意：
您还需要注意：
1.基于PostgreSQL数据库的AI知识库应用 包含embedding服务， 大模型对话服务，以及数据库向量服务，涉及函数计算，文件存储NAS，RDS postgresql数据库，函数计算和文件存储NAS会在项目被访问的时候产生相关费用， RDS posgresql 则是在消耗完30次免费体验后 需要您自己付费购买新的实例

2.项目部署会把embedding服务， 模型服务以及数据库服务等一起部署上去，需要花费5-10分钟的时间 3.初始启动有大约 1 分钟的白屏时间，这是服务完全冷启动的状态，请耐心等待

免责声明：
免责声明：

1. 该项目的软件部分由开源社区贡献，阿里云仅提供了算力及存储支持；

部署 & 体验

• 🔥 通过 Serverless 应用中心 ， 该应用。

• 通过 Serverless Devs Cli 进行部署：
  • 安装 Serverless Devs Cli 开发者工具 ，并进行授权信息配置 ；
  • 初始化项目：s init fc-llm -d fc-llm
  • 进入项目，并进行项目部署：cd fc-llm && s deploy - y

应用详情

前期准备

使用该项目，您需要有开通以下服务：

服务	备注
函数计算 FC	对 AIGC 进行 CPU/GPU 推理计算
文件存储 NAS	存储大语言模型以及Embedding服务所需要的模型, 新用户请先领取免费试用资源包https://free.aliyun.com/?product=9657388&crowd=personal
RDS PostgreSQL数据库	提供OLTP和向量数据库服务, RDS新用户可领取免费试用https://free.aliyun.com/?searchKey=rds%20postgresql

推荐您拥有以下的产品权限 / 策略：

应用介绍文档

应用详情

使用阿里云函数计算部署开源大模型应用

使用文档

本地部署方案

• 安装 Serverless Devs Cli 开发者工具npm install @serverless-devs/s -g ，并进行授权信息配置 ；
• 初始化项目：s init fc-llm -d fc-llm
• 进入项目，并进行项目部署：cd fc-llm && s deploy - y 本地部署成功后使用部分参考应用中心部署方案配置管理后台系列操作

使用文档

常见问题

开发者社区

您如果有关于错误的反馈或者未来的期待，您可以在 Serverless Devs repo Issues 中进行反馈和交流。如果您想要加入我们的讨论组或者了解 FC 组件的最新动态，您可以通过以下渠道进行：

微信公众号：serverless	微信小助手：xiaojiangwh	钉钉交流群：33947367