Skip to content

基于chatgpt-next-web,增加了midjourney绘画功能,接入了stable-diffusion,已实现dall-e-3画图、gpt4-vision-preview识图、whisper语音转文字、tts文字转语音。正在增加注册登录,后台管理,接入知识库等。

kelven1217/ChatGPT-Next-Web-Pro

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

版本

无后端:

  • 版本号:3.6.3,更新日期:2024.01.10,(arm64版本号:3.6.3-arm)

特性(无后端版本):

  • 1.完整的ChatGPT-Next-Web功能,并保持同步更新。最近同步时间:2024.01.09
  • 2.增加对接midjourney绘图功能,该功能基于ChatGPT-Midjourney,使用antd进行了完全的重构,界面更加合理,参数更加全面。
  • 3.支持图片上传至阿里云oss或Minio(私有化oss),方便图片永久存储,且预览加载更快。
  • 4.增加了所有绘画记录页面。
  • 5.接入了stable-diffussion,文生图、图生图、后期处理、图片信息,近乎完整的参数设置,以及图片完成后的菜单按钮。
  • 6.stable-diffusion加入了lora模型
  • 7.增加翻译功能,自动识别输入的内容是中文还是英文(如果大部分是中文,则翻译成英文,反之亦然)。
  • 8.设置里增加自定义mj代理密钥且兼容oneapi的mj代理,MIDJOURNEY_PROXY_URL填oneapi的接口地址,MIDJOURNEY_PROXY_API_SECRET填oneapi的apikey,并增加环境变量 HIDE_MIDJOURNEY_SETTING,如果设成1,则隐藏mj设置。
  • 9.设置里增加展示聊天记录占用存储情况,浏览器localstorage只有5m,存储快满时,建议导出数据备份,然后删除浏览器存的对话。
  • 10.增加支持 【gpt4-vision-preview】 识图功能,可以上传多张图片。建议配合OSS使用,不然受限于浏览器localstorage只有5m,本地聊天记录不保存图片信息,配置了则会保存图片链接。由于国外无法访问国内oss,只会把图片base64发送出去,建议开通美国阿里云oss。
  • 11.增加支持 【dall-e-3】 功能,兼容dall-e-2。该功能强烈建议配置oss,详细配置请看参数说明及准备说明。因为openai返回的图片url有效期很短,过期了无法访问,如果返回base64,浏览器存不下。
  • 12.增加支持 【whisper-1】 音视频转文字功能。该功能也强烈建议配置oss,不然聊天记录不保存文件,影响点击重试。
  • 13.增加支持 【tts】 文字转语音功能,语音可以直接播放。该功能必须配置oss,不然返回的文件没地方存,如果你的应用地址是https,则oss也必须是https,不然会出现无法播放的问题。
  • 14.增加设置里可以自定义stable-diffusion接口地址,设置了则用户端请求的时候会使用用户端填的sd地址,如果不想用户设置自定义sd接口地址,则增加环境变量 HIDE_SD_SETTING=1
  • 15.增加自定义网站标题功能,通过启动参数APP_TITLE=指定,需要获得永久授权后生效。
  • 16.增加自定义网站副标题,通过启动参数APP_SUB_TITLE=指定,须获得永久授权后生效。
  • 17.增加支持 【gpt-4-all】 逆向模型(需要你的接口支持),支持上传所有类型文件进行分析,必须配置oss,不然没地方保存文件,至于使用国内oss还是国外oss,具体看你模型后端能力能访问到哪个oss。
  • 18.增加支持链接传入自定义模型,并可支持替换当前模型,新增链接参数customModels,多个模型用英文逗号","分开,新增replaceCurrentModel,传true或false,当为true时,替换取第一个模型替换掉当前聊天模型。例如:从其它应跳转到当前应用,链接为:http://localhost:3000/#/chat?settins={"key":"xxx","url":"xxx","customModels":"xxx,xxx","replaceCurrentModel":true}
  • 19.增加支持腾讯云COS(对象存储OSS),具体参数请看参数说明
  • 20.增加支持直接在输入框粘贴文件的方式上传文件,只能粘贴模型支持的文件类型。
  • 21.增加支持fastgpt知识库接口,KNOWLEDGE_BASE_URL=设定fastgpt根地址,配合自定义模型CUSTOM_MODELS=,格式:+知识库名称==知识库对应apikey,例如:CUSTOM_MODELS=+知识库1==fastgpt-xxxxxx,apikey不会传到用户端,只会在服务端,可以放心。
  • 22.增加支持gpt-4-gizmo开头的模型文件上传
  • 23.增加自定义输入框提示,参数INPUT_PLACEHOLDER=
  • 24.增加朗读文字功能,设置里可以设置语言和声源。
  • 25.增加语音输入功能,通过录音,发送给openai进行语音转文字,填到输入框里。该功能需要https访问,才能调起浏览器语音权限。启动参数 HIDE_VOICE_INPUT=1,则会隐藏语音输入
  • 26.增加参数REPLACE_MJURL_WITH_BASEURL,当设成1时,如果用户和启动参数都没填mj的接口地址和密钥,则自动使用base_url和openai_api_key当作mj的接口地址和密钥。

特性(有后端版本):

  • 1.包含无后端版本的完整功能。
  • 2.正在接入后端管理,目前已实现公众号扫码登录,待其它功能实现后发布。

后续待实现

  • 【doing】1.接入后端管理,增加账号登录功能。
  • 【 】2.权限管理,角色分配,绘画权限,知识库权限,聊天记录保存、查阅等。
  • 【 】3.微信扫码、企微免登。
  • 【 】4.接入主流知识库,如fastGPT、Dify等。
  • 【 】5.联网搜索。
  • 【 】6.function call。
  • 【 】7.待思考。。。

示例图片

image image image image image image image image image image image

增加的参数

兼容原版ChatGPT-Next-Web所有参数,这边只列了新增参数

参数名称 必填 说明
MIDJOURNEY_PROXY_URL Midjourney代理地址,详细请看midjourney-proxy
MIDJOURNEY_PROXY_API_SECRET Midjourney代理地址接口密钥,详细请看midjourney-proxy
USE_MJ_IMG_SELF_PROXY 如果不需要自代理mj图片地址,则把该参数设成false
REPLACE_MJURL_WITH_BASEURL 该参数设成1,则如果用户设置里和启动参数都没设置mj的地址和密钥,则直接把base_url和openai_api_key当作mj代理地址和密钥
HIDE_MIDJOURNEY_SETTING 如果需要隐藏Midjourney设置,则把值设成 1
DISCORDCDN_PROXY_URL Discordcdn图片地址代理,不填的话,如果访问不了discordcdn,就获取不到图片
STABLE_DIFFUSION_BASE_URL Stable-diffusion的接口地址,需要启动stable-diffusion-webui开启api。如果要用该功能,必须要配置后面的OSS相关参数,因为stable-diffusion返回的是图片base64,需要有地方存图片
STABLE_DIFFUSION_TIMEOUT Stable-diffusion的接口超时时间,默认10分钟
HIDE_SD_SETTING 是否隐藏Stable-diffusion自定义接口设置,默认不隐藏,如需隐藏,则设成 1。
OSS_TYPE OSS 类型,取值( aliyun 或 tencent 或 minio )。填了代表需要上传到oss,且下面的相关参数都得填,具体看下面的参数说明
OSS_ENDPOINT 服务器地址,aliyun例如:oss-accelerate.aliyuncs.com;tencent填Region,例如: ap-guangzhou;minio例如:192.168.2.120(这边只填ip,不需要http前缀,端口填在下面那个参数)
OSS_PORT type为minio,且endpoint为ip时,则需要有端口,minio有两个端口,一个管理端口,一个api端口,这里要填api端口。
OSS_HTTPS type为minio,根据实际情况开启,如果endpoint是ip,那一般填false。如果网站https,那minio也得要通过https访问,不然可能会出现无法预览图片的问题,可以参考
OSS_ACCESS_KEY aliyun则填accessKeyId,tencent则填SecretId,minio则填username
OSS_SECRET_KEY aliyun则填accessKeySecret,tencent则填SecretKey,minio则填password
OSS_BUCKET 桶名称(minio的桶权限需要设成public,阿里云和腾讯云的桶可以不用设成public,但上传的文件会设成public)
OSS_DOMAIN aliyun oss 绑定的域名,只填域名,不要加http://。 2019.9.23后创建的bucket,需要绑定域名,不然无法预览,绑定方法参考
AUTHORIZE_CODE 授权码,获取方式,请看后面
APP_TITLE 自定义网站标题,需要获得永久授权后才会生效
APP_SUB_TITLE 自定义网站副标题,需要获得永久授权后才会生效
KNOWLEDGE_BASE_URL fastgpt的接口根地址,比如:https://ai.fastgpt.in/api ,需配合自定义模型参 CUSTOM_MODELS
CUSTOM_MODELS 自定义模型参数,基于原版参数拓展,兼容原版功能。通过自定义模型名称对应fastgpt里的应用,及对应key,格式:+知识库名称==知识库对应apikey,例如:CUSTOM_MODELS=+知识库1==fastgpt-xxxxxx,只会把知识库名称传到前端,apikey不会传到用户端,只会在服务端,可以放心。
INPUT_PLACEHOLDER 自定义输入框提示。
HIDE_VOICE_INPUT 如果需要屏蔽语音输入,则把该参数设成1。

需要准备什么

  • 1.若干个二级域名,本应用需要一个,另外代理discord,openai,aliyun-oss等,都需要域名
  • 2.部署openai代理,fork到自己仓库,然后使用vercel进行部署,绑定自己的域名。如果能直通chatgpt,则不需要配置。
  • 3.部署discord代理,项目地址discord-proxy,fork到自己仓库,然后使用vercel进行部署,绑定自己的域名。如果能直通discord,则不需要。
  • 4.部署midjourney-proxy,详细请到对应项目查看。
  • 5.获取阿里云oss的endpoint,key等,详细参考 ,bucket可以不用设为公共读,但上传的图片会自动设成公共读。2019.9.23后创建的bucket,需要绑定自己的域名,才能预览,绑定方法参考跨域问题
  • 6.部署minio私有化oss,bucket必须要设成public,docker启动参考官方文档
  • 7.使用stable-diffusion功能需要启动stable-diffusion-webui,详细启动方式请到对应项目查看:https://github.com/AUTOMATIC1111/stable-diffusion-webui/wiki/API
  • 8.腾讯云oss跨域问题,可以参考

启动

1.拉取镜像
docker pull registry.cn-hangzhou.aliyuncs.com/ann-chat/chatgpt-next-web-pro:3.6.3
2.启动应用
docker run -d -p 3000:3000 \
  -e OPENAI_API_KEY="sk-xxxxxx" \
  -e AUTHORIZE_CODE="授权码" \
  registry.cn-hangzhou.aliyuncs.com/ann-chat/chatgpt-next-web-pro:3.6.3
  • 3000:3000是端口映射,前面的可以自定义,后面的是容器内部端口,不可更改。比如可以改成:3030:3000, 3080:3000
  • 如果你有chatgpt中转地址,则加上 -e BASE_URL="https://xxxxxx" \ ,没加这个参数,默认请求到 https://api.openai.com
  • 其它参数也是通过增加 -e 然后跟上参数名称和参数值, \ 是换行拼接。

授权码价格

授权绑定完整的二级域名,绑定后,只能通过绑定的域名或IP访问!!!也不能更改绑定的域名或IP!!!

无后端版本(后续更新也不会接入后端相关功能):

  • 绑定1个域名或IP,限时特惠:¥159
  • 绑定2个域名或IP,限时特惠:¥289
  • 绑定3个域名或IP,限时特惠:¥399

(付费即永久授权,授权不包含源码。可以先试用,试用不收费。)

授权码获取方式

微信:822784588

image

常见问题

1.通过ngnix转发,页面停留在【需要密码】的页面进不去,

img.png

需要在ngnix配置里增加:

proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto http;
proxy_set_header Upgrade $http_upgrade;
proxy_set_header Connection 'upgrade';
proxy_set_header Host $http_host;

2.配置了minio,出现图片无法预览。这个是因为网站是https,所以访问minio也要https,建议用ngnix转发域名方式,可以参考

3.如果配置了aliyun oss,出现图片无法预览、或文件上传不了、或语音长度为0的问题,建议检查access_key权限(不是bucket权限),可以参考添加权限

4.配置了aliyun oss,出现图片无法预览,点击链接变成下载,那就是需要绑定自己的域名,然后启动参数增加 OSS_DOMAIN="绑定的域名",绑定方法参考

5.腾讯云oss跨域问题,可以参考

About

基于chatgpt-next-web,增加了midjourney绘画功能,接入了stable-diffusion,已实现dall-e-3画图、gpt4-vision-preview识图、whisper语音转文字、tts文字转语音。正在增加注册登录,后台管理,接入知识库等。

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published