项目说明：LobeChat 是开源的高性能聊天机器人框架，支持语音合成、多模态、可扩展的（Function Call）插件系统。支持一键免费部署私人 ChatGPT/LLM 网页应用程序。

能够调用的api：OpenAI / 智谱AI/ Perplexity / Bedrock /MoonshotAI，只有OpenAI能够使用国内中转（接口代理地址），其他的都是使用官方的API Key（如智谱AI开放平台的apikey）

今年AI开项目比较多，看到很多好的开源项目借此分享一一，根据安装提示自行测试研究。提供了 Docker 镜像，供你在自己的私有设备上部署 LobeChat 服务。

总体评价：聊天和绘画在同一个窗口，使用Dall-E3插件绘图，每次可以绘制4张，多个api可同时设置，模型切换比较方便，打开网页、对话反应比较慢。


多模型服务商支持

AWS Bedrock：集成了 AWS Bedrock 服务，支持了 Claude / LLama2 等模型，提供了强大的自然语言处理能力

Google AI (Gemini Pro、Gemini Vision)：接入了 Google 的 Gemini 系列模型，包括 Gemini 和 Gemini Pro，以支持更高级的语言理解和生成。

Anthropic (Claude)：接入了 Anthropic 的 Claude 系列模型，包括 Claude 3 和 Claude 2，多模态突破，超长上下文，树立行业新基准

ChatGLM：加入了智谱的 ChatGLM 系列模型（GLM-4/GLM-4-vision/GLM-3-turbo），为用户提供了另一种高效的会话模型选择。

Moonshot AI (月之暗面)：集成了 Moonshot 系列模型，这是一家来自中国的创新性 AI 创业公司，旨在提供更深层次的会话理解

01.AI (零一万物)：集成了零一万物模型，系列 API 具备较快的推理速度，这不仅缩短了处理时间，同时也保持了出色的模型效果

Groq：接入了 Groq 的 AI 模型，高效处理消息序列，生成回应，胜任多轮对话及单次交互任务

OpenRouter：其支持包括 Claude 3，Gemma，Mistral，Llama2和Cohere等模型路由，支持智能路由优化，提升使用效率，开放且灵活

支持本地大语言模型 (LLM)

模型视觉识别 (Model Visual)
LobeChat 已经支持 OpenAI 最新的 gpt-4-vision 支持视觉识别的模型，这是一个具备视觉识别能力的多模态应用。 用户可以轻松上传图片或者拖拽图片到对话框中，助手将能够识别图片内容，并在此基础上进行智能对话，构建更智能、更多元化的聊天场景。

这一特性打开了新的互动方式，使得交流不再局限于文字，而是可以涵盖丰富的视觉元素。无论是日常使用中的图片分享，还是在特定行业内的图像解读，助手都能提供出色的对话体验。

TTS & STT 语音会话

LobeChat 支持文字转语音（Text-to-Speech，TTS）和语音转文字（Speech-to-Text，STT）技术，这使得我们的应用能够将文本信息转化为清晰的语音输出，用户可以像与真人交谈一样与我们的对话助手进行交流。 用户可以从多种声音中选择，给助手搭配合适的音源。 同时，对于那些倾向于听觉学习或者想要在忙碌中获取信息的用户来说，TTS 提供了一个极佳的解决方案。

在 LobeChat 中，我们精心挑选了一系列高品质的声音选项 (OpenAI Audio, Microsoft Edge Speech)，以满足不同地域和文化背景用户的需求。用户可以根据个人喜好或者特定场景来选择合适的语音，从而获得个性化的交流体验。

Text to Image 文生图
支持最新的文本到图片生成技术，LobeChat 现在能够让用户在与助手对话中直接调用文生图工具进行创作。 通过利用 DALL-E 3、MidJourney 和 Pollinations 等 AI 工具的能力， 助手们现在可以将你的想法转化为图像。 同时可以更私密和沉浸式地完成你的创作过程。

插件系统 (Function Calling)
LobeChat 的插件生态系统是其核心功能的重要扩展，它极大地增强了 ChatGPT 的实用性和灵活性。

https://www.njymz.com/usr/plugins/AAEditor/Modules/Video/Player.php?url=https%3A%2F%2Fupyun-img.rlxx.vip%2F2024%2F04%2F2862015273.mp4&autoplay=off

助手市场 (GPTs)
在 LobeChat 的助手市场中，创作者们可以发现一个充满活力和创新的社区，它汇聚了众多精心设计的助手，这些助手不仅在工作场景中发挥着重要作用，也在学习过程中提供了极大的便利。 我们的市场不仅是一个展示平台，更是一个协作的空间。在这里，每个人都可以贡献自己的智慧，分享个人开发的助手

渐进式 Web 应用 (PWA)
我们深知在当今多设备环境下为用户提供无缝体验的重要性。为此，我们采用了渐进式 Web 应用 PWA 技术， 这是一种能够将网页应用提升至接近原生应用体验的现代 Web 技术。通过 PWA，LobeChat 能够在桌面和移动设备上提供高度优化的用户体验，同时保持轻量级和高性能的特点。 在视觉和感觉上，我们也经过精心设计，以确保它的界面与原生应用无差别，提供流畅的动画、响应式布局和适配不同设备的屏幕分辨率。

移动设备适配
针对移动设备进行了一系列的优化设计，以提升用户的移动体验。目前，我们正在对移动端的用户体验进行版本迭代，以实现更加流畅和直观的交互。如果您有任何建议或想法，我们非常欢迎您通过 GitHub Issues 或者 Pull Requests 提供反馈。

安装说明

一、本地部署（或者通过宝塔）

$ git clone https://github.com/lobehub/lobe-chat.git
cdlobe – chat npm install
$ npm run dev

二、Docker宝塔部署

1、安装 Docker 容器环境（centOS系统)

$ yum install docker

2、Docker 指令部署

使用以下命令即可使用一键启动 LobeChat 服务：

$ docker run -d -p 3210:3210 \
-e OPENAI_API_KEY=sk-xxxx \
-e ACCESS_CODE=lobe66 \
–name lobe-chat \
lobehub/lobe-chat

指令说明：

默认映射端口为 3210, 请确保未被占用或手动更改端口映射
使用你的 OpenAI API Key 替换上述命令中的 sk-xxxx

ACCESS_CODE添加访问 LobeChat 服务的密码，你可以设置一个长密码以防被爆破

使用代理地址
如果你需要通过代理使用 OpenAI 服务，你可以使用 OPENAI_PROXY_URL环境变量来配置代理地址：

$ docker run -d -p 3210:3210 \
-e OPENAI_API_KEY=sk-xxxx \
-e OPENAI_PROXY_URL=https://api-proxy.com/v1 \
-e ACCESS_CODE=lobe66 \
–name lobe-chat \
lobehub/lobe-chat

Crontab 自动更新脚本（可选）
如果你想自动获得最新的镜像，你可以如下操作。

首先，新建一个lobe.env配置文件，内容为各种环境变量，例如：

OPENAI_API_KEY=sk-xxxx
OPENAI_PROXY_URL=https://api-proxy.com/v1
ACCESS_CODE=arthals2333
CUSTOM_MODELS=-gpt-4,-gpt-4-32k,-gpt-3.5-turbo-16k,gpt-3.5-turbo-1106=gpt-3.5-turbo-16k,gpt-4-0125-preview=gpt-4-turbo,gpt-4-vision-preview=gpt-4-vision

然后，你可以使用以下脚本来自动更新：

!/bin/bash

auto-update-lobe-chat.sh

设置代理（可选）

export https_proxy=http://127.0.0.1:7890 http_proxy=http://127.0.0.1:7890 all_proxy=socks5://127.0.0.1:7890

拉取最新的镜像并将输出存储在变量中

output=$(docker pull lobehub/lobe-chat:latest 2>&1)

检查拉取命令是否成功执行

if [ $? -ne 0 ]; then
exit 1
fi

检查输出中是否包含特定的字符串

echo “$output” | grep -q “Image is up to date for lobehub/lobe-chat:latest”

如果镜像已经是最新的，则不执行任何操作

if [ $? -eq 0 ]; then
exit 0
fi

echo “Detected Lobe-Chat update”

删除旧的容器

echo “Removed: $(docker rm -f Lobe-Chat)”

运行新的容器

echo “Started: $(docker run -d –network=host –env-file /path/to/lobe.env –name=Lobe-Chat –restart=always lobehub/lobe-chat)”

打印更新的时间和版本

echo “Update time: (date)”echo”Version:(docker inspect lobehub/lobe-chat:latest | grep ‘org.opencontainers.image.version’ | awk -F'”‘ ‘{print $4}’)”

清理不再使用的镜像

docker images | grep ‘lobehub/lobe-chat’ | grep -v ‘latest’ | awk ‘{print $3}’ | xargs -r docker rmi > /dev/null 2>&1
echo “Removed old images.”

此脚本可以在 Crontab 中使用，但请确认你的 Crontab 可以找到正确的 Docker 命令。建议使用绝对路径。

配置 Crontab，每 5 分钟执行一次脚本：

/5 * /path/to/auto-update-lobe-chat.sh >> /path/to/auto-update-lobe-chat.log 2>&1