kitt

KITT 项目介绍

KITT 是一个基于 ChatGPT 的人工智能助手，集成于 WebRTC 视频会议中，为用户提供智能化的互动体验。随着 KITT V2 版本的发布，项目已使用 Agents Framework 构建，并为用户带来了更多功能和优化。

在线演示

用户可以直接通过 KITT 在线演示页面 体验这个智能 AI 的强大功能。无需复杂的安装或设置，只需简单几步即可在网页上尝试。

工作原理

KITT 项目主要由两个服务组成：

1. meet 服务：这是一个基于 NextJS 构建的视频会议应用。
2. lkgpt-service：负责实现 KITT 的核心功能。

当用户创建会议房间时，系统会通过 Webhook 调用 lkgpt-service 中的处理器，随后为会议加入一个特别的参与者——KITT。KITT 可以借助 Google Cloud Platform 的语音识别、ChatGPT 技术以及文本转语音功能，与用户进行自然的语音交流。

以下图示展示了 KITT 的架构：

快速开始

先决条件

为了成功运行 KITT，需要具备以下条件：

• 从 Google cloud 获取 GOOGLE_APPLICATION_CREDENTIALS 的 JSON 格式凭证。
• OpenAI 的 API 密钥。
• 从 LiveKit Cloud 获取 LiveKit 的 api_key、api_secret 和 url。
• 安装 Go 1.19+ 和 Node.js。

本地运行

要在本地运行项目，您需要启动 meet 和 lkgt-service 两个服务。

启动 Meet

首先在 meet/ 目录下，将 .env.example 文件复制为 .env.local，并填写您的 LiveKit 连接详细信息。接着，运行以下命令：

yarn install && yarn dev

启动 lkgpt-service

在 lkgpt-service/ 目录下，将 config-sample.yaml 复制为 config.yaml 并填写 LiveKit 连接详细信息及 OpenAI API 密钥。然后运行：

go run /cmd/server/main.go --config config.yaml --gcp-credentials-path gcp-credentials.json

启动这两个服务后，通过浏览器访问 http://localhost:3000。需要注意的是，在本地部署时，由于 LiveKit Webhook 无法直接访问本地的 lkgpt-service，用户需要手动调用 API 来激活 KITT。通过以下命令，使用房间的 room_name（在 Meet UI 中进入房间时的 URL 部分）来激活 KITT：

curl -XPOST http://localhost:3001/join/<room_name>

通过这些步骤，用户可以在本地体验 KITT 的强大功能，享受与 AI 的直观互动。