简介
LiveKit Agents 是一个端到端框架,它使开发者能够构建能够通过语音、视频和数据通道与用户互动的智能多模态语音助手(AI代理)。它通过集成OpenAI的实时API和LiveKit的WebRTC基础设施,提供了创建语音助手的快速入门指南,包括语音识别(STT)、语言模型(LLM)和文本转语音(TTS)的流水线。此外,它还支持创建语音到语音代理、接听和响应来电、以及代表用户拨打电话的功能。
截图

产品特色
集成OpenAI实时API与LiveKit WebRTC基础设施。
创建具有STT、LLM和TTS模型的AI语音助手。
使用OpenAI实时API创建语音到语音代理。
通过LiveKit代理和SIP库接听和响应来电。
代表用户拨打电话。
提供部署和扩展代理的最佳实践。
使用教程
阅读LiveKit Agents文档,了解其功能和工作原理。
根据文档中的指南,设置OpenAI实时API和LiveKit的WebRTC基础设施。
选择并集成所需的STT、LLM和TTS模型。
编写代码,创建AI语音助手的流水线。
测试AI语音助手的功能,确保其能够正确响应语音命令。
根据需要,扩展AI语音助手的功能,如添加语音到语音代理或电话拨打功能。
部署AI语音助手到生产环境,并根据用户反馈进行优化。
流量来源
直接访问 | 40.42% | 外链引荐 | 41.83% | 邮件 | 0.12% |
自然搜索 | 11.85% | 社交媒体 | 5.41% | 展示广告 | 0.35% |
最新流量情况
月访问量
197.30k
平均访问时长
507.34
每次访问页数
6.63
跳出率
34.10%
总流量趋势图
地理流量分布情况
美国
33.71%
印度
12.98%
巴基斯坦
5.98%
中国
5.51%
越南
4.50%
地理流量分布全球图
同类开源产品

Swarm
Swarm是由OpenAI Solutions团队管理的实验性框架,旨在构建、编排和部署多智能体系统。
AI Agents#协调

Ola Friend
Ola Friend是字节跳动豆包推出的首款AI智能体耳机,它通过接入豆包大模型,与豆包APP深度结合,实现了无需打开手机即可通过语音唤醒AI助手的功能。
AI语音助手#智能耳机

Livekit Agents
优质新品
LiveKit Agents 是一个端到端框架,它使开发者能够构建能够通过语音、视频和数据通道与用户互动的智能多模态语音助手(AI代理)。
AI Agents#实时API

EMOVA
EMOVA(EMotionally Omni-present Voice Assistant)是一个多模态语言模型,它能够进行端到端的语音处理,同时保持领先的视觉-语言性能。
AI语音助手#语音识别

Genspark Autopilot Agent
优质新品
Genspark Autopilot Agent是一个能够自动处理任务的智能代理,它通过模拟用户操作来执行任务,即使在用户关闭页面后也能继续工作。
AI Agents#智能代理

Windows Agent Arena
Windows Agent Arena (WAA) 是一个专注于Windows操作系统的可扩展、开源框架,用于测试和开发能够使用语言模型在PC上进行推理、规划和行动的AI代理。
AI Agents#Windows操作系统

EVI 2
EVI 2是Hume AI推出的新型基础语音对语音模型,能够以接近人类的自然方式与用户进行流畅对话。
AI语音助手#语音识别

Muagent
muAgent是一个创新的Agent框架,由知识图谱引擎驱动,支持多Agent编排和协同技术。
AI Agents#知识图谱

Claude For Enterprise
Claude for Enterprise 是一款面向企业级用户的AI助手产品,旨在帮助组织安全地利用内部知识进行协作。
AI Agents#企业协作
替代品

Swarm
Swarm是由OpenAI Solutions团队管理的实验性框架,旨在构建、编排和部署多智能体系统。
AI Agents#协调

EMOVA
EMOVA(EMotionally Omni-present Voice Assistant)是一个多模态语言模型,它能够进行端到端的语音处理,同时保持领先的视觉-语言性能。
AI语音助手#语音识别

Windows Agent Arena
Windows Agent Arena (WAA) 是一个专注于Windows操作系统的可扩展、开源框架,用于测试和开发能够使用语言模型在PC上进行推理、规划和行动的AI代理。
AI Agents#Windows操作系统

Muagent
muAgent是一个创新的Agent框架,由知识图谱引擎驱动,支持多Agent编排和协同技术。
AI Agents#知识图谱

Open LLM VTuber
Open-LLM-VTuber 是一个开源项目,旨在通过语音与大型语言模型(LLM)进行交互,具有实时的Live2D面部捕捉和跨平台的长期记忆功能。
AI Agents#VTuber

Multi Agent Concierge
multi-agent-concierge是一个多代理礼宾系统,它通过多个专门的代理来完成复杂的任务,并通过一个“礼宾”代理来引导用户到正确的代理。
AI Agents#客户服务

Agent Service Toolkit
agent-service-toolkit是一个用于运行基于LangGraph的AI代理服务的完整工具包,包括LangGraph代理、FastAPI服务、客户端以及Streamlit应用程序,提供了从代理定义到用户界面的完整设置。
AI Agents#LangGraph

Agentk
AgentK是一个自进化的模块化自代理通用人工智能(AGI)模型,由多个合作的代理组成,能够根据用户的需求构建新的代理来完成任务。
AI Agents#模块化

Qwen2 Audio Instruct Demo
Qwen2 Audio Instruct Demo 是一个基于音频指令的交互式演示网站,它利用最新的人工智能技术,让用户通过语音指令与网页进行互动。
AI语音助手#语音识别
精选AI产品推荐

Nocode
中文精选
NoCode 是一款无需编程经验的平台,允许用户通过自然语言描述创意并快速生成应用,旨在降低开发门槛,让更多人能实现他们的创意。
开发平台#应用开发
912

Listenhub
优质新品
ListenHub 是一款轻量级的 AI 播客生成工具,支持中文和英语,基于前沿 AI 技术,能够快速生成用户感兴趣的播客内容。
音频生成#AI
348

Lovart
国外精选
Lovart 是一款革命性的 AI 设计代理,能够将创意提示转化为艺术作品,支持从故事板到品牌视觉的多种设计需求。
AI设计工具#创意工具
1,128

Fastvlm
FastVLM 是一种高效的视觉编码模型,专为视觉语言模型设计。
AI模型#图像处理开源
564

Smart PDFs
国外精选
Smart PDFs 是一个在线工具,利用 AI 技术快速分析 PDF 文档,并生成简明扼要的总结。
文章摘要#AI
984

Keysync
KeySync 是一个针对高分辨率视频的无泄漏唇同步框架。
视频编辑#视频处理开源
480

Anyvoice
AnyVoice是一款领先的AI声音生成器,采用先进的深度学习模型,将文本转换为与人类无法区分的自然语音。
音频生成#文本转语音
26.38k

Liblibai
中文精选
LiblibAI是一个中国领先的AI创作平台,提供强大的AI创作能力,帮助创作者实现创意。
AI模型#图像生成
344.42k