QuecPython+webRTC：AI 机器人

概述

QuecPython 推出了基于豆包 webRTC 的 AI 聊天机器人解决方案。该方案基于火山的 RTC 库，并且只能使用支持 TiktokRTC 功能的固件。

核心特点

• 实时性：火山实时对话式 AI，快速响应你的问题。
• 简易性：无需复杂代码编写，提供简单便捷的 python 接口。
• 兼容性：代码可在多款 QuecPython 开发板上运行。

快速上述

主要介绍如何使用 QuecPython 系列开发板基于豆包 webRTC 实现 AI 聊天机器人，大致操作流程如下：

• 初始化
• 激活大模型
• 大模型参数配置

初始化

初始化 TiktokRTC，并返回 tiktok 火山大模型对话对象。

class TiktokRTC(time, callback=None)

初始化详情请参考构造函数。

激活大模型

该方法用于大模型连接激活状态配置/查询。

tiktok.active()

• 若传参则表示火山大模型连接状态配置，传参True/False开启/关闭火山大模型。
• 若不传参则表示查询火山大模型连接状态，返回值True/False表示火山大模型开启/关闭。

API 详情请参考 tiktok.active。

大模型参数配置

该方法用于火山大模型参数查询/配置。

TiktokRTC.config()

• 当只传参关键字时，接口查询，每次只能查询一个值。
• 当传参赋值时，接口设置，返回True/False表示成功/失败，可以同时设置多个值。

API 详情请参考 TiktokRTC.config。

应用案例

应用案例详情请参考豆包 RTC AI 聊天机器人，附有详细的操作教程。

import dataCall
import utime as time
import TiktokRTC
import atcmd
import _thread

from machine import Pin

PA = Pin.GPIO39

def enable_pid2():
    resp = bytearray(50)
    atcmd.sendSync('AT+qicsgp=2,1,3gnet,"","",0\r\n',resp,'',20)
    atcmd.sendSync('at+cgact=1,2\r\n',resp,'',20)

def ai_callback(args):
    global GPIO39
    event = args[0]
    msg = args[1]
    if event == 1:
        print('TIKTOK_RTC_EVENT_START')
        GPIO39.write(1)
    elif event == 2:
        print('TIKTOK_RTC_EVENT_STOP')
        GPIO39.write(0)
    elif event == 3:
        print('TIKTOK_RTC_EVENT_TTS_TEXT {}'.format(msg))
        #call.stopAudioService()
    elif event == 4:
        print('TIKTOK_RTC_EVENT_ASR_TEXT {}'.format(msg))
        #call.stopAudioService()
    elif event == 5:
        print('TIKTOK_RTC_EVENT_ERROR {}'.format(msg))
    else:
        print('TIKTOK_RTC_EVENT UNKNOWN {}'.format(event))


if __name__ == '__main__':
    while True:
        lte = dataCall.getInfo(1, 0)
        if lte[2][0] == 1:
            print('lte network normal')
            enable_pid2()
            break
        print('wait lte network normal...')
        time.sleep(3)
    
    tiktok = TiktokRTC(3000000, ai_callback)
    GPIO39 = Pin(PA, Pin.OUT, Pin.PULL_DISABLE, 0)
    time.sleep(2)
    
    tiktok.config(volume=6)
    print('volume: {}'.format(tiktok.config('volume')))
    
    tiktok.active(True)

常见问题

无法进行 AI 对话？

由于固件内火山对话 token 临时测试使用，随时可能取消，如遇到无法正常加入房间对话，请联系移远 fae 人员获取支持。