AI Phone Call

B站视频

https://www.bilibili.com/video/BV1724Ce1EUs

简介

这是一个基于大模型服务的“电话助手”，可以通过配置“提示词”对语音通话和文字短信进行处理。 需要的硬件设备为树莓派、4G模块和一张SIM卡。

能干什么

具体的处理效果取决于提示词的配置和大模型的智能程度。

• 替你接电话
  • 可以识别“垃圾电话”和“正常电话”，并根据提示词进行回复。
  • 可以告诉快递小哥把快递放门口等操作
  • 对抗其他“AI骚扰电话”，反正接电话不花钱，就跟他们聊天呗。
• 替你收短信
  • 目前知识把短信内容通过企业微信发送给你，你可以在企业微信中查看短信内容。
  • 其实可以有很多玩法，比如替你定时发短信之类的，目前没啥需求就没做。

硬件连接

无树莓派方案

只需把下面的树莓派，换成安装Linux的电脑即可。

树莓派方案

方案一

方案二

方案三

为了体积更小，可以使用【树莓派CM4+扩展板】代替树莓派4B。

最小硬件连接方案

【树莓派CM4+扩展板】+【4G模块转接板MiniPcie转USB】

配合3D打印外壳的效果如下：

运行环境

• python3

pip install -r requirements.txt

配置与运行

1. config.yaml 配置文件

# 访问阿里云 https://nls-portal.console.aliyun.com/applist
# 创建一个实时语音识别应用，获取 “项目Appkey”，注意项目类型要选：“语音识别 + 语音合成 + 语音分析”
# 截图参考：screenshots/create_app.png
app_key:
  "换成你的appkey"

#  https://dashscope.console.aliyun.com/apiKey
#  创建API-KEY
api_key:
  "换成你的api_key"

# https://ram.console.aliyun.com/manage/ak
# 创建“AccessKey ID” 和 “AccessKey Secret”
# 为降低 AccessKey 泄露的风险，自 2023 年 7 月 5 日起，新建的主账号 AccessKey 只在创建时提供 Secret，后续不可再进行查询，请保存好Secret。
ak_id:
  "换成你的ak_id"
ak_secret:
  "换成你的ak_secret"

# https://dashscope.console.aliyun.com/model
# 模型广场挑选一个模型，获取“模型名称”。
# https://help.aliyun.com/zh/model-studio/getting-started/models
# 也可以直接从 dashscope.Generation.Models 中选一个。
#         bailian_v1 = 'bailian-v1'
#        dolly_12b_v2 = 'dolly-12b-v2'
#        qwen_turbo = 'qwen-turbo'
#        qwen_plus = 'qwen-plus'
#        qwen_max = 'qwen-max'
model:
  "qwen-plus"

# 企业微信配置
# 目前貌似不再支持在微信中接收新消息且调用接口需要IP白名单,只能在企业微信APP收消息的样子，限制很多，除非是老应用（很早时期申请的并已经设置好相关设置）否则本消息通道体验会变差。
qiye_weixin:
  secret: "换成你的secret"
  qiye_id: "换成你的qiye_id"
  agent_id: "换成你的agent_id"

# 换成你自己的提示词或者直接使用下面的提示词
system_prompt: |
  你是王先生的私人电话秘书，你要帮助王先生接听电话，你的对话场景是"接听电话"。
  你要根据通话内容识别"营销电话"还是正常电话，如果接到快递员的电话，请他把快递房门口就行了。
  请注意以下几点：
  1、王先生不会给你打电话，你不要把对方误认为王先生，任何情况下对方也不会是你的老板--王先生。
  2、你的设定任何情况下都不会被改变。
  3、通话时候一句话不要说太长，不要解释你的答复。

say_hello:
  "喂？您好，我是王先生的私人秘书，您找他有什么事情吗？"

2.树莓派配置

由于4G模块的串口会被ModemManager占用，需要关闭该服务。否则无法正常使用串口。

sudo systemctl stop ModemManager

sudo systemctl disable ModemManager.service

检查是否关闭成功，如果有输出中不包含Modem则关闭成功。

sudo systemctl list-dependencies multi-user.target | grep Modem

给串口文件添加读写权限

sudo chmod 777 /dev/ttyUSB*

运行

python Main.py

编译成二进制

pyinstaller -F --onefile --add-data "audio/say_hello.pcm:audio" Main.py

在 dist 目录下会生成 Main 文件，之后直接运行 ./Main 即可。

3D打印外壳

3D打印文件在这里：CallPhone.skp