当前位置:首页 > 工业控制 > 电路设计项目集锦
[导读]起初,我考虑使用带有Python的树莓派。但后来我收到了ESP32S3 AI Cam模块,它让我思考:这个小板能处理整个工作吗?

小型AI设备能检测作弊吗?

上周,我收到了一个男人的信息,他担心他女朋友出去抽烟时从阳台发来的语音留言。他希望有人帮他破解她的WhatsApp,以消除一些疑虑。现在,我相信感情问题应该通过交谈来解决,而不是窃听别人的电话。也就是说,我对为这样一个荒谬的目的建造一个自主的人工智能小工具的想法很感兴趣。

所以,我创建了Guamp应用程序(不是一个应用程序)——一个概念验证设备,它:

•侦测到女友在阳台上

•记录她的语音信息

•转录音频

•使用人工智能分析内容是否听起来可疑

•将结果通过电报发送给男友

硬件

起初,我考虑使用带有Python的树莓派。但后来我收到了ESP32S3 AI Cam模块,它让我思考:这个小板能处理整个工作吗?

什么是AI相机模块1.0 DFR1154?

这是一个1.5“x1.5”esp32为基础的板,具有:

一个200万像素的OV3660宽红外摄像头,一个板载I2S PDM麦克风,microSD卡插槽,内置led和扬声器输出放大器。(我没有微型扬声器,但我们这个项目不需要。)

一般工作流程

用照片训练机器学习模型,将其部署到相机上,每隔几秒钟拍一张照片,然后运行推理。如果结果超过了置信阈值,就假定是她。录制环境音频触发图像检测时开始录制音频。

将录制的音频发送到OpenAI的语音到文本API (Whisper)。

分析转录将文本(加上一些上下文,如名称)发送到ChatGPT,查看是否有任何可疑内容。

使用机器人远程通知你的男朋友。

计算机视觉

在我的演示中,我使用了一个通用的人物检测模型。要复制它:

下载这个ZIP文件:persondetectioninference . ZIP

在Arduino IDE:去素描>包括库>添加。zip库并添加它。

用特定的人物照片训练你自己的模型。这里有一个示例项目展示了这个过程:Alvik机器人的计算机视觉

训练后:

移动到Documents/Arduino/libraries/modelFolder/examples

在Arduino IDE中打开示例并编辑标题以指向您的模型,例如#include

如果演示运行良好,将相同的include集成到主草图中:guampAppUpload.ino

软件设置

安装通用电报机器人库。

你需要:

OpenAI API密钥(用于转录+分析)Telegram bot令牌(用于发送通知)这里是一个项目指南,解释如何创建一个Telegram bot并获得令牌。

软件配置

使用串行监视器调试工作流程:Wi-Fi连接,人员检测,录音,转录和分析。

外壳

我在Fusion 360中设计了外壳,并使用Bambu Lab A1 mini PLA打印了它。这是一个用3毫米螺钉固定的2件式外壳,包括一个标准的照片三脚架支架。

最后指出

如果你想改进或重新利用这个项目,你可以通过添加一个3.7V电池和一个TP4056充电器使它更小。你还可以使用音频阈值来记录完整的对话,而不是固定的时间,并考虑在分析音频的同时分析照片。

除了起始点(这一点与轶事一样值得怀疑)之外,它仍然令人着迷的是,一个18美元的模块可以在本地运行ML模型来检测人员,记录和转录音频,发送消息,甚至使用人工智能分析语音。

本文编译自hackster.io

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

9月2日消息,不造车的华为或将催生出更大的独角兽公司,随着阿维塔和赛力斯的入局,华为引望愈发显得引人瞩目。

关键字: 阿维塔 塞力斯 华为

加利福尼亚州圣克拉拉县2024年8月30日 /美通社/ -- 数字化转型技术解决方案公司Trianz今天宣布,该公司与Amazon Web Services (AWS)签订了...

关键字: AWS AN BSP 数字化

伦敦2024年8月29日 /美通社/ -- 英国汽车技术公司SODA.Auto推出其旗舰产品SODA V,这是全球首款涵盖汽车工程师从创意到认证的所有需求的工具,可用于创建软件定义汽车。 SODA V工具的开发耗时1.5...

关键字: 汽车 人工智能 智能驱动 BSP

北京2024年8月28日 /美通社/ -- 越来越多用户希望企业业务能7×24不间断运行,同时企业却面临越来越多业务中断的风险,如企业系统复杂性的增加,频繁的功能更新和发布等。如何确保业务连续性,提升韧性,成...

关键字: 亚马逊 解密 控制平面 BSP

8月30日消息,据媒体报道,腾讯和网易近期正在缩减他们对日本游戏市场的投资。

关键字: 腾讯 编码器 CPU

8月28日消息,今天上午,2024中国国际大数据产业博览会开幕式在贵阳举行,华为董事、质量流程IT总裁陶景文发表了演讲。

关键字: 华为 12nm EDA 半导体

8月28日消息,在2024中国国际大数据产业博览会上,华为常务董事、华为云CEO张平安发表演讲称,数字世界的话语权最终是由生态的繁荣决定的。

关键字: 华为 12nm 手机 卫星通信

要点: 有效应对环境变化,经营业绩稳中有升 落实提质增效举措,毛利润率延续升势 战略布局成效显著,战新业务引领增长 以科技创新为引领,提升企业核心竞争力 坚持高质量发展策略,塑强核心竞争优势...

关键字: 通信 BSP 电信运营商 数字经济

北京2024年8月27日 /美通社/ -- 8月21日,由中央广播电视总台与中国电影电视技术学会联合牵头组建的NVI技术创新联盟在BIRTV2024超高清全产业链发展研讨会上宣布正式成立。 活动现场 NVI技术创新联...

关键字: VI 传输协议 音频 BSP

北京2024年8月27日 /美通社/ -- 在8月23日举办的2024年长三角生态绿色一体化发展示范区联合招商会上,软通动力信息技术(集团)股份有限公司(以下简称"软通动力")与长三角投资(上海)有限...

关键字: BSP 信息技术
关闭