资料介绍
描述
你的身体可以镀铬...
警告:赛博朋克 2077 的一些小剧透可能会提前......
该项目的目标是创建受 Cyberpunk 2077 启发的可穿戴 Cyberware,它具有交互式 AI,通过耳机在佩戴者的头部发出声音;由ChatGPT提供支持。
它的灵感来自Relic - 游戏中的一项威廉希尔官方网站 ,可以存储某人的意识,并允许他们与在其 Cyberware 中安装芯片的人进行整合和互动。
在游戏中,名为 Johnny Silverhand(由基努里维斯饰演)的角色居住在 Relic 中,并使用该威廉希尔官方网站 直接与您的角色对话。他也可以被看见;虽然只是用户,因为他基本上是在他们的脑海中投射。
几年前我开始研究它,但在硬件和软件方面花费了相当长的时间和反复试验才能正确 - 它最初使用我的 Bot_Engine 和Chatbot ,直到ChatGPT发布并且我意识到显而易见的解决方案是而是整合它。
目标是将 MAX30105 传感器用作心跳检测器,安装在佩戴者的太阳穴上。如果用户的心率升高或降低,它也可以方便地进行额外的响应。
快速警告:
This code AND hardware should not be used for medical diagnosis. It's for fun/novelty use only, so bear that in mind while using it.
Also bear in mind that ChatGPT will respond with the style of whatever context you
have set within config/chatgpt_config.py, so I can't be sure what it will say. And I
can't take any responsibility for any other context that is set or what it says.
你会跟随这个面包屑路径
其中的关键部分是 Raspberry Pi Zero 2——它提供了足够的 CPU 能力和 RAM 来运行语音推理和其他一些原始 Pi Zero 无法提供的外形尺寸。
我最初试图用一片 PiBow 将它固定在我的耳朵上——如果它只是 Pi Zero 本身就很好,但是当你开始添加传感器时,外壳,尤其是电池威廉希尔官方网站 变得太重了留在头上。
所以我不得不找到另一个解决方案;那个解决方案是我从亚马逊买的一个漂亮的大金属发带。
你可以看到我有一个漂亮的金属外壳,将整个东西安装在更坚固的 PiBow 切片上,并从 Pi Zero 外壳中添加了一些额外的东西,以容纳电池和 LiPo Powerboost 500。
30105 传感器连接到前面,面向佩戴者的头部:
这是连接到 Pi 相对容易的,如下所示:
我刚刚用一些额外的接线将其扩展。
安装到 PiBow 切片的 Pi 和外壳:
这是原始耳机上的音频 DAC 垫片,稍后必须将其移到扩展接头上,以便允许传感器通过跨接电缆连接到引脚:
电池和主要部件如何连接成角度的 USB A 至 USB Micro 电缆:
头饰的最终形态,上面还贴有荒坂的贴纸:
最后一点整理传感器和电线:
以及插入 USB 麦克风和 USB Micro 垫片、头带和耳机的最终硬件:
有时让我假装我存在,好吗?
代码可以在我的GitHub找到。
对于任何人通过修改此程序对 FakeYou 所做的事情,我不承担任何责任,同时请注意,ChatGPT 可能会生成奇怪的东西以传递给 FakeYou,这也取决于对 ChatGPT 所说的内容。典型的。
本质上,它使用包裹在 python 脚本中的 Web 浏览器自动化来与 ChatGPT 交互。
我发现超过一定数量字符的响应会完全破坏 Nix-TTS 并导致它崩溃;但即使是更短的响应有时也会导致它崩溃。它能够完全执行响应,而无需使用任何通常的礼貌内容。非常酷,实际上感觉就像您正在从角色那里得到回应。
所以这里的主要问题是 Pi Zero 2 虽然具有四核 arm SoC 和 512mb RAM 相对强大,但仍然需要时间来处理某些事情。因此,语音到文本的处理可能需要几分钟时间,TTS 可能需要一段时间,甚至 ChatGPT 包装器也需要一些处理时间。
所以交互不是完全实时的,但我希望未来的 Pi Zero 3 具有更强大的硬件,或者甚至是我可以用于此的其他小型设备。Pi 4 会快得多,但如果戴上头戴式设备,实施起来会困难得多。
这是我头上的一些照片以及赛博朋克夹克:
还有一些额外的特写镜头:
。。
语音到文本输入:
ChatGPT 的文本到语音输出:
有时 Speech to Text 会出错:
ChatGPT 输出与它一起运行:
另一个显示心率传感器潜在误差的输出:
我只想让世界知道我来过这里。
总的来说,这是可行的;但它在 STT 方面非常慢 - 即使 STT 自行运行,所以希望将来会出现新的 RPi Zero 3 或带有 Gig RAM 的 Zero 2 来帮助加快速度。我认为很多速度问题是由于缺少 RAM 导致分页引起的,但我也注意到在 Pi 4 8GB 上运行的Terminator Skull也存在同样的问题——同时它也在线程化和运行其他东西。
幸运的是,我构建它的平台应该允许轻松升级,希望我可以更换 Pi,同时保持连接到主要 Cyberware 的相同外壳。所以在未来,这也许可以进行实时对话,并且 Cyberware 可以用来创建各种 AI 角色和助手来与之交互。
另一个问题是我使用的 ChatGPT 包装器,因为给出的每个响应都会开始与 ChatGPT 的新对话,而不是继续同一个线程——但我认为该包装器中有代码允许这样做;现在有了官方 API 也没什么关系了。
此外,我还可以通过使用官方 API 来大大减少语音到文本的处理时间。因此,通过使用 FakeYou、OpenAI 的新 Whisper API和ChatGPT API,我可以大大加快速度。因此,请留意未来对此的改进。
以某种方式添加视觉元素会很酷 - 如果我能破解如何让正确聚焦的屏幕在佩戴者眼中很好地工作。我以前用EDITH 眼镜和钢铁侠头盔解决过这个问题,但它们不够大或不够详细,无法显示文本以外的复杂内容;所以这是一个需要进一步研发的领域。
最终,添加到其中的更新和错误修复将使它达到更好的状态,并且也会被放入最终的 Relic Cyberware 2.0 中。
不过,我认为这很合适,因为这需要很长时间才能构建,而且漏洞百出,速度缓慢,需要大量更新——鉴于赛博朋克本身就是这样在 2020 年发布的。
让我知道您的想法,并为未来的项目坚持下去!我将研究将这个基于上下文/角色的 ChatGPT 系统连接到其他项目中,例如我的Terminator Skull 。
- Meeseeks盒子开源硬件
- 开源硬件-警灯
- AirBits开源硬件
- 闪烁的LED开源硬件
- 串联电路开源硬件
- 喂机器开源硬件
- 智能积木开源硬件
- CAM输出开源硬件
- 音箱开源硬件分享
- HBus开源硬件
- 门铃开源硬件
- Arduino手表开源硬件
- 机械臂开源硬件
- 基于Arduino硬件光控灯制作资料 6次下载
- 主流的开源硬件有哪些详细资料说明
- 用小安派开源硬件制作一个桌面天气站 809次阅读
- 寻找开源硬件成功的触发器 636次阅读
- 源创通信BPI-M1+ 开源硬件开发板介绍 2648次阅读
- 解读几大“可穿戴式无线音箱” 9101次阅读
- 如何使用Cyber RT创建新组件 5738次阅读
- 如何设计可穿戴产品?可穿戴产品设计的几大要素分析 8353次阅读
- 三大主流开源硬件对比:Arduino vs BeagleBone vs Raspberry Pi 6363次阅读
- MEMS六轴传感器的可穿戴设备电路设计—电路精选(37) 3940次阅读
- 可穿戴设备氧传感器电路解析—电路精选(35) 4543次阅读
- 复古手环:用开源硬件打造你自己的可穿戴设备 1.1w次阅读
- 从移动到穿戴:探讨可穿戴概念、威廉希尔官方网站 与应用 4352次阅读
- 【致命干货】可穿戴计算与系统仿真 3602次阅读
- 开源硬件究竟有多“Open”?看完这个你就清楚了 6939次阅读
- 蓝牙/ZigBee威廉希尔官方网站 助臂可穿戴网络设计 1999次阅读
- 为什么可穿戴设备如此流行? 1061次阅读
下载排行
本周
- 1山景DSP芯片AP8248A2数据手册
- 1.06 MB | 532次下载 | 免费
- 2RK3399完整板原理图(支持平板,盒子VR)
- 3.28 MB | 339次下载 | 免费
- 3TC358743XBG评估板参考手册
- 1.36 MB | 330次下载 | 免费
- 4DFM软件使用教程
- 0.84 MB | 295次下载 | 免费
- 5元宇宙深度解析—未来的未来-风口还是泡沫
- 6.40 MB | 227次下载 | 免费
- 6迪文DGUS开发指南
- 31.67 MB | 194次下载 | 免费
- 7元宇宙底层硬件系列报告
- 13.42 MB | 182次下载 | 免费
- 8FP5207XR-G1中文应用手册
- 1.09 MB | 178次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 2555集成电路应用800例(新编版)
- 0.00 MB | 33566次下载 | 免费
- 3接口电路图大全
- 未知 | 30323次下载 | 免费
- 4开关电源设计实例指南
- 未知 | 21549次下载 | 免费
- 5电气工程师手册免费下载(新编第二版pdf电子书)
- 0.00 MB | 15349次下载 | 免费
- 6数字电路基础pdf(下载)
- 未知 | 13750次下载 | 免费
- 7电子制作实例集锦 下载
- 未知 | 8113次下载 | 免费
- 8《LED驱动电路设计》 温德尔著
- 0.00 MB | 6656次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935054次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537798次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420027次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191187次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183279次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138040次下载 | 免费
评论
查看更多