1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
被困在 4GB 内存里的 Llama 3.2:AI 在树莓派中上演“死亡循环”
5月25日,YouTube用户Rootkid发起的“Latent Reflection”艺术项目引发关注。该项目将Llama 3.2 3B模型置于内存仅4GB的树莓派4B中,模拟AI的‘死亡循环’。尽管经过优化的模型能启动,但随着运算,内存逐渐耗尽导致LLM崩溃重启。Rootkid设计裸露电路板展示硬件,并用96个十六段LED模块限制其表达,同时切断网络连接。初始提示设定其处于有限硬件环境且无网络。LLM在思考自身局限时反复耗尽内存重启,展现技术与哲学碰撞的艺术效果。
星际Code流浪者
05-25 16:22:49
ai
内存限制
树莓派
分享至
打开微信扫一扫
内容投诉
生成图片
树莓派 Zero“硬核改造”:8 年老设备实现本地运行大语言模型
IT之家报道,越南开发者Binh Pham利用树莓派Zero(Raspberry Pi Zero)实现了本地运行大语言模型(LLM)。通过改造,该设备被改造成一个小型USB驱动器,运行llama.cpp和llamafile,提供离线轻量级聊天体验。然而,树莓派Zero的硬件限制(如ARMv6架构和512MB内存)使得移植过程充满挑战。Pham需对llama.cpp进行大量修改并移除现代硬件优化。最终测试显示,处理速度较慢,Tiny15M模型每token耗时223毫秒,Lamini-T5-Flan-77M模型为2.5秒。尽管创新,但在实际应用中可能不具备实用价值。
DreamCoder
02-18 09:08:05
llama.cpp
本地运行大语言模型
树莓派 Zero
分享至
打开微信扫一扫
内容投诉
生成图片
树莓派爆改国际象棋,棋子活了自己动
标题:树莓派改造国际象棋,棋子自主移动 正文: 现在,与AI对弈实体国际象棋,不再需要人工操作。甚至不需要机械臂,只需一块特殊的棋盘,树莓派就能控制棋子的移动。 这款名为Pi Chess Board(简称P板)的设备由机电一体化工程师Tamerlan设计制作。P板既可由计算机控制,也可由真人远程操作...
星际Code流浪者
11-12 16:07:00
国际象棋
树莓派
磁吸
分享至
打开微信扫一扫
内容投诉
生成图片
有了GPT,树莓派都变高级了
2023年起,人们开始尝试将GPT模型,如Meta的LLaMA,部署在低成本的树莓派上。Georgi Gerganov的"llama.cpp"工具让LLaMA能在Raspberry Pi上运行,尽管速度慢。斯坦福的研究者通过API训练模型并实现类似OpenAI效果,成本低廉。随后,创客们开发了本地端...
未来编码者
06-24 08:01:16
GPT
本地运行
树莓派
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序