手机也能离线用DeepSeek?实测可行,隐讳安全再升级!
发布日期:2025-04-05 06:24 点击次数:182
在科技探索的征程中,雷科技再次迈出了改进的一步,此次他们将眼神聚焦在了手机土产货部署AI大模子的尝试上。此前,雷科技已见效在无独显的札记本电脑上,仅凭CPU和内存见效运行了一个7B参数目的Qwen蒸馏模子,但这一尝试的内容真谛相对有限。于是,他们启动想考,淌若将这么的AI模子部署顺利机上,是否好像开启全新的支配场景?
为了收场这一指标,雷科技最初敌手机土产货部署AI的可行性进行了潜入探索。他们在网上查阅了多种有关教程,并躬行测试了其中的几种规律。其中,一个通过Termux支配模拟Linux终局来部署Ollama,再运行DeepSeek模子的决策引起了他们的防备。然则,内容操作中,他们发现教程中的就业器存在问题,无法凯旋访谒清华大学镜像文献源,导致部署经由费事重重。尽管经过数小时的尝试,他们照旧未能见效完成安设。
面临挑战,雷科技并未毁掉,他们转而寻找其他可行的部署决策。庆幸的是,GitHub上丰富的开源资源为他们提供了新的想路。他们测试了三款土产货AI部署支配:ChatterUI、PocketPal和MNN大模子。这三款支配各有千秋,好像闲暇不同用户的需求。
在ChatterUI中,用户可以顺利加载土产货AI模子,并通过在线下载时势云尔加载模子。这款支配还解救TTS(语音输出)功能,采集语音输入,可以解锁更多使用场景。安设完成后,用户只需浮浅建树即可唐突部署AI模子。而PocketPal则愈加简单,固然不解救TTS功能,但相同解救加载土产货AI模子,并提供了一些小参数的AI模子快速下载通说念。
关于不太擅长工夫操作的用户来说,MNN大模子则是一个更为友好的聘用。这款由阿里拓荒的开源支配整合了多个在手机等袖珍移动成立上运造孽果细腻的AI模子,用户可以把柄需要顺利点击下载。下载完成后,点击即可加载使用,全程操作方便。
在见效部署AI模子后,雷科技启动了体验门径。他们下载了1.5B版块的DeepSeek-R1模子进行测试。固然这个版块的模子在恢复一些复杂问题时显得有些力不从心,但在骁龙8至尊版+16G运存的手机上,AI推理和生成速率齐至极可以,也曾好像闲暇宽泛问答和使用的需求。
在后续测试中,7B版块的DeepSeek模子推崇愈加出色。它不仅好像正确恢复用户的问题,还能在离线景色下提供一些紧迫情况下的基础提倡。举例,在遭遇癫痫症发作的病东说念主时,AI好像给出正确的急救规律;在稀疏受伤无东说念主匡助时,也能提供自救提倡。
雷科技以为,在手机上部署AI大模子具有内容真谛。固然电脑上的部署可能显得过剩,但手机上的离线AI却能在关节时期说明作用。它可以在用户无网且需要匡助时提供最基础的提倡,成为用户的过劲助手。同期,这也为隐讳保护意志较强的用户提供了另一种聘用,他们可以在我方的成立上部署专属AI模子,确保数据安全和隐讳保护。
在对比了三款土产货AI部署支配后,雷科技给出了他们的提倡。关于追求踏实可用的用户来说,MNN是最佳的聘用;而关于有一定AI基础和编程基础的用户来说,ChatterUI和PocketPal则提供了更多功能和机动性。不管聘用哪款支配,用户齐能享受顺利机土产货部署AI带来的便利和乐趣。