云端与本地两手抓:开源神器Osaurus让Mac电脑变身全能AI服务器

随着人工智能模型逐渐走向商品化,科技初创公司正加速构建基于大模型的上层软件应用。据TechCrunch报道,一款名为Osaurus的开源、专为苹果生态打造的大模型(LLM)服务器近日备受瞩目。该平台能够让用户在本地和云端大模型之间自由切换,同时将所有核心文件和工具保存在用户自己的硬件设备上。

这款神器的诞生源于开发者对个人隐私和高昂Token费用的深度思考。Osaurus前身是一款AI桌面伴侣,其创始人特伦斯·派(曾任特斯拉与网飞软件工程师)发现,用户在享受AI便利的同时,极度渴望通过本地运行来摆脱对云端算力计费的长期依赖,并保障系统配置及浏览隐私的安全。

沙盒技术筑牢安全防线

作为连接不同AI模型与工作流的控制层,该软件不仅支持本地部署,也能灵活连接OpenAI和Anthropic等云端服务。由于不同模型各有所长,用户可以根据代码编写或文本处理的具体需求,一键无缝切换至最合适的底层模型。

为了彻底解决开源开发工具常见的安全漏洞问题,该系统呈现了极度简单易用的消费者级操作界面。更重要的是,它通过硬件隔离的虚拟沙盒技术来运行所有模型,将AI的访问权限严格限制在安全范围内,从而确保了用户本地计算机和核心数据的绝对安全。

释放本地算力缓解能耗

不过,在本地运行顶尖大模型对硬件资源有着极高的要求。目前,系统运行本地常规模型至少需要64GB内存,而若想流畅运行如DeepSeek V4 等超大尺寸模型,创始人则建议配置128GB内存以上的硬件系统。

目前该开源项目上线近一年,全球下载量已突破11. 2 万次。主创团队透露,随着本地AI在单位功耗下展现出的智能水平迎来爆发式指数级增长,未来企业用户甚至可以直接在本地部署一台Mac Studio来替代高昂的云端服务,这有望在保障企业数据不外泄的同时,显著缓解目前全球AI数据中心所面临的严重电力和能源危机。

via AI新闻资讯 (author: AI Base)
 
 
Back to Top
Copyright © 2025 BESTAI. All rights reserved.
BEST AI API中转 - OpenAI DeepSeek Claude Gemini Grok MidJourney API 2.8折起
[email protected]