全球最实用的IT互联网信息网站!

AI人工智能P2P分享&下载搜索网页发布信息网站地图

当前位置:诺佳网 > 电子/半导体 > 嵌入式技术 >

香橙派昇腾系列产品深度适配Deepseek系列大模型

时间:2025-02-13 10:23

人气:

作者:admin

标签: DeepSeek  大模型  香橙  开发板 

导读:日前,香橙派官方发布OrangePiAIStuido、OrangePiAIpro(20T)本地部署Deepseek-R1蒸馏模型指南,通过在边缘进行离线部署,帮助用户实现高效端侧智能,确保数据处理的安全性和可控性。据了解...

日前,香橙派官方发布OrangePi AI Stuido、OrangePi AIpro(20T)本地部署Deepseek-R1蒸馏模型指南,通过在边缘进行离线部署,帮助用户实现高效端侧智能,确保数据处理的安全性和可控性。

据了解,DeepSeek-R1专为数学、代码生成和复杂逻辑推理任务设计,通过大规模强化学习(RL)提升推理能力,还摒弃监督微调(SFT),采用纯强化学习(GRPO算法)训练基座模型。同时,DeepSeek-R1提供了高效模型蒸馏技术,可将大规模模型能力迁移至更小、更高效的版本,优化模型性能、开源应用。经蒸馏后的DeepSeek-R1模型支持部署于端侧,大幅降低计算资源需求,显著提升端侧设备的AI推理效率。

目前,香橙派已经发布在OrangePi AI Stuido、OrangePi AIpro(20T)上运行Deepseek-R1蒸馏模型的操作指南,香橙派表示,未来将加大研发投入,携手昇腾推动不同算力等级的产品与DeepSeek等优质模型相结合,进一步降低端侧AI的门槛,为客户创造更大的AI价值。

wKgZO2etV3OALYa1AAH7ZSWfzuw933.png

wKgZPGetV3OAdA-eAAMYbYMd2pI996.png

据了解,OrangePi AIpro(20T)是香橙派联合昇腾AI打造的高算力开发板,根植于昇腾AI技术,集AI计算、ISP、图形输出等功能于一体,释放高达20 TOPS的AI算力。可配12/24GB运行内存,汇聚了MIPI DSI、双MIPI CSIUSB3.0、Type-C、双HDMI2.0、双2.5G以太网、支持SATA/NVMe SSD 2280的M.2插槽等各类流行的接口。OrangePi AIpro(20T)依托昇腾AI基础软硬件能力的基础,融合大模型与训推一体化优势,实现端边云全场景无缝部署,是构建昇腾计算产品、使能上层软件和应用的底座,有高算力、高能效等特性。

wKgZO2etV3SAEgasAAsLCfD-ZYA813.png

OrangePi AI Studio采用昇腾AI技术路线,融合“ARM core,AI core,Vector core,Image core”于一体,提供“基础通用算力+超强AI算力+编解码核心”,充分满足推训一体AI任务需求,拥有48GB /96GB LPDDR4X,速率高达4266Mbps。

OrangePi AI Studio汇聚了Type-C(USB4.0)、电源接口、电源按键、LED指示灯等,可广泛应用于OCR识别、目标识别、人脸识别、搜索推荐、大模型多模态、内容审核、VR智能、数字医疗、物联网等诸多AI应用场景。

wKgZPGeqsH2AVsH9AAajDfrCWic698.png

温馨提示:以上内容整理于网络,仅供参考,如果对您有帮助,留下您的阅读感言吧!
相关阅读
本类排行
相关标签
本类推荐

CPU | 内存 | 硬盘 | 显卡 | 显示器 | 主板 | 电源 | 键鼠 | 网站地图

Copyright © 2025-2035 诺佳网 版权所有 备案号:赣ICP备2025066733号
本站资料均来源互联网收集整理,作品版权归作者所有,如果侵犯了您的版权,请跟我们联系。

关注微信