0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用全志A733平板构建端侧DeepSeek算力平台

全志在线 ? 来源:全志在线 ? 2025-02-13 10:18 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着DeepSeek 的蒸馏技术的横空出世,端侧 SoC 芯片上运行大模型成为可能。那么端侧芯片跑大模型的效果如何呢?本文将在全志 A733 芯片平台上部署一个 DeepSeek-R1:1.5B 模型,并进行实测效果展示。 端侧平台环境

设备:全志A733平板

系统:Android 15

DDR:8GB LPDDR5 @2400MHz

Flash:128GB UFS3.0

测试模型:Deepseek-R1-Distill-Qwen-1.5B

b4382098-e920-11ef-9310-92fbcf53809c.png

首先,我们测试AI经典哲学问题“你是谁?”

实测视频

b47fcbb4-e920-11ef-9310-92fbcf53809c.gif

输入运行命令之后可看到模型运行起来了,此时我们就可以开始和Deepseek对话了。

从实拍视频可以看到,这个输出速度基本可以满足正常对话的交互体验。

然后我们要求Deepseek“快速写一段代码计算1-9999的和”

实测视频如下:

b4d47ce0-e920-11ef-9310-92fbcf53809c.gif

可以看到,Deepseek会先对题目进行分析,他很快就分辨出了这是一个经典的等差数列求和问题,并给出了计算公式。

然后,可以看到在没有指定编程语言的情况下,Deepseek默认使用python写出了计算代码。

最后,Deepseek对整个解题思路进行了归纳总结。

我们再尝试解一个一元二次方程:“求解方程x^2+4x+4=0”

实测视频如下:

b5150d1e-e920-11ef-9310-92fbcf53809c.gif

同样,Deepseek也是快速理清了题意,判别出了这是一个解一元二次方程的题目,并给出了求解公式。

然后Deepseek知道先对方程进行重根判别,判别出这道题是只有一个重根的。

最后,Deeepseek 将题目代入公式进行求解,马上便得出了正确的计算结果。

经测试,可以得出结论是Deepseek-R1-Distill-Qwen-1.5B 是可以在全志A733芯片平台的平板电脑上较流畅地运行的,并且可以让Deepseek拥有中学生级别的逻辑推理能力。而这才是一个开始。后续,随着量化技术的不断发展,模型的体积和计算复杂度将进一步降低,从而更好地适应端侧设备的资源限制。未来,我们期待 DeepSeek 在更多场景中发挥其强大的功能,为用户提供更加智能和便捷的体验。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    460

    文章

    52936

    浏览量

    447967
  • 全志
    +关注

    关注

    24

    文章

    288

    浏览量

    54112
  • DeepSeek
    +关注

    关注

    2

    文章

    814

    浏览量

    2188

原文标题:【实测】用全志A733平板搭建一个端侧Deepseek算力平台

文章出处:【微信号:gh_79acfa3aa3e3,微信公众号:全志在线】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    瑞莎推出基于A733处理器的单板计算机Cubie A7A

    科技合作伙伴瑞莎计算机(Radxa) 今日发布基于 A733处理器平台的单板计算机——
    的头像 发表于 08-20 11:37 ?964次阅读

    软通智中标韶关公共服务平台项目

    日前,软通动力旗下软通智中标《韶关公共服务平台(一体化
    的头像 发表于 05-22 16:19 ?511次阅读

    科技携手Blackview推出AI大屏旗舰平板MEGA 2 WiFi

    在AI技术持续渗透消费电子终端的大趋势下,平板市场正加速从“工具属性”向“智能伙伴”转型。近日,专注于智能终端研发的创新型科技品牌Blackview携手科技,正式推出其旗下首款搭载
    的头像 发表于 04-21 17:24 ?964次阅读

    AI应用——“后DeepSeek时代”产业机遇分析

    ,面向行业进一步释放 " AI 应用" 的确定性机遇,推动“后DeepSeek时代” PC生产边界实现跨越式拓展。 搭载AMD锐龙AI处理器的Windows 11 AI+ PC,
    的头像 发表于 03-26 17:34 ?440次阅读

    DeepSeek推动AI需求:800G光模块的关键作用

    随着人工智能技术的飞速发展,AI需求正以前所未有的速度增长。DeepSeek等大模型的训练与推理任务对的需求持续攀升,直接推动了服务
    发表于 03-25 12:00

    【一文看懂】什么是

    随着物联网(IoT)、人工智能和5G技术的快速发展,正逐渐成为智能设备性能提升和智能化应用实现的关键技术。什么是
    的头像 发表于 02-24 12:02 ?1935次阅读
    【一文看懂】什么是<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>算</b><b class='flag-5'>力</b>?

    视觉芯片V821接入DeepSeek和豆包视觉大模型

    上周,生态的小伙伴们成功在A733和T527的SoC平台上实现了
    的头像 发表于 02-21 09:27 ?3210次阅读

    DeepSeek驱动AI市场升温,智中心利用率望提升

    据多位业内人士透露,DeepSeek在业界的迅速部署与应用,为AI市场带来了新的热潮。自年后开工两周以来,设备租赁及采购的咨询量显著
    的头像 发表于 02-19 14:00 ?571次阅读

    软硬协同优化,安谋科技新一代“周易”NPU实现DeepSeek-R1高效部署

    优化的架构设计,其beta版本在2024年底已面向早期用户开放评估测试,并获得了广泛认可与积极反馈。 预计今年上半年,这款备受期待的 NPU 产品将正式亮相市场,届时将为更多用户带来突破性的
    发表于 02-14 10:52 ?236次阅读
    软硬协同优化,安谋科技新一代“周易”NPU实现<b class='flag-5'>DeepSeek</b>-R1<b class='flag-5'>端</b><b class='flag-5'>侧</b>高效部署

    【实测】用A733平板搭建一个Deepseek平台

    ? 随着DeepSeek 的蒸馏技术的横空出世, SoC 芯片上运行大模型成为可能。那么芯片跑大模型的效果如何呢?本文将在
    发表于 02-13 10:19

    AI元年爆发!广和通AI模组及解决方案全面支持DeepSeek-R1蒸馏模型

    近期,国产大模型DeepSeek凭借开放性、更低训练成本、侧部署等优势,迅速成为增速最快的AI应用之一,推动AI普惠化。目前,广和通高AI模组及解决方案全面支持小尺寸的
    的头像 发表于 02-11 18:08 ?618次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b>AI元年爆发!广和通AI模组及解决方案全面支持<b class='flag-5'>DeepSeek</b>-R1蒸馏模型

    DeepSeek对芯片的影响

    DeepSeek模型,尤其是其基于MOE(混合专家)架构的DeepSeek-V3,对芯片的要求产生了深远影响。为了更好地理解这一影响,我们可以从几个方面进行分析。一.MOE架构对
    的头像 发表于 02-07 10:02 ?1329次阅读
    <b class='flag-5'>DeepSeek</b>对芯片<b class='flag-5'>算</b><b class='flag-5'>力</b>的影响

    MediaTek天玑移动平台赋能腾讯会议AI人像分割模型

    MediaTek 与腾讯会议联合优化的 NPU 虚拟背景功能,已在搭载 MediaTek 天玑旗舰芯的终端正式上线。作为双方初次开展的软硬件生态合作,此次联合优化旨在充分利用天玑移动平台
    的头像 发表于 11-29 15:30 ?826次阅读

    台电新品P50 AI平板电脑即将上市

    本次P50AI平板电脑诞生过程得益于台电与科技再次深度联袂合作,并在台电新品P50AI上首发搭载
    的头像 发表于 10-24 10:23 ?1453次阅读