AI,人工智能,这个东西其实一旦都不新鲜。
从早些年的科幻作品,到后来的逐步落地,从1997年IBM超级电脑深蓝”击败国际象棋大师卡斯帕罗夫,到2016年Google AlphaGo战胜围棋冠军李世石,AI一直都在进步,也一直在演化。
(资料图片仅供参考)
但因为算力算法、技术能力、应用场景等方面的种种限制,AI一直有些空中楼阁的感觉。
直到出现了ChatGPT,AI才真正引燃了普通人的热情,让我们发现,AI竟然如此强大,又如此唾手可得,让众多个体、企业为之兴奋,为之癫狂。
众所周知,足够强大与合理的硬件、算法,是实现高效、实用AI的两大基石,而在这一番AI热潮中,NVIDIA之所以春风得意,就得益于其在高性能计算领域多年来的布局和深耕,非常适合超大规模的云端AI开发。
当然,AI无论实现方式还是应用场景都是多种多样的,既有云侧的,也有端侧的。
NVIDIA的重点在云侧和生成式AI,Intel在云侧生成式、端侧判定式同时出击,而随着越来越多的AI跑在端侧,更贴近普通用户日常体验,所带来的提升越来越明显,Intel更是大有可为。
端侧AI有几个突出的特点:
一是用户规模庞大,应用场景也越来越广泛;
二是延迟很低,毕竟不需要依赖网络将指令、数据传到云侧处理再返回;
三是隐私安全,不用担心个人信息、商业机密等上传后泄露;
四是成本更低,不需要大规模服务器和计算,只需本地设备即可完成。
端侧AI,说起来大家可能会感觉很陌生,但其实,人们习以为常的背景模糊、视觉美颜、声音美化(音频降噪)、视频降噪、图像分割等等,都是端侧AI的典型应用场景,背后都是AI在努力。
这些应用要想获得更好的效果,就需要更完善、复杂的网络模型,对于算力的需求自然也在快速增长。
比如噪音抑制,算力需求已经是两年前的50倍,背景分割也增长了10倍以上。
更不要说生成式AI模型出现后,对算力的渴求更是飞跃式的,直接就是数量级的提升,无论是Stable Diffusion,还是语言类GTP,模型参数都是非常夸张的。
比如GPT3的参数量达到了1750亿左右,相比GPT2增加了几乎500倍,GPT4估计可达到万亿级别。
这些都对硬件、算法提出了更苛刻的要求。
Intel自然也早就开始关注并投入AI,无论是服务器级的至强,还是消费级的酷睿,都在以各种方式参与AI,XX代智能酷睿处理器”的说法就在很大程度上源于AI。
在此之前,Intel AI方案主要是在CPU、GPU的架构、指令集层面进行加速。
比如从十代酷睿和二代可扩展至强加入的基于深度学习的DL Boost,包括VNNI向量神经网络指令、BF16/INT8加速等等。
比如11代酷睿加入的高斯网络加速器GNA 2.0,相当于NPU的角色,只需消耗很低的资源,就能高效进行神经推理计算。
比如代号Sapphire Rapids的四代可扩展至强上的AMX高级矩阵扩展,使得AI实时推理和训练性能提升了多达10倍,大型语言模型处理速度提升了足有20倍,同时配套的软件和工具开发也更加完善丰富。
在Intel看来,没有单一的硬件架构适用于所有的AI场景,不同硬件各有特点,有的算力强大,有的延迟超低,有的全能,有的专攻。
AI作为基础设施也有各种各样的场景应用和需求,负载、延迟都各不相同,比如实时语音和图像处理不需要太强的算力,但是对延迟很敏感。
这时候,Intel XPU战略就有着相当针对性的特殊优势,其中CPU适合对延迟敏感的轻量级AI处理,GPU适合重负载、高并行的AI应用。
Intel另一个无可比拟的优势就是稳固、庞大的x86生态,无论应用还是开发,都有着广泛的群众基础。
现在,Intel又有了VPU。
将在今年晚些时候发布的Meteor Lake,会首次集成独立的VPU单元,而且是所有型号标配,可以更高效地执行特定AI运算。
Intel VPU单元的技术源头来自Intel 2017年收购的AI初创企业Movidius,其设计的VPU架构是革命性的,只需要1.5W功耗就能实现4TOPS的强大算力,能效比简直逆天,最早用于无人机避障等,如今又走入了处理器之中,与CPU、GPU协同发力。
VPU本质上是专为AI设计的一套新架构,可以高效地执行一些矩阵运算,尤为擅长稀疏化处理,其超低的功耗、超高的能效非常适合一些需要长期打开并执行的场景,比如视频会议的背景虚化、移除,比如流媒体的手势控制。
之所以在已经有了CPU、GPU的情况下,还要做一个VPU,Intel的出发点是如今很多端侧应用是在笔记本上进行,对于电池续航非常敏感,高能效的VPU用在移动端就恰如其分。
另一个因素是CPU、GPU作为通用计算平台,本身就任务繁重,再给它们增加大量AI负载,执行效率就会大打折扣。
具体到应用场景,VPU也是非常广泛的,比如说视频会议,现在的CPU AI已经可以实现自动构图(Auto-Framing)、眼球跟踪、虚拟头像/人像、姿势识别等等。
加入低功耗、高算力的VPU之后,还可以强化背景模糊、动态降噪等处理,让效果更加精准,比如说背景中的物体该模糊的一律模糊、人手/头发等不该模糊的不再模糊。
有了高效的硬件、合适的场景,还需要同样高效的软件,才能释放全部实力、实现最佳效果,这对于拥有上万名软件研发人员的Intel来说,真不是事儿。
Meteor Lake还没有正式发布,Intel已经与众多生态伙伴在VPU方面展开了合作适配,独立软件开发商们也非常积极。
比如Adobe,很多滤镜、自动化处理、智能化抠图等,都可以用VPU来跑。
比如Unreal Engine虚幻引擎的数字人,比如虚拟主播,VPU都能很好地实时捕捉、渲染处理。
Blender、Audacity、OBS、GIMP这个名单可以拉出很长一串,而且还在不断增加。
更重要的是,CPU、GPU、VPU并非各行其是,而是可以联合起来,充分发挥各自的优势,达到最好的AI体验效果。
比如说基于GIMP里就有一个基于Stable Diffusion的插件,可以大大降低普通用户使用生成式AI的门槛,它就能充分调动CPU、GPU、VPU各自的加速能力,把整个模型分散到不同IP之上,彼此配合,获得最好性能。
其中,VPU可以承载VNET模块运行,GPU用来负责编码器模块执行,通过这样的合作,生成一张复杂的图片也只需20秒左右。
在这其中,VPU的功耗是最低的,CPU次之,GPU则是最高的。
Intel已经充分意识到AI对于PC体验增强的重要性,而为了迎接这一挑战,Intel正在硬件、软件两个层面全力推进,对AI在的端侧的发展、普及打下坚实的基础。
硬件层面,CPU、GPU、VPU将组成无处不在的底层平台;软件层面,OpenVINO等各种标准化开发软件将大大推动应用场景的挖掘。
未来,搭载Meteor Lake平台的轻薄笔记本就可以轻松运行Stable Diffusion这种大模型来实现文生图,大大降低AI的应用门槛,无论判定式AI还是生成式AI都能高效执行,最终实现真正的AI无处不在。
(举报)
标签:
精彩推荐
作为世界旅游联盟总部的重要组成部分,经过3年多建设的世界旅游博览馆6月1日在浙江省杭州市萧山区湘湖压湖
中新社洛杉矶6月4日电(记者张朔)《蜘蛛侠:纵横宇宙》(idr-a:Acrothidr-Vr)首映告捷,力拔最新一期北美周末
光明日报记者赵秋丽李志臣水是生命之源、生产之要、生态之基。作为黄河流域唯一的第一批省级水网先导区,近
住房贷款的利率随着更广泛的债券市场而上涨,建立了一位经济学家称之为房地产市场健康状况的关键考验。根据
6月3日,由中国新闻社、青海省玉树藏族自治州人民政府、北京援青指挥部主办,中国新闻网承办,中新公益协办
以下是新易盛在北京时间5月31日10:08分盘口异动快照:5月31日,新易盛盘中快速上涨,5分钟内涨幅超过2%,截
1、从上到下:左边:朴初珑郑恩地金南珠右边:尹普美孙娜恩吴夏荣百度有资料。本文到此分享完毕,希望对大
1 机械泵(又称磁悬浮泵):利用叶轮与泵体内壁之间的间隙,形成一个紧密的封闭空间,在空间中形成局部真空
1、血压是重要的生命体征之一。血压的正常范围,也就是血压的标准,收缩压90-140mmHg,舒张压60-90mmHg。如
玉马遮阳近期接受投资者调研时称,公司认为功能性遮阳新材料市场将迎来快速发展,市场空间巨大,公司近期的
中国报告大厅2023年6月3日广西铁矿石(巴)价格最新走势监测显示:防城港报价机构,今日铁矿石(巴)(品种:粗
工作人员介绍智慧农业云平台。 张俊 摄“我们整个智慧农业示范基地2043亩土地,平时只需要4名工作人员就
反对餐饮浪费需标准先行
日前,2023年世界田联竞走巡回赛西班牙拉科鲁尼亚站比赛落下帷幕。遗憾的是,由奥运冠军切阳什姐和刘虹以及
1、台账就是一个账目表,可以以理解成记录,比如物品清单。2、台帐就是对日常的资料进行加工整理、汇总。3
1、喜滋滋[xzz]2、形容心里很高兴。3、乐滋滋[莱兹兹]4、状态词。形容因为满意而喜悦的样子:他听得心里乐
1、你去杂货店那里买液体,有红色、蓝色、紫色……,买了之后。2、到增幅师那里,选择颜色,只有你买了...
1、简介:北京巨鑫联盈科贸有限公司分公司成立于2010年06月08日,主要经营范围为技术推广服务等。2、法定代
途观L(参数|询价)离合器是DSG七速湿式双离合器,离合器的作用是:保证汽车起步平稳、保证汽车能够顺利换挡
浙江婚恋服务品牌,由浙江都市网的品牌“浙江红娘”演变而来,是一个面向优质单身人群的婚恋服务平台,...
体验:本次题目较难,可以说从T2开始拿全分就不太容易,然而,尽管T3一如既往的繁琐,但这次只需按照题目要
1、已经不写了。2、转型做编剧了。3、听说如此、。本文就为大家分享到这里,希望小伙伴们会喜欢。
央视网消息(记者王甲铸)当城市化进程不断加速,如何保护好传统村落,保护好人们始终记挂的精神家园?陕西
1、选对植物旺家财6大空间植物摆放宜忌:一、客厅有绿叶聚财有生机旺财莫忘观叶植物客厅旺财植物:富贵竹、
今天小编岚岚来为大家解答以上的问题。什么是内盘和外盘是多少手,什么是内盘和外盘相信很多小伙伴还不知道
资讯News
06-06
06-06
06-06
06-06
06-06
06-06
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
06-05
聚焦Policy
当好农民工的“护薪人” 近日,罗某等7名农民工在收到被拖欠的工资后,纷纷打电话向江西省南昌市...
“通讯录里所有人都知道我欠钱了” □ 本报记者 韩丹东 □ 本报见习记者 张守坤 ...
大连宝马车撞人案肇事司机被判死刑 本报讯 记者韩宇 10月29日,辽宁省大连市中级人民法院一审...
医院财务迷上网络赌博输光5000万元公款 □ 本报记者 马维博 □ 本报通讯员 汪宇堂 曹...
辊环车削 雕琢毫厘(工匠绝活) 【绝活看点】 23年来,雷虎始终扎根一线,改进钢材轧制工艺...
交警严查超标电动自行车挪用“白牌” 截至昨晚6时,处罚电动自行车违法行为共计6585笔;下一步将...
明起寒潮来袭 北方气温普降10℃以上 中央气象台预计,本周日北京平原地区最低气温降至-4℃左右...
多种蔬菜价格降幅达五成 包括菠菜、蒿子秆等 预计本月中旬蔬菜恢复供需平衡 本报讯(记者...
北京周日最低气温或达-4℃ 本报讯(记者 赵婷婷)北京青年报记者昨天从中央气象台获悉,新一股...
昌平一家四口确诊新冠肺炎 天通北苑第二社区升级为中风险地区 朝阳两涉疫校区及16所学校停课 ...