2024 vivo 开发者大会:全新 AI 战略、自研大模型矩阵等成果重磅发布
vivo高级副总裁兼首席技术官史玉剑首先上台,重点回顾了vivo过去一段时间所取得的成绩。他提到,过去三年和今年前三季度,vivo一直稳居国产手机销量第一。不久前,vivo还登上了Kantar BrandZ最具价值中国品牌100强榜单。由于在消费电子赛道的稳健表现,vivo还获得了凯度BrandZ创新明星品牌奖。
vivo高级副总裁兼首席技术官史玉剑现场演讲
去年,vivo推出了自己的科技品牌——“蓝科技”。蓝色科技植根于应用创新到底层技术创新,从硬件驱动到形成软硬件整合能力。这是vivo根据用户需求构建的技术研发体系。包括“蓝图影像”、“蓝海生命系统”、“蓝晶芯片技术栈”以及全新升级的“蓝心模型”和“蓝河操作系统”。
vivo高级副总裁兼首席技术官史玉剑现场演讲
史玉剑表示,AI时代已经到来,vivo将始终保持开放的心态。无论是在手机硬件、AI大机型、操作系统,还是在互联网、IoT领域,vivo都将坚持以用户为中心的技术创新,不断探索技术创新。边界与用户、开发者共同分享合作发展成果,构建互信共赢的生态系统,共创科技美好未来。
vivo发布AI新战略——蓝心智能
在去年的开发者大会上,vivo发布了自主研发的蓝心大模型矩阵,由十亿、百亿、千亿三个参数级别的五个大语言模型组成。业内率先贯穿1B、7B、13B终端侧大型号。同时,在蓝心大模型的基础上推出了蓝心小V和蓝心千寻APP。去年11月,蓝芯大模型在SuperCLUE、CMMLU、C-EVAL等多个大模型排行榜上综合能力排名第一。 vivo对蓝心模型的定位是,通过丰富中国数据和知识的供给,让蓝心模型成为最懂中国人的模型。截至目前,vivo的AI能力已覆盖全球60多个国家和地区,服务超过5亿手机用户,大模型代币产量已超过3万亿。
在本次大会上,vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长正式发布了vivo人工智能新战略——蓝心智能。
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长现场致辞
蓝心智能是大模型技术与移动操作系统深度融合的个人智能。 Surround解释说,以蓝心大模型为技术基础,蓝心智能可以了解用户的个人情况和喜好,为用户提供个性化的专属服务;同时,蓝心智能将全方位保护用户的隐私和安全;通过系统的深度集成,不断为用户构建更自然、直观的交互,带来更智能、更温暖的体验。
为了实现这一点,vivo利用AI从三个方面重构了系统体验。首先是重构人与设备的交互体验,让交互更加自然、直观。在蓝心模型的加持下,手机将拥有更强大的分析能力。无论是按压屏幕的力度、搜索文字或图片、还是拖动一条地址信息,多模态模型都能深度解读你的意图。 ,然后为您提供您需要的反馈和服务。依托大文本模型,结合自监督学习语音编解码、多语音任务学习、模态对齐等技术,蓝心小V除了文本能力之外,还具备更强大的语音表示理解和生成能力,使得手机可以与人进行自然对话、翻译语言、模拟人声甚至理解对话中的情绪。
第二个方面是重构人与数字世界之间的服务体验,让智能更加个性化,即构建简单高效的服务获取能力和主动服务能力,让手机成为智能、温暖的个人助理。 vivo在蓝心机型的基础上对手机的基础功能进行了全面升级。同时,vivo为第三方开发者搭建了连接服务的框架和平台。当人们寻找服务时,服务也主动匹配人们的需求。此外,vivo还构建了个人智能系统框架,通过本地化知识图谱和基于终端侧大模型能力,建立人与设备之间的共同记忆。
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长现场致辞
会上,vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长展示了vivo基于蓝心大模型技术做出的新探索,即“PhoneGPT”,这是一款手机智能手机身体。在演示中,蓝心小V不仅可以识别并操作屏幕界面,还可以通过接管音频进行独立对话,完成用户布置的任务,比如帮我们订餐厅、点咖啡等。手机自动化的一小步,却是解放用户双手的一大步。随着AI的发展,PhoneGPT未来必将带来更多的应用场景和更好的智能体验,让小V成为更懂你的个人助理。
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长现场致辞
第三个方面是重构人与物理世界的连接体验,让沟通更顺畅、更温暖。去年,vivo发布乐谱阅读功能,让热爱音乐的视障人士可以用手机学习乐谱和乐器。现在,vivo利用多模态大尺寸模型,让手机成为视障人士的眼睛,帮助他们独自走得更远、更安全地到达陌生的地方。 vivo希望利用AI技术弥合沟通鸿沟,帮助残障人士追寻梦想、探索世界之美。
全新蓝心大模型矩阵正式发布
为了进一步夯实AI能力基础,vivo在今年的开发者大会上发布了全新自主研发的蓝心大模型矩阵。全面升级语言模型和客户端大模型能力,带来vivo自主研发的语音模型、图像模型和多模态模型。这标志着蓝心智能向个性化、多元化发展迈出了重要一步。
在大语言模型方面,千亿级蓝心云模型重点优化意图理解和分发以及任务规划能力。与去年相比,其整体能力提升了30%,在SuperCLUE和C-EVAL榜单上继续领跑国内第一梯队。
用户隐私和安全一直是vivo打造蓝心智能的首要原则。继去年带来三款大型端对端机型后,vivo 正式发布了全新 30 亿参数级蓝心端对端大机型 3B。在会话写作、摘要、信息提取等能力方面,蓝心3B可以超越并与业界7B-9B模型相媲美。与蓝心7B相比,蓝心3B终极性能提升300%,平衡模式下功耗优化46%,终极字输出速度可达80字/秒,系统功耗仅450mA,内存使用量仅为1.4GB。在SuperCLUE和Equal Eval对小模型的综合能力评估中,Blue Heart 3B排名第一。同时获得Thiel Labs的终端侧大机型综合能力认证和AIIA安全防范能力认证。
此外,vivo还同步带来了全新自主研发的可准确理解自然语义、模拟人声的蓝心语音模型、加强中国特色与东方美学融合、视觉观感升级的蓝心图像模型。蓝心多模态大型理解模型。
未来,蓝心智能将以蓝心大模型矩阵为技术基础,持续探索AI与OS的深度融合,持续打造开放共赢的智能生态。
OriginOS 5正式登场:自然流畅超AI
操作系统作为用户与手机的主要界面,直接决定用户体验。此次,vivo延续了“自然、舒适、直观”的设计理念,重点展示了其在AI、续航、通讯等领域的技术成果,以及对基础体验、设计、人文等方面的思考。手机其他方面,推出新一代操作系统。 ——OriginOS 5。
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长现场致辞
在初代System 5中,作为AI重构系统体验的基础,蓝心小V与Jovi语音正式合并,带来更自然的语音交互体验。增加了一系列新的交互方式,比如长按屏幕底部呼出“小V搜索”。基于蓝心多模态大模型技术,vivo全新推出小V圈搜索功能。在现有文字搜索的基础上,通过图像识别与圈选交互相结合,可以精准搜索对象,为用户带来更便捷的“一圈搜索”。
Vivo OS产品总监黄子勋现场演讲
原系统5还全新升级了“原子岛”功能。除了通知功能外,它还拥有蓝心小V强大的意图识别能力,不断分析判断用户当前的需求,主动为用户提供后续服务。并以更灵活的设计,一键复制,或一键拖动,满足用户的多任务处理需求。
此外,原系统5还升级了以桌面组件的形式为您提供全天智能服务的“小V建议”、支持同声传译的“小V帮手”、内置“小V写作”功能。 Vivo输入法”、支持一键编辑和AI定制词曲的“小V时光剪影”。全新推出“小V记忆”功能,可以记住与用户互动的每一个瞬间。同时, “小V跨终端生态”还首次允许用户在电脑、车载终端上直接与小V互动,vivo通过蓝心智能在手机等数十个模块为用户带来触手可及的智能体验。原系统5的通话和相册。
vivo AI系统中心高级总监熊贯京现场演讲
流畅度方面,原版System 5构建了包括光影、交互、形态切换、场景切换在内的全面流畅体验,并进行了1000多项流畅体验优化,旨在提供“自然、舒适、直观”的使用体验贯穿系统的每一个场景。
在系统底层,原有System 5的不公平调度机制在3.0版本中再次得到重大升级,首次引入GPU不公平调度机制,通过GPU资源智能分配。在内存层面,原System 5创新性地引入了Android领域首创的Ledger内存账本机制,实现了系统级内存资源的精准调度和内存资源的统一分配和管理,有效减轻了应用程序的负担。同时,它还可以智能构建内存账本,根据实际应用场景动态优化内存分配,确保手机中的每一块内存都能得到高效利用。显示层面,原System 5的虚拟显卡升级至2.0版本,性能更加强大。作为vivo独家首创的显示增强技术,它集成了超快响应动态架构、合成渲染加速器、图形链接协作引擎三大核心技术。全面优化从触控到反馈界面的全链路体验。
最初的System 5专注于解决用户痛点,不断优化用户体验。在网络通信方面,原System 5实现了新的技术突破和用户场景驱动的全面体验升级。基于蓝牙,实现了业界首个公里级无线通信技术,支持在无网络的开放环境下进行最远1.5公里的点对点语音对讲和文字聊天。针对Wi-Fi穿墙的家庭场景、网络拥堵的千人演唱会场景、电梯、高铁、地铁等信号弱的通勤场景,原系统5还进行了深度的网络性能优化确保全场景流畅的网络体验。 。续航方面,原System 5推出全新升级的蓝海续航系统,包括引入新场景能效引擎、带来异构计算空间2.0等技术,实现高效精准的电源管理和无忧体验。全天的电池寿命。
Vivo OS产品总监吴白起现场演讲
除了“理性工程”之外,原系统5还诠释了感性美学。设计在原子设计体系的基础上进行了二维升级。首先引入了空间感知的概念,借助丰富的光影和材质表现、分类卡片列表等,让界面内容一目了然,并引入全景天气,还原人们每天体验自然的方式,带来现实与虚拟世界自然融合的美妙体验。另一个维度,原版System 5诠释优雅美学,升级个性锁屏、情景壁纸等功能。屏幕关闭和打开自然舒适,让数字世界变得更加温暖。
Vivo OS艺术及创意总监艾敏现场演讲
一年来,通过实施用户顾问计划,每月组织团队认真听取用户建议,并邀请用户顾问参与创新的每一个环节。无论是体验的反馈,还是对美学的不懈追求,都给系统团队提供了丰富的灵感。这也使得今天原系统5的升级之旅成为可能。
蓝河内核加持,蓝河操作系统2:全栈自研,为AI而生
继去年11月vivo首次发布自主研发的蓝河操作系统(BlueOS)后,在今年的开发者大会上,全新升级的蓝河操作系统2也同步亮相。搭载Rust语言编写的实时操作系统内核——Blue River内核,安全、通用、高性能,兼容不同嵌入式平台,具有完善的系统调度、内存管理、文件管理等功能。系统、网络和设备管理功能。 Blue River Operating System 2也将成为业界第一个用Rust语言编写的全栈操作系统。
Blue River操作系统2构建了更智能的系统架构。首先,底层是vivo自主研发的蓝心大模型和VCAP推理计算加速平台组成的基础。蓝河从设计之初就集成了蓝心大模型矩阵,支持不同参数的蓝心大模型端云灵活部署,支持视觉、语音等多种AI算法。此外,VCAP保证了各种AI算法在设备侧的高效运行。在此基础上,我们带来了新的服务引擎,包括数据服务、意图感知和决策服务等,为意图框架提供能力支撑。意图框架可以根据用户的行为和使用习惯,充分感知用户的使用场景,准确理解用户的意图,最终自动规划和执行任务。通过这样的系统架构,蓝河操作系统2自下而上构建AI能力,进一步实现先天智能。
蓝河操作系统2深度融合了蓝心智能强大的AI能力,以蓝心大模型为技术基础,蓝心小V为专属助手,智能代理平台提供专业服务。生态方面,Blue River兼容Open Atom开源基金会孵化的hapjs快速应用标准。随着快应用升级至2.0,也将为用户带来更加智慧的服务生态。同时,vivo为开发者带来了全新的Blue River UI框架。基于自适应UI布局,只需一次开发即可在不同尺寸的屏幕上带来一致的体验。
AGI时代,除了更加智能的操作系统之外,智能硬件也迎来了新一轮的变革。蓝河操作系统2适用于不同尺寸的设备,还可以为不同设备提供强大的AI能力。 vivo愿与业界开放合作,共同探索蓝河操作系统2、蓝心大机型,以及智能眼镜、机器人乃至更多AI设备上的解决方案,共同打造真正面向未来的智能终端。
以用户为中心,实现开放智能连接
近年来,vivo持续聚焦智能出行、智能家居、智能办公、运动健康、视听娱乐等5大生活场景。致力于打破不同品牌之间的壁垒,以用户为中心,实现真正的开放智能连接。对此,vivo一方面实现了生态开放,积极打造自身能力,同时赋能外部生态设备。同时,率先创建联盟,广泛兼容行业标准,让用户突破生态壁垒,自由连接自己喜爱的智能设备。另一方面,vivo希望让连接变得更加智能。 vivo将强大的AI能力转移到跨设备的生态设备上,让用户通过自然语言与设备进行高效沟通。
现阶段,vivo智能汽车已经实现了行业领先的覆盖,连接了170多个汽车品牌,覆盖了8500多个车型。 vivo以开放共赢的态度积极推动行业技术发展。为了升级智能汽车和数字汽车关键技术,vivo率先发起ICCOA联盟,推出的协议覆盖了市面上350W以上的汽车。
在智能家居设备互联场景下,vivo深度参与物生态建设,联盟内适配可连接品类SKU已超过1200个。同时,vivo还支持CCSA等权威协会,帮助制定了20多项物联网行业标准。
此外,vivo通过“小V跨终端”在汽车和电脑中实现了AIGC能力,还将推出“家庭智能”和“车辆智能”,让用户通过自然语言控制智能设备,让连接更加便捷。值得一提的是,vivo也成为首家兼容苹果生态的国内厂商。为了给用户带来更流畅的跨设备体验,我们通过深度适配苹果M系列芯片,实现了与苹果电脑的跨端协作。用户可以通过vivo办公套件对苹果电脑进行全端搜索和远程控制。
坚持长远主义,保护用户安全和隐私
新兴技术的发展带来了生活和生产效率的巨大飞跃,但在发展技术时必须考虑安全、人文和产业的协调发展,才能使技术更好地落地应用,造福人类。
会上,vivo首席安全官卢景辉分享了vivo AI在安全领域的最新进展。他表示,在保护隐私权方面,vivo倡导并实行“透明”的隐私政策,将权利交给用户。在提供AI服务时,vivo采取“端侧优先、端云协同”的技术策略,设备端能够处理的数据永远不会上传到云端。面对复杂的AI任务处理,在保证用户隐私和数据安全的前提下,调用云端大模型能力,实现高效安全的端云协同,保证AI服务的智能和安全。面对敏感的隐私信息,vivo在收集和分析数据之前,采用匿名化处理和差分隐私技术,去除或模糊个人身份信息,在保证隐私的同时提供个性化服务。卢景辉强调,用户隐私和安全始终是打造个性化智能的第一原则,vivo将持续寻找个性化服务与隐私保护之间的最佳平衡点。让蓝心智能的“私人定制”便捷、贴心、安全、可靠。
此外,vivo通过蓝心智能以“千镜可信引擎”赋能设备端AI能力,构建全链路欺诈防护。同时,手机丢失保护系统进行了升级,并推出了新的“查找网络”功能。除了离线搜索外,它利用数亿vivo设备和先进的网络定位技术,在Android阵营中率先实现关机定位,提高手机恢复概率。如果无法找回,可以在物理层面远程安全删除数据,并且还有芯片级闪存激活锁,防止被盗。三重防线在各个层面保护您的设备和数据安全。
AI没问题,用科技照亮美好未来
科技成果可以惠及所有人,包括我国近3000万听力障碍者、1730万视力障碍者和2亿多老年人。 vivo持续利用AI技术赋能无障碍的应用体验。去年,vivo推出了首款集手语识别与合成于一体的软件“手语翻译器”,并在CCL2024手语数字人工翻译质量评测中获得第一名。今年,为了助力国家通用手语的普及和推广,我们升级了“手语翻译员”中的“手语学习”功能,希望帮助更多人学习手语。
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长现场致辞
同时,在大蓝心语音模型的基础上,“vivo听听”新增了方言自由发言功能。目前支持6种方言,解决地区间沟通障碍的问题,也让用户可以用自己最熟悉的方言与手机进行交流。相互作用。为了让更多人的地方口音能够被大语音模型识别,我们会将越来越多的语言适配到手机的各种功能中,让手机上的语言交互更加自然,更加符合人们的直觉。 ,人与人之间的沟通更加顺畅、更加温暖。
除了“vivo听”之外,“vivo视”还支持大语音模型,新增实时问答功能,成为业界首款多模态大模型视觉辅助产品。基于多年的技术积累和行业实践,vivo为国家无障碍环境展厅制作了业界首款视障用户导航软件,并于8月28日正式开放。通过vivo手机产品为展厅提供帮助以及“vivo see”的视觉辅助功能。
同时,“vivo无障碍解决方案”入选联合国ITU“人工智能好案例集”和世界互联网大会“公益行动计划”,并荣获“优秀案例”等10余项权威奖项和荣誉。无障碍信息无障碍案例”。 vivo成为中国残联战略合作伙伴,为10所高校1000多名残疾学生捐赠无障碍设备,并招募100名梦想导师,帮助残疾青年就业,帮助他们勇敢追梦。
携手全球开发者、合作伙伴,共绘开放未来
vivo副总裁、操作系统产品副总裁、vivo AI全球研究院院长周伟表示,花不成春,独树不成林。 vivo始终秉持“协同发展、互信共赢”的合作理念,不断深化和融合底层核心技术,涵盖提升应用体验的测量系统能力、创新的AI和蓝河操作系统技术、开放、智能的物联网技术等
人工智能作为新一轮科技革命的核心力量,为行业提高运营效率、优化用户体验、增强市场竞争力创造了新机遇。 vivo希望聚集全球合作伙伴和开发者继续开展深度合作,加速产品服务创新和产业生态系统建设,共同开启AI时代的无限可能。
发表评论
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。