广告
加载中

淘宝天猫CTO若海:天猫正构建下一代沉浸式消费新体验

亿邦动力 2022/10/25 22:41

【亿邦原创】10月25日消息,在2022年天猫双11全球狂欢季发布会上,阿里巴巴国内数字商业板块淘宝天猫CTO若海表示,内容正在成为天猫重要的增长方式。他指出,经过多年的沉淀,天猫对于内容和商品有了体系化的完整理解,借助该技术体系,在未来帮助越来越多的商家做好内容。

“除了内容化以外我们也在不断拓展数据化运营的场景和能力。让数据更好的融入到经营动作中,把数字技术的价值更大的发挥出来。”若海表示,天猫新品创新中心TMIC结合大数据模型,大幅降低了新品孵化周期,从平均常规的18个月,减少到平均6个月。同时,TMIC的科学前沿的技术分析能力,让新品研发的成功率提升到60%,是传统方式成功率的12倍。

面对如今消费者多样化的需求,若海表示,为此,天猫构建了包含区块级开放能力、多场域投放能力、富交互内容承载能力等三大核心能力的小部件技术方案。在消费者体验方面,除了多地址下单、购物车扩充、直播间画质和物流服务提升外,天猫也在积极构建下一代沉浸式消费新体验。

若海指出,构建沉浸式消费体验,还需依赖硬件设备、交互方式、内容载体、应用场景等技术的突破。从硬件设备上来说,XR设备将逐步成熟并且普及,成为未来三维世界的重要入口。从交互方式来说,会从当前触摸式交互逐步进入手势、语音、眼球凝视等更加自然的三维交互方式。从内容载体上来讲,会从图文、视频变成3D模型,而3D模型相比图文视频也有更好的表现力和可交互性。从应用场景上来说,进入沉浸式互联网时代,娱乐、社交、电商等整个线上应用场景都将被重塑。

以下为演讲实录:

各位品牌和媒体的朋友们大家下午好,我是若海。

很高兴通过直播的方式和大家相见。2022年双十一即将正式开启,今天是10月24号,也是程序员节,因为1024是2的10次方,10象征着圆满,祝大家在今年的双十一收获满满。在这个特别的日子,很荣幸有这个机会跟大家分享我们在技术上的一些思考。

技术和商业是密不可分的,今年是第14个双十一,在过去的13年里,双11的峰值挑战催生了高并发分布式的架构体系,促进了云计算技术的发展。在移动时代,海量用户、差异化的需求,推动了个性化推荐技术的快速发展,支持了千人千面产品的规模化应用。在内容化时代,直播和短视频广泛使用,加速了音视频技术的创新和发展。

面向未来,我们也一直在思考,如何通过技术去帮助商家更好地经营,给消费者带来更好的体验,去探索更多的可能性。

正如吹雪所说的,在直面消费者DTC的模式下,消费者的需求也越来越多样化,商家如何服务好消费者,面临更多的挑战。除了运营日常的商品和店铺外,运营内容的重要性也越来越高。数据在经营中的作用越来越大,从看清楚数据,到更好地将数据融入到各个的经营动作中,我们相信还有很多可能的空间,而这些技术上的发展,将切实地帮助我们的商家更好地经营。

当下,直播、短视频已经成为商品信息的内容表达方式。消费者习惯了通过内容的形式种草某件商品,去贴近自己向往的美好生活。

同时,不同维度的数据洞察和分析下,我们也发现内容正在成为我们重要的增长方式。

天猫通过多年的积累,构建了以商品图谱为核心的完备的商品体系,结合对于人群的理解,极大的提升了人和商品之间的链接和效率,带来了生意的增长。对内容也是一样,只有通过内容的深度理解,才能做好人和内容的匹配。结合我们对商品的理解,我们的特色是构建内容、商品和人的更完整的认知图谱。

在此基础上,我们将其应用到内容的完整链路上,包括包括创作、审核、分发等环节。

拿内容创作为例,商家首先面临的问题是我应该创作什么内容,我们结合认知图谱,通过趋势的方式帮助商家去生产内容。比如通过话题的方式告诉商家,健身水杯怎么选?公园露营应该要有哪些装备?等等。相应地我们还会在拍摄工具中提供内容主题模版,指导商家低门槛进行内容创作。总的来说话题推荐功能,可以帮助商家生产适合自己商品的内容,同时做到更受消费者的喜爱。话题推荐功能在千牛上线2个月来,数万计的商家累计发布了几百万条的内容。未来,商家都可以体验到这个服务。

其次,实时直播间生成看点,可以更好地让直播间和其他场的互通。在商家直播的过程中,技术依托语音、视频等多模态内容理解的能力,包括我们对于商品的深度理解,实时的生成包含单个商品精彩介绍的短视频。目前该直播看点方案的准确率高达95%以上,大大提升了商家的短视频内容创作效率,也极大的降低了短视频制作的成本。并且通过直播看点智能化生成的短视频,可以在淘宝的不同场域进行分发,进而打通短视频和直播流量的互通。该功能目前每天能为商家带来近千万级的增量流量和近亿的成交。

最后,在内容的分发阶段,基于智能知识图谱在用户搜索时能够准确识别用户背后的意图,除了透出相关商品,也可以透出相关的视频内容。举个简单的例子,当用户搜索”海边”这个词,除了会搜索出海边度假相应的商品,例如沙滩裙、墨镜等等,也会透出包含泳衣、防晒等相关视频的内容。进而打通了内容分发的更多可能性。

经过多年的沉淀,我们对于内容和商品有了体系化的完整理解,借助该技术体系,我们相信能够在未来帮助越来越多的商家做好内容。

除了内容化以外我们也在不断拓展数据化运营的场景和能力。让数据更好的融入到经营动作中,把数字技术的价值更大的发挥出来。

关于品牌数据银行,相信大家都不陌生。过去,商家在使用圈选和报告分析等功能的时候,通常不能实时看到分析的结果,因此今年我们全新构建了品牌数据银行的共享存储架构,将商家原本需要十分钟完成的分析,提升到在短短几秒内就能实现,同时品牌数据银行具备了千亿级规模的透视分析能力。我们服务了2万家头部的品牌商家,让商家伙伴可以更高效的进行消费者的精益化运营。

选品、上新、成交难是中小商家的痛点。因此,我们结合消费趋势洞察和行业经验,通过大数据诊断的方式,给到商家更具体的经营建议和操作指引,帮助商家做出策略优化。例如,结合消费者在特定品类的核心决策因素,对商品的属性填报、图片设计、店铺装修等做出差异化的指导,进而提升消费者对于商品消费的决策的效率。

在给出智能诊断建议的基础之上,系统会匹配合适的经营工具,更进一步的帮助商家更加快速、简单的使用工具,进而做出决策的优化。目前每个月,有百万的商家采纳了智能诊断的建议,其中,80%是平台的中小商家。

通过智能诊断和引导的帮助,商家也更容易获得成长和层级的跃升。我相信,未来智能诊断的能力不仅仅局限于商品运营、活动报名、营销推广等范围,或在内容运营、人群运营等维度有更多的可能性。

围绕淘宝直播的运营,平台不断通过丰富电商直播平台能力,提升商家和主播在货品、营销、粉丝等方面的运营效率和体验。在商家最关心的拉新、促活、留存、转化等用户运营能力上,技术通过公域特定人群的圈选,结合用户在线情况,通过特定的秒杀、红包等利益点,提升用户的转化,并实时结合数据反馈,帮助商家进行调整。

同时,货品成交是商家最实际面临的问题:我有什么货品?粉丝的需求是什么?我们会提供一系列的选品和测品的数据化工具,辅助主播货品的运营面向特定的人群,助力成交做爆款。

最后,在流量的运营方面,我们也围绕千展停留和千展成交两个核心的维度提供秒级的实时反馈,在直播不同的时段,帮助不同成长阶段的主播和商家,实时进行内容脚本调整和商业化的策略调整。进而帮助商家和主播,能够在经营过程中实现更快的成长。

新品的孵化是品牌保持长青、保持增长的重要策略。过去天猫新品创新中心TMIC结合大数据模型,可以快速的帮助品牌挖掘消费者当下的偏好,进而大幅降低了新品孵化周期,从平均常规的18个月,减少到平均6个月。

今年,我们联动了更多的产业生态伙伴,例如咨询机构、分析机构、原料机构等等,共同建立了产业知识库和产业图谱。

例如在今年8月,TMIC联合了多个香氛的原料机构,知名的香水品牌、咨询机构,共同联合推出了《嗅觉文化图谱》,共建了香氛行业的知识体系, 沉淀了712种的香味、25种香调知识。有了这样符合行业生态标准的知识体系,再结合消费者的调研工具,可以更精准地帮助品牌深度挖掘消费者情感表达。

这里,跟大家分享一个数据,通过TMIC的科学前沿的技术分析能力,我们让新品研发的成功率提升到60%,是传统方式成功率的12倍。

面对消费者多样化的需求,我们一直在探索更开放、更高效的开放技术,给商家以更大的自由度和创新的可能性,我们坚信通过开放能力,帮助商家给用户提供差异化的品质服务,这一条路会带来更多的价值。

为此,我们构建了包含区块级开放能力、多场域投放能力、富交互内容承载能力等三大核心能力的小部件技术方案。

正如屏幕上左侧所示,首先,通过区块级别的能力,让平台具备了更细粒度的开放,从页面级到卡片级,商家可以在店铺、详情等核心页面根据需要定制灵活的卡片形态。

其次,通过多场域的投放能力,可以实现一次开发多场域的分发,在极大降低开发成本的同时,能够去触达更多的用户。

目前已具备在淘宝直播间、商品详情、首页订阅、店铺首页、店铺会员等公私域透出的能力。

最后,依托底层3D引擎、MNN-AI引擎、AR引擎和多媒体等技术,通过富交互内容承载能力的提升,让商家具备了定制小游戏、AR应用,3D等强交互产品形态的能力,可以做出更多酷炫的应用。

在屏幕右侧,是商家的一些具体的应用案例,可以看到商家借助该技术方案已经搭建了很多有趣好玩且高质量的产品体验。比如商家可以在店铺会员开放小游戏应用,提升用户对店铺的粘性;商家也可以做到在详情页不用跳转页面就可以开启摄像头进行AR试妆等应用,小部件的优势极大的提升了用户的效率。针对服饰行业,商家也可以在店铺首页开发服饰搭配应用,快速满足用户个性化搭配的需求。

当然,对于开放生态的探索远不止这些,我们将持续通过开放生态的技术体系建设,让商家在平台全域个性化经营,并提供更多的空间让商家发挥创意,创造可能。

随着时间的推移,消费者对体验的追求也越来越高。在帮助商家更好经营的同时,我们也在不断的思考如何跟商家一起去更好的服务消费者,给消费者提供更好的购物体验。

在今年的618,淘宝上线了多地址下单功能。这个微小的创新,让我们听到了来自消费者最真实的声音,许多的用户向我们表达他们的惊喜和满足。这些用户真实而热烈的反馈,让我们更加坚定了在消费者基础链路上的投入。

过去,关于购物车,最大的痛点是容量不够,今年双11我们通过阿里云内存数据库Tair SQL,重新升级了购物车的基础架构。目前,所有淘宝用户的购物车都已经扩容到300个。并且即使在双11的高峰期间,我们仍然保持购物车极致流畅的体验。正如吹雪刚刚也提到,这次购物车在增加了容量之后,我们进一步添加了分组的能力,帮助用户更好去管理自己的商品。比如用户可以按照自己的习惯和需求对购物车宝贝进行分组、排序,还可以一键筛选双11的跨店满减活动,实现更方便的凑单。除此之外,也为购物车带来了更多的想象空间,让消费者可以更好的买买买,大家可以去一起探索。

直播间的画质也是我们技术小二一直关注的重点,为了让消费者在淘宝直播间看到更清晰的商品细节,我们在主播开播源,视频传输和视频画质等方面做了非常多的工作。

首先,我们联合了直播硬件厂商共同发布了《电商直播高画质开播指南》,这个指南在场景设置、灯光设置、妆容美颜、软硬件配置等方面用标准化的方式,帮助商家主播快速且低成本地搭建一个好的直播环境。

其次,在编码传输方面,我们有视频编码压缩技术S265和更优的网络传输协议XQuick,让我们的直播更少的卡顿,减少延时,播放更流畅。

最后,在视频画质方面,在今年双11我们计划将1080P高清画质覆盖商家直播间。同时,通过自研的视频增强技术,利用深度学习算法弥补画面质量。借助自研的AI引擎能够充分发挥手机NPU的算力,可以让用手机直播的主播就也能获得画质的提升,进一步提升高画质的覆盖率。

因疫情的影响,导致消费者下单的东西长时间收不到包裹,这大大影响了消费者在平台上的购物体验,因此在技术层面,我们将疫情和地区信息、商家的发货地信息,快递的物流信息和我们平台的订单信息整体数据打通,同时在商家揽收情况发生变化时,结合算法,预测受疫情影响的地区和商家,在商品详情页给消费者最实时的预计物流情况的表达,同时对商家进行免责,较好的提升了疫情影响下消费者体验和商家体验。

除此之外,今年双11,我们将联动菜鸟驿站、申通,通过覆盖全链路履约的电商域信息和物流信息体系打通与建设,同时,叠加末端送货上门的基础能力,去满足淘宝上消费者送货到家的诉求,全面提升物流末端履约体验。

每一代技术的重大升级都大大的提升了用户体验,同时也带来了更多的商业机会。我们一直在思考下一代的消费体验是什么?我们期待通过前沿技术布局和突破,和商家一起构建新的沉浸式消费体验。

构建下一代沉浸式消费新体验,我们依赖硬件设备、交互方式、内容载体、应用场景等技术的突破。

从硬件设备上来说,除手机以外,XR设备将逐步成熟并且普及,成为未来三维世界的重要入口。VR头盔给用户带来沉浸式的体验,AR的眼镜给用户带来虚拟世界和现实世界的无缝链接。

从交互方式来说,会从当前触摸式交互逐步进入手势、语音、眼球凝视等更加自然的三维交互方式。

从内容载体上来讲,会从图文、视频变成3D模型,而3D模型相比图文视频也有更好的表现力和可交互性。

从应用场景上来说,进入沉浸式互联网时代,娱乐、社交、电商等整个线上应用场景都将被重塑。在娱乐场景,用户可以身临其境的在线上虚拟空间中和朋友一起看电影,一起蹦迪,一起看演唱会。在电商消费场景,我们判断将从商品展示电商进入体验电商,给用户带来超越时空的沉浸式的购物体验。

未来,每个用户都会有属于自己的3D数字分身,例如身高等特征,同时商品的3D化可以准确表达商品的外观颜色、形状结构、物理材质等信息,有了数字分身和商品的3D模型,我们有机会构建新的消费体验。以服装为例:有了3D衣服模型,从展示角度来说,除了看外观颜色,还可以仿真不同的材质属性,比如是棉、还是麻、或者是涤纶,这对应的质感和弹性都会有不同的表达。

结合用户数字化身,不仅可以看到3D衣服穿在用户身上是不是漂亮,更重要是可以完全模拟真实的贴合程度,帮助用户做精准决策,极大的解决服饰尺码等问题。用户在手机侧就能基于3D衣服自定义编辑纹理贴图,构建自己个性化的衣服外观,同时做到所改即所见,所见即所得。

为了实现我们畅想的未来,目前还面临诸多的技术挑战。比如:

从商品的三维建模角度来讲,3D模型是一个基础,目前商品建模费用还非常高,单个商品的建模成本从几百到几千元不等。广大的商家想要规模化的建模真实商品,亟需一套低成本的商品三维建模解决方案。

面向电商消费场景,我们期望提供虚实融合技术,让商家的模特和商品能够自然的融入到丰富多彩的3D场景中,给商家开放无限的想象空间,从而构建符合自己品牌的3D内容。

借助3D建模和虚实融合技术,我们可以构建包含人+货+场的3D消费场景。那么接下来就需要做到让无3D专业背景的商家能够自由的编辑3D内容,像2D时代那样便捷的做3D的店铺装修、3D的商品上新等功能。为此,商家需要一套更低门槛的3D内容编辑工具。

面向消费场景,我们将构建包含上述三项技术为代表的XR核心技术,并且逐步对商家开放,和商家一起构建新一代沉浸式的消费体验。

现在看一下,我们正在构建行业领先的软硬一体商品三维重建的方案,这个方案我们将其抽象为三个步骤:

首先把商品放入拍摄设备进行拍摄,生成一系列的照片;

然后把照片上传云端作为三维重建算法的输入;

最后三维重建算法经过训练计算得到3D的模型。

该方案是行业里首个将学术界神经渲染NeRF算法在工业界做到规模化应用落地的Case。

基于RGBD的自动化拍摄设备和神经渲染建模算法,整个方案仅在拍摄阶段需要少量的人工参与,建模完成后无需修模,因此可以实现低成本的建模,相比原有建模能力平均有70%的成本下降。

基于神经渲染的三维重建算法,让3D模型具备了还原高清照片的能力。当前该技术方案已经覆盖鞋、包等十余品类,面向未来,我们希望通过多种差异化的拍摄设备和算法的能力整体解决所有商品品类的建模问题。

前面商品三维重建方案很好的解决了商品模型的问题,很多时候我们还需要把真实的人放到虚拟3D空间中去,可以应用到类似于3D直播,个人演唱会等场景中。因此,面向消费场景,我们期望构建低成本、高保真、部署简单的虚实融合技术。基于该技术方案可以做到把真实的用户身临其境地带入到3D虚拟世界中,且用户可以在这个3D虚拟空间中自由的走动和交互。

屏幕上所展示的是今年新势力周构建的一个火星T台走秀效果。背景是火星的3D虚拟场景,前景是真人的模特,前景和背景光影无缝的融合。真人模特穿梭在火星虚拟背景之中,全方位、动态地展示品牌的服饰。当前用户可以在手机端浏览3D内容合成的视频信息,未来,借助VR设备,用户可以身临其境的观看秀展。

最后,有了3D的消费场景,里面的3D模型等内容素材需要频繁的更新迭代,因此,我们也考虑为广大商家提供了低门槛的3D内容编辑和运营工具。

特别是期望拥有自己3D品牌馆的商家,我们的编辑工具通过模板方式可以快速支持商家从0到1搭建3D店铺、装修店铺、批量上新新品等各种能力,帮助商家快速创建第一个3D消费场。

如屏幕所示,在这样一个淘宝人生风格的虚拟3D店铺中,商家可以方便的完成商品上新、店铺装修等功能。比如选择合适的3D商品在货架上进行展示,也可以根据不同的消费季节一键替换店铺风格。而我们的用户侧可以通过自己的虚拟数字化身,身临其境地逛3D店铺,自由试穿试戴,一键下单购买。

技术创新一直是数字商业快速发展的基石。我们通过持续的技术创新和突破,让商家更好的经营,让用户享受好玩、好逛、好买的线上体验。希望在未来,商家伙伴跟天猫一起,共同成为行业的探索者,引路者和创造者。

再次感谢在座的品牌商家和媒体朋友们,让我们并肩走向未来的数字世界,通过技术创新拓展商业想象力,谢谢大家!

文章来源:亿邦动力

广告
微信
朋友圈

这么好看,分享一下?

朋友圈 分享

APP内打开

+1
+1
微信好友 朋友圈 新浪微博 QQ空间
关闭
收藏成功
发送
/140 0