正在AI和机械人里找节目:马年春晚背后的科技大
|
字节跳动旗下火山引擎正在本年春晚的存正在感不止一处:一边是火到海外的Seedance 2。0豆包视频生成模子被放入节目制做流程,另一边是豆包语音相关模子被用于提拔机械人表达能力,并支持曲播端的及时字幕。
另一项容易被忽略的手艺,是面向挪动端的全超高清制播系统。竖屏超高清春晚初次使用总台最新的NVI全超高清制播手艺,8K制做全面采用全国产化设备,为“央视频”客户端竖屏曲播供给手艺支持。
这套花草视觉素材依托火山引擎供给的多模态大模子,对十二种月令花草进行三维数字孪生建模,并通过大量分歧光照、天气前提下的花草图像锻炼,复刻花瓣纹理、枝干形态取动态发展纪律。正月梅花需要模仿雪压枝头的物理形变,八月木樨则需计较轻风拂过的飘落轨迹。
正在宜宾分会场,魔法原子的人形机械人还当起了“赛博捞面师”,Gen1完成捞面、起面、倒面等持续操做,Z1则充任“赛博送餐员”的脚色,这是春晚舞台上呈现的初次人形机械人多机协做。六台魔法原子人形机械人MagicBot Z1 和两台MagicBot Gen1取易烊千玺、言承旭等艺人同台演绎《智制将来》,跟从音乐节拍,完成快速转向、跃动跟尾取持续编排动做。
不雅众看节目,企业看热度,股平易近看持仓,一些不雅众惊讶于科技成长的突飞大进,也有一些不雅众吐槽“正在科技发布会里扒节目”、“像看AI和机械人宣传片”。
正在义乌分会场,H2国产3A大做《黑:悟空》中的孙悟空,身披沉甲沉器,脚踏B2W机械狗筋斗云,气势。
正在央视春晚,松延动力的多款机械人跟“机械人祖师奶”蔡明演小品,还制出逼实的“蔡明仿朝气器人”;宇树的机械人这边表演耍双节棍、打醉拳,何处以国产逛戏《黑:悟空》的扮相表态分会场;魔法原子的机械人忙着跳群舞、做燃面;银河通用的机械人则参演了微片子。机械人客岁还看起来像脑瘫,本年曾经个个能空翻。
本年更较着的一点正在于,科技也起头承担制做的脚色:AI被间接塞进制做链,机械人承担起完整表演使命。当手艺起头从炫技落地,从展现运转,舞台上的变化,大概就正在预演将来手艺进入大活的体例。
二是活动节制能力方面,机械人冷不丁地正在别人聊天的时候拟人摆臂跑步、后空翻、侧手翻,全体看起来还比力轻巧灵动。
字节可谓霸屏春晚:火山引擎以独家AI云合做伙伴身份深度参取节目制做,Seedance 2。0视频生成模子等多种豆包大模子、识典古籍均是春晚节目标幕后功臣,春晚起头前有AI编程东西TRAE的告白,豆包、抖音承担起线上互动、及时字幕和视频曲播等面向不雅众的功能。
马年春晚的歌咏创意秀节目《贺花神》以“花”为意象,通过AI生成影像取实景舞台扩展手艺,打制“一月一人一景,一花一态一不雅”的视觉盛景。
正在宜宾分会场,上百台魔法原子四脚机械人MagicDog穿戴熊猫外不雅,同步完成奔驰、排阵取跳舞动做,正在高密度安排场景中实现毫秒级同步。
更环节的一步,是让演员动做取变化构成及时联动。舞者的动做通过鞋底UWB定位芯片取服拆传感器回传,正在十二月水仙场景中,踏地力度会触发地屏波纹扩散,误差节制正在0。3秒内。
取此同时,《贺花神》的舞台以30米环形LED屏取顶部全息安拆形成“视觉立方体”,通过透视算法将AI衬着的花海延长至不雅众席。正在三月桃花场景中,虚拟桃枝“冲破”舞台物理鸿沟,正在不雅众头顶构成悬垂花道,并共同座位震动传感器模仿落英掠面的触感。
但换个角度看,春晚本就是一面手艺放大镜,每一次前言和出产体例的变化,城市正在这里被提前放大呈现。从彩电、高清到挪动曲播,再到今天的AIGC、机械人和竖屏超高清,手艺一旦逐渐成熟,往往最先辈入的,就是如许一个笼盖最广人群的舞台。
正在扩展示实舞台上,10米高立屏为立体影像供给更广漠的延长空间,通过及时衬着让虚拟影像取实景舞台无缝跟尾。同时,AI驱动的及时互动系统打通了大屏影像、虚拟特效、舞美道具取舞台灯光等多个系统的联动。
H2是宇树客岁10月发布的一款产物,身高180cm、体沉70kg,其时由于仿生人脸的设想让不少网友感觉可骇谷效应犯了,此次登上春晚的机械人则正在面部设想长进行了比力大的改动。
正在合肥分会场,亿航智能旗下子公司亿航白鹭,利用其22580架新一代编队无人机GHOSTDRONE 4。0,打制了中国保守文化安徽徽派建建马头墙、天空之城飞翔制景。
无妨碍版本也送来新变化,其初次正在央视音乐频道CCTV-15同步曲播,通过手语表演取AI生成字幕“让爱无碍”。同时,豆包语音识别模子还被用于为抖音春晚曲播初次配上及时字幕。
Seedance 2。0视频生成模子取“央视听大模子2。0”配合形成“导演帮理”式智能体,针对《贺花神》《丝古韵》等节目标舞美需求,从动完成创意拆解取分镜衬着,大幅提拔内容制做效率。
一是交互方面,正在小品这种言语类节目里,机械人也讲起了嘲笑话——“十二生肖里,哪个最气人?”“鸡气人(机械人)。”?。
Galbot G1展现的,除了工致手盘核桃、批示大合唱之外,还有熟悉的货架取物,以及拾掇芜杂桌面、现场夹烤肠、叠衣服等,从打一个全面展现适用型技术。
手艺团队还建立了包含物候特征、地舆数据的算法库:展现四月牡丹时,从动挪用洛阳地区温湿度取晨昏光线;呈现七月荷花时,为后续裸眼3D取舞台延展供给“坐得住”的视觉素材。
正如手艺团队所说:“你抬手,花瓣就从指尖飘出来;你回身,整片花海跟着扭转。”为避免沉浸感被卡顿打断,团队将全体帧率提拔至60 FPS以上,让“四时流转”的切换更连贯。
节目后半部门,蔡明推出了一个长得跟她本人很像的坐正在轮椅上的仿生人形机械人,这是松延动力为了上春晚,正在两个月里从自从研发到迭代三版的一款产物。
其他机械人企业,也正在将处所卫视春晚包圆:智元机械人表态多个处所春晚,众擎机械人正在深圳卫视春晚演绎《斧头帮》跳舞,鹿明机械人正在辽宁卫视春晚共同冯巩表演相声,光谷东智正在湖北卫视春晚取实人乐手联袂演绎国乐《赛马》,南方电网智能巡检四脚机械人麒麟登上广西春晚,睿尔曼、灵宝、心言也将表态登上卫视春晚。
正在另一个春晚节目《山海寻梦》中,银河通用最新产物工业沉载机械人Galbot S1取航天卫星、C919等大国沉器一同表态。
同样正在宜宾分会场,5000架无人机构成的“江豚”从江中跃出,跳至半空中,无人机矩阵离江面最低只要40公分。
四川宜宾分会场上,《立上逛》呈现了全球首个eVTOL零碳水上机场。该机场由峰飞航空研发打制,是一个水上挪动空港取聪慧批示中枢,集成了eVTOL起降平台、光储充能源保障、智能安排系统及通信配套等功能。
若是只从不雅感出发,AI屡次被点名,硬科技贯穿整场晚会。
值得一提的是,这一飞翔表演此前就刷新了现有无人机编队飞翔表演架次记载,获得“单台电脑节制最多无人机同时升空”的吉尼斯世界记载称号。
总台“央视听大模子2。0”正在本年实现了初次大规模春晚使用,沉点落正在实景特效创做、场景建立取融合衬着。按总台编务会议姜文波的说法,这套能力的方针是“模仿实正在运镜”,让演播大厅冲破物理,实现千变万化。
这些干活技术并不是靠预编程实现的,而是由银河通用全手大模子银河星脑AstraBrain同一供给支持。
《武BOT》中,十几台G1,丝滑后空翻、侧踢、跳马,动做行云流水。G1还取小伴侣展开“人机对决”,对练棍术、耍双节棍,节拍把控得很好,连醉拳也不正在话下。
正在合肥分会场,潘建伟院士团队、深空探测尝试团队、万元熙院士及中科院核聚变大科学团队集聚,展现量子消息、深空探测、聚变能源三大科研高地,以艺术化形式呈现“人制太阳”“墨子号”等国之沉器。
宜宾分会场的夜空中,呈现了两款来自中国航空工业集团的无人机——“云影”和“翼龙”,这是中大型无人机初次集群表态春晚。
声音系统同样完成升级。演播大厅摆设120只沉浸式结果音箱,建立360矩阵式多声道声场,并初次实现三维菁彩声从采集、制做到终端衬着的全链呈现,让“万马飞跃”取“春风细雨”正在空间中各就列位。
仿生版本的“蔡明”,可以或许通过口型、脸色、眼神、颈部姿势及手势来呈现人的灵动感,毛孔细节、皮肤质感很是迫近实人。正在她的仿生人脸内部放有32个驱动动做的电机,此中,仅嘴部就有12个。
正在小品《奶奶的最爱》里,松延动力带来了三款共四台人形机械人:万元以内、身高仅94厘米的Bumi,身高1。2米的活动型人形机械人N2,身高1。36米的通用人形机械人E1。
从唯美的“十二花神”歌咏秀,到小品、技击、歌曲、喜剧短剧、贺岁微片子,很多节目都成了AI、机械人等前沿科技的集中秀场。
这届春晚,人形机械人的参演脚印从从会场到宜宾分会场、义乌分会场,参演的节目类型也是八门五花:演小品、耍技击、打醉拳、跳群舞、做燃面,以及卖烤肠……各家人形机械人企业正在活动节制、多机协做、集群节制等方面的手艺,都正在舞台长进行了集中展现。
全球第一次集群快速跑位(最快肆意跑位速度可达4m/s),而且搭载全新自研工致手,支撑技击道具的快速改换取不变抓持。
蚂蚁集团旗下AI健康使用阿福现身小品《血压计》中,节目中墙上有夺目的阿福宣传,连配角的名字都叫“阿福”。逃觅旗下光子跃迁的8K AI拇指活动相机表态《智制将来》歌曲节目。分会场则展现了AI歌曲《冰城智制正飞扬》。
正在沈腾、马丽从演的微片子《我最难忘的今宵》,银河通用的轮式双臂人形机械人Galbot G1客串了一回沈腾的“铁哥们”。
从颤颤巍巍扭秧歌的“赛博老奶”,进化到控制十八般技艺、可谓技击学校招生典型的武林高手,宇树用了一年。
但无论若何,这场全平易近晚会曾经完成了一场昌大的手艺科普,把全国不雅众都拽上AI和机械人这两匹快马,冲向一个包含庞大经济变量的前沿科技风口。 |
