快手可灵发布2.0版本:上线多模态视频编辑功能

article/2025/4/28 19:03:29

随着AI生成视频日渐走红,如何准确将用户心中的想法转化成AI视频,成为难题。用户常常发现,仅仅依靠文字很难描述自己的需求。

4月15日,快手旗下可灵AI宣布,面向全球发布可灵2.0视频生成模型及可图2.0图像生成模型,快手高级副总裁、快手社区科学线负责人盖坤向记者表示,“AI在辅助创意表达上拥有巨大潜力,但当前的行业发展现状还远远无法满足用户需求,在AI生成内容的稳定性、以及用户复杂创意的精确传达上仍有很多挑战。”

此次2.0版本的迭代中,最受关注的便是多模态视频编辑的新功能:可灵AI使用全新交互理念Multi-modal Visual Language(MVL),让用户能够结合图像参考、视频片段等多模态信息,将脑海中包含身份、外观、风格、场景、动作、表情、运镜在内的多维度创意,高效传达给AI。同时,用户可以直接把自己的想法用图像等方式表作为输入,生成符合自己想法的创意视频。

盖坤介绍,MVL由TXT(Pure Text,语义骨架)和MMW(Multi-modal-document as a Word,多模态描述子)组成,能从视频生成设定的基础方向以及精细控制这两个层面,精准实现AI创作者们的创意表达。他表示,MMW(多模态描述子)将不只局限于图片和视频,也可以引入其它模态的信息,例如声音、运动轨迹等,让用户实现更加丰富的表达。

数据显示,自去年6月发布以来,可灵AI已累计完成超20次迭代。来自世界各地的超1.5万开发者和企业客户,将可灵的API应用于不同的行业场景中。自去年6月上线至今的10个月时间里,可灵AI的月活用户数量增长25倍,截至目前,全球用户规模突破2200万。

据盖坤介绍,可灵和可图两款模型在团队内部的多项胜负率评测中,均稳居业内第一。例如在文生视频领域,可灵2.0对比谷歌Veo2的胜负比为205%,对比Sora的胜负比达367%。

值得注意的是,当前图生视频约占到可灵AI视频创作量的85%,图片质量也对视频的生成效果产生重要作用。

据快手副总裁、可灵AI负责人张迪介绍,可图2.0文生图能力也迎来全面升级,在风格化响应上,可图2.0可支持60多种风格化的效果转绘,模型出图创意和想象力实现大幅跃升。

同时,可图2.0也上线图像可控编辑功能:局部重绘和扩图,支持图片的增加、修改和修复。在图像的多模态可控生成中,可图2.0还上线风格转绘功能,只需要上传一张图片加上风格描述,就能一键切换图片的艺术风格,同时精准保留原图的语义内容。

除C端订阅用户,可灵AI也面向B端商家提供API接入等服务。目前,可灵AI已与包括小米、亚马逊云科技、阿里云、Freepik、蓝色光标等在内的数千家国内外企业客户建立合作关系。

在营收数据方面,快手2024年三季度财报数据显示,可灵AI在2024年9月实现月活超150万;商业化单月流水也超过千万人民币。另据2024年快手四季度及全年财报,自可灵AI开始商业化变现至2025年2月,可灵AI的累计营业收入已经超过1亿元

AI视频是互联网公司集体发力的赛道,去年12月,腾讯混元大模型发布AI视频生成大模型,同时宣布开源,参数量达到130亿,为当时最大的视频开源模型,字节跳动、MiniMax、智谱AI等国内大厂和头部初创公司也推出了相应产品。

    责任编辑:孙扶
    图片编辑:沈轲

    http://news.xdnf.cn/lGhFXCyAlI

    相关文章

    五一小长假前夜火车票今日开抢,预计客流最高峰为5月1日

    五一小长假前夜火车票今天开抢!4月16日,五一假期前一天(4月30日)的火车票正式发售。2025年五一小长假自5月1日至5月5日,共5天。根据目前铁路客票提前15天预售的规则类推,4月17日开售5月1日假期首日火车票;4月21日开售5月5日假期最后一天火车票。通常而言,假期前一天傍晚…

    龙华机场将升级为A类通用机场,低空经济如何抢抓风口“飞”更高

    位于上海徐汇滨江的龙华机场。上海徐汇 图在上海中心城区唯一的机坪空域——龙华机场,搭载旅客的直升机缓缓起飞,沿黄浦江上空飞行、观光、返航;将海鲜从沿海的金山区运至上海市区,这些海鲜随后被分送至成百上千个商超和餐厅;由上百架无人机组成的灯光矩阵,常常点亮徐汇滨…

    技术派|菲律宾“史上最强”护卫舰交付,性能如何?

    菲律宾为其海军目前史上最强护卫舰举行归国仪式。日前,菲律宾海军在苏比克海军基地为其“历史上最强战舰”——“米古尔马尔瓦尔”号导弹护卫舰(舷号FFG-06)举行了正式的归国欢迎仪式。菲律宾国防部长特奥多罗、武装部队总参谋长布劳纳、海军司令埃斯佩莱塔等政府及军方高层…

    世界噪音日|“好房子”的噪声标准:卧室上限30分贝

    4月16日是世界噪音日。生活在都市里,忍受噪音似乎已成为一门必修课。从清晨睡眼惺忪,对面楼装修钻墙入耳开始,到深夜熄灯闭眼,楼上洗衣机排水助眠结束。因噪音扰民引发的邻里纠纷更是屡见不鲜。住房和城乡建设部在3月底发布的国家标准《住宅项目规范》(以下简称《规范》)…

    专访|巴西气变国务秘书:历史将全球南方国家推到引领的位置

    第30届联合国气候变化框架公约缔约方大会(COP30)将于今年11月在巴西亚马孙雨林城市贝伦举行。近日,大会主办国巴西发布了一封“致世界的信”,以严峻而紧迫的语调向国际社会发出警示:在全球注意力被地缘政治冲突、极端主义抬头等议题分散的当下,人类社会正面临“选择还是灾…

    “没法做无糖的”,这句话被星巴克杀死了

    原创 云无心 果壳 控糖星人等来了一个好消息。 这几年市面上花式咖啡风头正旺,大多数做法是在黑咖或奶咖的基础上加风味糖浆,比如焦糖味糖浆、香草味糖浆、水果味糖浆等等,总之要风味就得要糖,要风味浓就要多加糖,导致许多人只敢看不敢喝。对有控糖需求或不爱甜的人来说…

    国际首个!我国成功构建地月空间三星星座,还有一批新突破

    记者4月15日从中国科学院获悉,由中国科学院A类战略性先导专项“地月空间DRO探索研究”部署研制的三颗卫星目前已经在地月空间稳定建立百万公里级星间测量通信链路,标志着我国已成功构建国际首个地月空间三星星座,并取得多项原创性科技成果,为我国开发利用地月空间、引领空间…

    上海是他永远倾心的城市,黄永玉90岁后作品在沪展出

    4月15日,“如此漫长如此浓郁——黄永玉新作展”在上海世博会博物馆开幕,并于4月16日正式对公众展出。此次展览由世博会博物馆与北京画院联合主办,通过上海叙事的新视角,集中展示了黄永玉90岁后创作的彩墨、版画、雕塑等200余件作品,并系统性地展出了他的手稿、出版物及文献…

    上昆亮相大阪世博会;京昆歌舞伎东京合演《中日杨贵妃》

    樱花纷飞的四月,适逢2025年日本大阪世博会盛大启幕,上海昆剧团受邀于4月14日亮相世博会中国馆首演活动。在结束大阪世博会的演出活动之后,上海昆剧团还将在日本东京接续文化展示和交流,京昆和歌舞伎合演《中日杨贵妃》。从4月14日至18日,持续开启一段中日人文交流佳话。活…

    秘鲁前总统乌马拉因洗钱罪被判15年监禁

    当地时间4月15日,秘鲁法庭以洗钱罪判处该国前总统乌马拉及其妻子埃雷迪亚15年有期徒刑。15日,秘鲁前总统乌马拉在法庭结束其宣判听证后通电话。当天的庭审法官认为,乌马拉夫妇隐瞒了2011年大选期间巴西最大建筑公司奥德布雷希特公司提供的资金并用于购买房产。乌马拉夫妇在竞…

    法国驱逐12名阿尔及利亚外交人员并召回大使

    法国外长巴罗(资料图)新华社巴黎4月15日消息,法国总统府15日晚发布公告说,将驱逐12名阿尔及利亚驻法外交人员,并召回驻阿尔及利亚大使述职。公告说,法方对阿方驱逐12名法驻阿外交人员的决定感到震惊,阿方应对两国关系“突然恶化”负责。公告还说法方将继续维护自身利益,…

    上海是他永远倾心的城市,“黄永玉新作”在沪展出

    4月15日,“如此漫长如此浓郁——黄永玉新作展”在上海世博会博物馆开幕,并于4月16日正式对公众展出。此次展览由世博会博物馆与北京画院联合主办,通过上海叙事的新视角,集中展示了黄永玉90岁后创作的彩墨、版画、雕塑等200余件作品,并系统性地展出了他的手稿、出版物及文献…

    涉嫌泄密,美防长高级顾问被调查

    五角大楼(资料图)总台记者获悉,当地时间4月15日,在调查美国国防部泄密事件中,国防部长赫格塞斯的高级顾问丹考德威尔在被确认涉嫌泄密后,被“护送”出五角大楼。有美国官员透露,丹考德威尔因“未经授权的披露”而被行政休假,针对他的调查仍在进行中。责任编辑:王晓峰澎…

    白宫称在停火前提下或与俄建立经济伙伴关系

    美国白宫新闻秘书莱维特(资料图)当地时间4月15日,美国白宫新闻秘书莱维特表示,美国中东问题特使史蒂文威特科夫和俄罗斯的对话富有成效。威特科夫和特朗普相信俄罗斯希望结束俄乌冲突,俄罗斯有结束这场冲突的动机。莱维特表示,俄罗斯或许可以与美国建立经济伙伴关系,但美…

    法国决定驱逐12名阿尔及利亚使馆工作人员并召回驻阿大使

    法国外长巴罗(资料图)当地时间4月15日,法国外长巴罗在社交媒体上发布消息称,法方决定驱逐12名阿尔及利亚驻法使馆工作人员,并召回法国驻阿大使,作为对阿尔及利亚驱逐12名法国驻阿使馆工作人员的回应。14日,阿尔及利亚外交和海外侨民部发表声明,宣布将12名法国大使馆工作…

    光明网评论员:治理学术不端如何更精准有效

    一段时期内出现数量相对较多的学术不端事件,可见治理学术不端对有责部门而言仍然任重而道远。因此,就需要关注一定时期内学术不端事件的共通性,有的放矢地进行查缺补漏。近期,国家自然科学基金委员会通报了2025年第一批次不端行为事件处理结果,事件总数15件,涉及13所高校…

    东鹏饮料一季度净利增近五成,电解质饮料收入增超两倍

    东鹏饮料东鹏饮料一季度业绩继续大涨。4月15日,功能饮料制造商东鹏饮料(集团)股份有限公司(东鹏饮料,605499.SH)发布2025年一季度业绩。今年一季度东鹏饮料实现营业收入48.48亿元,同比增长39.23%。归母净利润为9.8亿元,同比增长47.62%。 据3月发布的2024年年报显示,去…

    支持企业保持战略定力、坚定发展信心、增强战略敏捷!陈吉宁龚正走访调研外贸外资企业

    今天(4月15日)下午,上海市委书记陈吉宁,市委副书记、市长龚正分别前往外贸外资企业走访调研,了解企业情况、听取意见建议、开展现场办公。陈吉宁指出,要深入学习贯彻中央经济工作会议和习近平总书记考察上海重要讲话精神,不断提升营商环境的市场化、法治化、国际化水平,…

    光明日报:“拒绝上学门诊”一号难求,治本药方或在医院外

    听说过厌学症、逃学逃课,你听说过“拒绝上学门诊”吗?今年清明假期结束后的第一天,北京儿童医院挂号系统内,“拒绝上学门诊”的一周号源显示全满。据报道,北京儿童医院是我国最早一批开设儿童心理门诊的三甲医院,2024年6月,医院从原来儿童心身医学科的基础上,单独分出了…

    百亿私募最新现身57只A股,基础化工、电子行业受青睐

    蒋立冬 AI 图随着上市公司2024年年报的陆续披露,百亿私募的最新持仓数据浮出水面。私募排排网最新统计数据显示,截至4月15日,共有23家百亿私募旗下产品出现在57家A股上市公司去年四季度前十大流动股东名单中,合计持股市值达226.42亿元。从持股数量变动情况来看,百亿私募去…