清华大学文生视频专利公布

2024-02-21每日热点

  国家知识产权局网站显示,2月2日,清华大学申请的“一种定制化多主体文生视频方法、装置、设备及介质”专利公布。

  专利摘要显示,该申请提供一种定制化多主体文生视频方法、装置、设备及介质,涉及神经网络技术领域,包括:获取多个主体分别对应的主体文本表述以及主体图像;基于多个主体分别对应的主体文本表述以及主体图像,获取混合文本以及组合图像;将混合文本以及组合图像输入文生视频模型,生成第二噪声预测值,并基于第二噪声预测值与组合图像,获取第二损失和第三损失;基于第一损失、第二损失与第三损失,对文生视频模型进行优化,得到优化的文生视频模型。该申请通过多种损失对文生视频模型的参数进行优化,使优化的模型基于文本描述生成视频中的图像时,文本描述与定制化主体保持一致,且在每个主体在生成过程中的特征不会发生混淆的同时消除合成痕迹。

标签: 今日热榜

“清华大学文生视频专利公布” 的相关文章

小牛电动连续四季度亏损,李彦艰难守业

小牛电动连续四季度亏损,李彦艰难守业

  作者|余昆   编辑|蒋浇   “造车梦”破碎的李一男看到小牛电动的业绩可能心里不是滋味。   近日,小牛电动...

理想L系列OTA 5.0上线,智能驾驶全面升级

理想L系列OTA 5.0上线,智能驾驶全面升级

  凤凰网科技讯 11月25日,理想汽车官方宣布,理想L系列OTA 5.0上线,并称是“史上最大更新”,年底前将推送全量用户。   据悉,此次更新共有三个方面的升级。全新...

微信支付入淘,蚂蚁不会跌倒

微信支付入淘,蚂蚁不会跌倒

  作者 | B 哥   编辑 | 李凡   2月20日,据界面新闻等媒体消息,已经有多名网友发现部分淘宝订单可直接跳转到微信支付进行付款。淘宝客服表示...

AI芯片黑马一夜爆红:成本推算争议不断,前员工现员工互撕

AI芯片黑马一夜爆红:成本推算争议不断,前员工现员工互撕

  芯东西2月21日报道,在OpenAI推出又一爆款力作AI视频生成模型Sora后,连带着偏上游的AI芯片赛道热度一点即着。   创始成员来自谷歌TPU团队的美国存算一体...

OpenAI官方公布Sora第一波试用反馈

OpenAI官方公布Sora第一波试用反馈

  凤凰网科技讯 3月26日, OpenAI介绍该公司与艺术家和电影制片人的早期合作情况,展示Sora如何帮助人们把想法转变为现实。   据资料显示,Sora系美国人工智...

3款手机同时买票差价3倍 苹果价格最贵 大数据杀熟?

3款手机同时买票差价3倍 苹果价格最贵 大数据杀熟?

  【CNMO新闻】在数字化时代的浪潮中,大数据技术以其独特的信息处理和分析能力,已深入影响到我们生活的方方面面。然而,随着技术的广泛应用,一种名为“大数据杀熟”的现象逐渐浮出水面。而近日...