阿里达摩院低调上线文本生成视频大模型：仅支持英文输入，已开放试玩
2023-03-22 17:23来源：IT之家 阅读量：5229
感谢IT之家网友 大眼夹、打工轨道人、航空先生 的线索投递！
，近日，阿里达摩院已在 AI 模型社区“魔搭”ModelScope 上线了“文本生成视频大模型”。
根据官方介绍，目前文本生成视频大模型，由文本特征提取、文本特征到视频隐空间扩散模型、视频隐空间到视频视觉空间这 3 个子网络组成，整体模型参数约 17 亿，目前仅支持英文输入。扩散模型采用 Unet3D 结构，通过从纯高斯噪声视频中，迭代去噪的过程，实现视频生成的功能。
官方介绍称，本模型适用范围较广，能基于任意英文文本描述进行推理，生成视频。一些文本生成视频示例如下:
据IT之家了解，模型已经在创空间和 huggingface 上线，可以直接体验，也可以参考该页面自行搭建。模型需要硬件配置大约是 16GB 内存和 16GB GPU 显存。在 ModelScope 框架下，通过调用简单的 Pipeline 即可使用当前模型，其中，输入需为字典格式，合法键值为 'text'，内容为一小段文本。该模型暂仅支持在 GPU 上进行推理。
从试玩的结果来看，目前能生成的视频长度多在 2-4 秒，生成等候时间从 20 多秒到 1 分多钟不等。
郑重声明：此文内容为本网站转载企业宣传资讯，目的在于传播更多信息，与本站立场无关。仅供读者参考，并请自行核实相关内容。
责任编辑：牧晓
最新阅读
-
-
-
-
-
-
![特斯拉CEO埃隆・马斯克弟弟：我们兄弟俩都不迷恋财富这“很无聊”]()
特斯拉CEO埃隆・马斯克弟弟：我们兄弟俩都不迷恋财
，据外媒报道，特斯拉与SpaceX首席执行官埃隆?马斯克已经是世界首富，但他的弟弟金巴尔?马斯克(KimbalMusk)表示，他们两人都不痴迷于财富。最近接受媒体采访时，金巴尔强调，他和哥哥都没有过度...
2022-03-04 10:49 -
![昔日最强机皇宣告终结：鼎盛期苹果也不是对手！]()
昔日最强机皇宣告终结：鼎盛期苹果也不是对手！
编辑:Wallace小雷搜了一下之前写过的文章，发现原来早在2018年市场上就有消息存传出，三星可能会将旗下的顶级产线GalaxyNote系列“砍掉”，由其他产品取而代之。时间来到2020年前后，眼看...
2022-03-04 10:43 -
![智能自动化在能源和公用事业行业的作用]()
智能自动化在能源和公用事业行业的作用
随着世界对清洁、安全、可承受和可持续的电力的迫切需求，各国对于绿色能源的需求和新应用不断增长，从而希望采用可再生能源替代化石能源。能源行业正从监管转向创新，而其客户也从被动消费者转向需求旺盛的买家。以...
2022-03-04 10:42 -
![小鹏汽车投资碳化硅半导体领域公司瞻芯电子]()
小鹏汽车投资碳化硅半导体领域公司瞻芯电子
企查查APP显示，近日，上海瞻芯电子科技有限公司发生工商变更，新增股东广州小鹏汽车投资咨询合伙企业(有限合伙)，同时公司注册资本由4921.88万元人民币增加至5111.46万元人民币。企查查信息显示...
2022-03-04 10:41 -
![微软智能云Azure在华的第五个数据中心区域正式启用]()
微软智能云Azure在华的第五个数据中心区域正式启
，微软联合世纪互联正式宣布，自2022年3月1日起，全新的Azure在华数据中心区域将正式启用，客户可以不受限制地对其进行访问。这是微软智能云在中国市场的第五个Azure数据中心区域，由其合作伙伴世纪...
2022-03-04 10:39
