Generative Powers of Ten翻译站点

该产品提供了一种新颖的框架，用于平滑跳切，特别是在对话视频中。它利用视频中主体的外观，通过 DensePose 关键点和面部标志驱动的中级表示来融合其他源帧中的信息。为了实现运动，它在切割周围的端帧之间插值关键点和标志。然后使用图像转换网络从关键点和源帧合成像素。由于关键点可能包含错误，因此提出了一种跨模态注意机制，以选择和为每个关键点挑选最合适的源。通过利用这种中级表示，我们的方法可以比强视频插值基准获得更强的结果。我们在对话视频的各种跳切上展示了我们的方法，例如切除填充词、暂停，甚至随机切割。我们的实验表明，即使在对话头部旋转或剧烈移动的挑战性情况下，我们也可以实现无缝过渡。

3DTopia是一个两阶段的文本到3D生成模型。第一阶段使用扩散模型快速生成候选项。第二阶段优化第一阶段选择的资产。该模型可以在5分钟内实现高质量的文本到3D生成。

MOTIA是一个基于测试时适应的扩散方法，利用源视频内的内在内容和运动模式来有效进行视频外延画。该方法包括内在适应和外在渲染两个主要阶段，旨在提升视频外延画的质量和灵活性。

ActAnywhere是一个用于自动生成与前景主体运动和外观相符的视频背景的生成模型。该任务涉及合成与前景主体运动和外观相一致的背景,同时也符合艺术家的创作意图。ActAnywhere利用大规模视频扩散模型的力量,并专门定制用于此任务。ActAnywhere以一系列前景主体分割作为输入,以描述所需场景的图像作为条件,生成与条件帧相一致的连贯视频,同时实现现实的前景和背景交互。该模型在大规模人机交互视频数据集上进行训练。大量评估表明该模型的性能明显优于基准,可以泛化到各种分布样本,包括非人类主体。

MuseNet是一个深度神经网络模型，可以生成4分钟的音乐作品，使用10种不同的乐器，并且可以结合多种音乐风格，从乡村到莫扎特再到披头士。MuseNet通过学习预测数十万个MIDI文件中的下一个音符，发现了和声、节奏和风格的模式。该模型采用了与GPT-2相同的通用无监督学习技术，可以预测音频或文本序列中的下一个标记。

Ceacle Tools是一个一站式的创意编辑工具平台,提供图像增强、背景替换、矢量转换等AI驱动的工具,助力无缝的创意之旅。主要功能包括:高效率的图像和视频编辑工具,一键实现上采样、背景去除、转换、压缩等功能;不同格式文件的全能编辑工具,无需在不同工具间切换;支持批量文件编辑,workflow设计提高工作流程效率;功能强大、价格亲民。适用于设计师、创意工作者、影视后期从业者等创意行业人士。