介绍了一种基于卷积神经网络特征空间的自然纹理新模型,可生成具有高感知质量的样本,可作为神经科学刺激或深度卷积神经网络学习的新工具。
May, 2015
本文提出了一种基于卷积网络 (ConvNets) 的两流 (Two-Stream) 动态纹理合成模型,它能够结合来自目标识别 ConvNet 的特征统计和来自光流 ConvNet 的特征统计生成全新的动态纹理,另外还引入图像风格迁移技术,能够将一个纹理的外观与另一个纹理的动态特性结合生成高质量的纹理。最后作者通过一个系统的用户实验,对该模型进行了客观的评价和验证。
Jun, 2017
本文使用卷积神经网络和傅里叶频谱以及统计特征约束来实现纹理合成,并实验表明与现有方法相比具有更好的性能。
May, 2016
研究表明,随机浅层卷积神经网络的特征空间可以作为自然纹理的模型,可以用于纹理合成算法,并且相较于深层 CNNs 模型,浅层 CNNs 模型具有相当的性能。
本文介绍了一种新的人类视频合成方法,通过两个卷积神经网络(CNNs)明确分离 2D 屏幕空间中的人类嵌入和时间相干的细节,其中第一个 CNN 预测一个动态纹理映射,第二个 CNN 条件下第一个 CNN 的输出生成最终的视频。 该方法被应用于人类重演和单目视频的新视图合成等多个领域,并且在质量和数量方面都有显着的提高。
Jan, 2020
使用能量基础的时空生成 ConvNet 建立一个概率分布模型,可用于学习和合成存在于视频序列中的动态纹理和运动模式,该模型可从不完整的训练序列中学习和完成动态模式,并具有较好的生成能力。
Sep, 2019
本论文旨在解决动态纹理和场景分类这两个问题,在提取特征方面使用深度学习的方法,即将一个经过训练的卷积神经网络作为中间特征提取器,进行空间和时间上的特征提取,从而实现优异的性能。
Feb, 2015
采用最优传输理论来生成纹理样本,提出了一种基于卷积神经网络的插值方法,同时应用于人和猴子的视觉感知和神经敏感度研究,拓展了对视觉处理的理解。
Jun, 2020
我们提出了一种对场景动态进行图像空间先验建模的方法,该先验是从包含自然振动运动(如树木、花朵、蜡烛和风中的衣物)的真实视频序列中提取的一系列运动轨迹学习得到的。通过一个经过训练的模型,我们使用一种频率协调扩散抽样过程来预测傅里叶域中每个像素长期运动表示,我们称之为神经随机运动纹理。这种表示可以转换为跨越整个视频的密集运动轨迹。结合基于图像的渲染模块,这些轨迹可以用于许多下游应用,例如将静止图像转换为无缝循环的动态视频,或者允许用户在真实图片中与物体进行真实交互。
Sep, 2023
本文通过对最近的 CNN-based 描述符进行系统评估和比较,梳理深度卷积神经网络在纹理表示和分类变量不变性方面的性质,并提出了一个可视化的方法来理解这个性质。最后,作者介绍了一个关于纹理分析和合成的参数化模型,可以用于基于属性的图像操作以及图像的纹理化处理。
Nov, 2015