交互式神经绘画
协作神经绘画是一个新的任务,目标是支持人机共同完成连贯绘画的过程,以一系列参数化的笔触作为绘画表示,在图像生成领域中采用扩散模型作为基本学习过程,并提供了一个新的数据集和评估协议来验证该方法的有效性和潜力。
Dec, 2023
本文提出了一种名为 Paint Transformer 的基于 Transformer 结构的神经网络框架,通过一个前馈网络来预测笔画集合的参数,从而实现在短时间内生成一个 512 * 512 的绘画。此外,作者设计了一个自学习流程,使其可以在没有任何预训练数据的情况下进行训练,并取得了比以往更好的绘画性能。
Aug, 2021
本文提出了一种图像到绘画的翻译方法,采用矢量化环境并产生一系列具有物理意义的绘画参数,然后通过搜索参数最大化输入和渲染输出之间的相似度来框架笔画预测作为参数搜索过程,结果表明生成的画作在全局外观和局部纹理方面具有高度的保真度。
Nov, 2020
该论文提出了一种新的绘画方法 Intelli-Paint,它可以学习生成具有更加自然的绘画风格的输出幅面。该方法通过引入渐进层叠策略、依据语义指导刷子移动以及刷子规范化策略等 3 个策略,成功地实现了 60-80% 的刷子数目减少而不影响画面的质量。
Dec, 2021
本研究提出了一种新的图像修复方法,结合了神经网络的先验知识和用户的引导,使用自动编码器和语义解码器完成两个阶段,实现对修复结果的自定义控制,实验结果表明该方法在修复质量和可控性方面优于现有方法。
Jan, 2022
通过使用神经绘画家创造了一种新颖的基于人工画家的可微分的图像生成方法,同时提出了新的内容损失的概念,允许艺术媒介自然地决定由神经绘画生成的样式。
Apr, 2019
提出了一种语义引导的有效的神经网络模型,利用二级绘画过程来区分前景和背景笔画方法,并通过使用领域定位和空间转换器网络来保证前景对象的位置和比例不变,最后通过最大化基于感兴趣对象的导引反向传播来放大感兴趣对象的差异特征,从而实现了对前景对象属性变化的处理,能够在多前景对象的真实世界和虚拟场景中产生高质量的图像。
Nov, 2020
我们提出了一种新技术 Paint Neural Stroke Field(PaintNeSF),用于根据多视角 2D 图像生成 3D 场景的任意新视角的风格化图像。
Nov, 2023
本文提出了一种基于人类初级绘画的光线追踪图像生成方法 paint2pix,通过少量的简略涂鸦就能达到良好的效果,在自动绘画任务中表现良好,同时也能用于实际图像编辑中。
Aug, 2022
通过动态预测下一次绘画区域、预测画笔参数以及将笔触渲染到当前画布的绘画过程,提出了基于组合神经绘画家的 stroke-based rendering 框架,还借助可微分距离变换损失将该方法扩展到基于 stroke 的风格迁移,实验证明在 stroke-based neural painting 和 stroke-based stylization 方面,我们的模型优于现有模型。
Sep, 2023