AI已经可以教你画油画了。

随便给个图，笔画顺序几秒钟就呈现出来了。

就像世界名画中的蒙娜丽莎。

或者现实中的鸟。

还有很大气的河灯。

简而言之，任何风格都可以控制。

这项技术在Reddit上21小时内获得了600个赞。

它是如何建造的。

用前馈网络预测冲程

神经绘画是为给定的图像生成一系列笔画，并利用神经网络进行绘画般的真实再现的过程。

研究团队提出了一种基于变压器的框架，称为Paint Transformer，它使用前馈网络来预测冲程参数。

由于没有可用的数据集来训练Paint Transformer，受对象检测的启发，研究人员设计了一个自我训练的Pipeline。

整个模型由两个模块组成:笔画预测器和笔画渲染器。

给定目标图像和中间画布图像，笔画预测器生成一组参数来确定当前笔画集。

预测器包括两个用于特征嵌入的CNN网络和一个用于参数预测的Transformer。

然后，笔画渲染器为笔画集中汇总的每个笔画生成笔画图像，并将它们绘制到绘画中，以生成大小为512*512的结果图像。

基于DETR，添加二进制神经元来预测是否应该保留笔画。

这样，它可以在没有任何现成数据集的情况下进行训练，同时可以实现出色的泛化能力。

实验表明，与以往的方法相比，该方法具有更好的绘图性能和更低的训练和推理成本。

这项技术由百度，南京大学和罗格斯大学联合创造。

目前，该代码已开源并应用于Moment相册App。

郑重声明：此文内容为本网站转载企业宣传资讯，目的在于传播更多信息，与本站立场无关。仅供读者参考，并请自行核实相关内容。