一位名叫埃米尔·沃纳(Emil Wallner)的瑞典机器学习研究人员发布了一个名为 Palette.fm 的免费网络工具,该工具使用AI自动为黑白照片着色。上传照片后,用户可以选择颜色滤镜或使用书面文本描述优化颜色。

Palette.fm 使用深度学习模型对图像进行分类,该模型指导其对照片或插图中物体颜色的初步猜测。我们问Wallner,该网站采用哪种后端技术,但他没有详细说明。“我做了一个定制的AI模型,使用图像和文本来生成着色,”Wallner回答说。一个模型创建文本,另一个模型获取图像和文本以生成着色。
上传图片后,该网站的时尚界面会提供它认为在图片中看到的内容的估计标题(描述)。如果您不喜欢任何预设的颜色滤镜,可以单击铅笔图标自行编辑字幕,这将使用文本提示引导着色模型。
为了测试它,我们拍了一张小南瓜的照片,并使用Photoshop去除了颜色。然后,我们上传了黑白版本,并尝试选择 Palette.fm 提供的预制过滤器。找到一个好的滤镜后,我们编辑了标题,通过描述场景中的对象来优化颜色。例如,Palette.fm 最初认为南瓜是一只“爪子”,但是,一旦我们将这些术语放在书面提示中,颜色就更有意义了。我们稍后通过在背景中指定“绿叶”来进一步优化图像(未在下面的示例中所示)。

目前,Palette.fm 作为免费服务提供,但Wallner计划添加付费选项。该网站在云中在线处理图像。就上传照片的隐私而言,Palette.fm 网站写道:“我们不存储您的图像。但是,与任何云服务一样,请对私人照片持谨慎态度。令人耳目一新,Palette.fm 目前不需要任何类型的用户帐户注册。
到目前为止,Palette.fm 已经引起了新闻上的人们的共鸣,他们使用目前免费的工具为心爱的亲戚的照片和历史照片着色。

值得指出的是,用AI为照片着色的概念对于 Palette.fm 来说并不陌生,包括Photoshop中的“着色”神经滤镜。他说,沃纳本人已经从事人工智能着色工作了五年。自去年底以来,沃纳着色技术的变体也作为机器人在Twitter上提供。