科技魔方

谷歌 Pixel 9 手机的 AI 图像生成工具“放飞自我”,或成“造假利器”

OpenAI

2024年08月22日

  谷歌上周发布了 Pixel 9 系列智能手机,其中包含一系列以人工智能为核心的新功能。所有 Pixel 9 手机均支持 Gemini 人工智能,谷歌还加入了基于人工智能的图像生成和编辑工具。然而,评测人员测试了这些新功能后发现,人工智能图像生成很可能会成为谷歌的公关噩梦。

  据了解,谷歌为 Pixel 手机推出了一个名为 Pixel Studio 的人工智能图像生成应用,其能够通过文本提示创建贴纸和图像,功能与苹果计划推出的 Image Playground 非常相似。目前,评测人员能够使用 Pixel Studio 创建出各种令人不安的图像,例如纳粹版本的海绵宝宝和拿着 AK47 的艾摩

  来自 Digital Trends 的评测人员毫不费力地让 Pixel Studio 制作了卡通人物从事可疑活动的图像,枪支、毒品和酒精都能够生成,甚至像校园枪击这样的冒犯性场景。Pixel Studio 不会主动生成此类图像,而是需要用户输入相应的描述。然而这正是人们最有可能做的事情,而不是生成可爱猫咪和小兔子的图像。

  谷歌表示他们已经采取了“安全检查措施”来防止 Pixel Studio 被“恶意使用”,并且确实起到了一定作用。例如,Pixel Studio 目前无法生成人物图像,并且谷歌正在根据评测反馈调整人工智能模型。经过与谷歌的沟通后,Digital Trends 也无法再用 Pixel Studio 生成吸食可卡因或穿着德国士兵服装的卡通人物图像。

  比 Pixel Studio 更令人担忧的是谷歌的“重构”(Reimagine)工具,其可以向用户已经拍摄的照片中添加对象。来自 The Verge 的评测人员用它向图像添加了尸体、炸弹、毒品和灾难场景,并且这些添加物看起来非常逼真,让人难以分辨图片是否经过编辑。谷歌在匹配光线和透视方面做得非常出色,社交媒体上也看不到任何水印或标记。虽然谷歌确实添加了元数据标签,但通过截图很容易将其去除。

  The Verge 指出,以前也可以向图像添加尸体或创建持枪的艾摩图片,但这需要一定的 Photoshop 技能和时间。使用 Pixel 手机,只需几秒钟的思考,任何人都可以创建这样的图像,这让人担忧。

  在给 The Verge 和 Digital Trends 的声明中,谷歌表示他们设计生成式人工智能工具时,是“为了尊重用户提示的意图”,这可能会导致用户要求生成“令人反感”的内容。但谷歌声称其“服务条款”中规定了不允许生成的内容,并且他们将不断完善相关保障措施。

+1

来源:IT之家

延展资讯