为了把Deepfake关进笼子 各大公司都拼了

2022-06-01 10:34:46 来源:网络

曾几何时,deepfake 在互联网上格外猖獗,新闻和成人类内容成为了“换脸”的重灾区。

由于受众广泛,市面上有不少现成的 deepfake 算法,供用户使用,如 DeepFaceLab (DFL) 和 FaceSwap。并且,由于深度学习技术的普及,也有一些低成本甚至免费的在线工具,可以训练这些算法,从而让好事之徒达到其目的。

常用的工具之一就是谷歌的 Colab,一个免费的托管式 Jupyter 笔记本服务。简单来说,用户可以在 Colab 的网页界面上运行复杂的代码,“白用l”谷歌的 GPU 集群,从而训练那些依赖高性能硬件的深度学习项目。

不过就在本月,谷歌终于对 colab 在线训练 deepfake 痛下杀手。

前不久,DFL-Colab 项目的开发者 chervonij 发现,谷歌本月中下旬将 deepfake 加入到了 Colab 的禁止项目列表当中:

chervonij 还表示,他最近尝试用 Colab 运行自己的代码的时候,遇到了如下的提示:

“您正在执行被禁止的代码,这将有可能影响您在未来使用 Colab 的能力。请查阅FAQ页面下专门列出的禁止行为。”

然而这个弹出提示只是做出警告,并没有完全禁止,用户仍然可以继续执行代码 (continue anyway)。

有用户发现,这次谷歌的行动应该是主要针对 DFL 算法的,考虑到 DFL 是目前网络上 deepfake 行为最常采用的算法。与此同时,另一个没那么流行,的 deepfake 算法 FaceSwap 就比较幸运,仍然可以在 Colab 上运行且不会弹出提示。

FaceSwap 联合开发者 Matt Tora 接受 Unite.AI 采访时表示,自己并不认为谷歌此举是出于道德目的:

“Colab 是一个偏向 AI 教育和研究方向的工具。用它来进行规模化的 deepfake 项目的训练,和 Colab 的初衷背道而驰。”

他还补充表示,自己的 FaceSwap 项目的重要目的就是通过 deepfake 来教育用户关于 AI 和深度学习模型的运行原理,言外之意可能这才是 FaceSwap 没有被 Colab 针对的理由。

“出于保护计算资源,让真正需要的用户能够获取这些资源的目的,我理解谷歌的这一举动。”

Colab 未来是否将会完全禁止 deepfake 类项目的执行?对于不听劝的用户会有怎样的惩罚?目前谷歌并未对此次修改作出回应,这些问题也暂时没有答案。

不过我们可以确定的是,谷歌肯定是不希望 Colab 这样一个出于公益目的,提供免费训练资源的平台,被 deepfake 开发者滥用。

Google Research 将 Colab 免费开放给广大用户,目的是降低深度学习训练的硬件成本门槛,甚至让几乎没有编程知识背景的用户也能轻松上手——也即所谓的 AI 普及化 (democratization of AI)。

由于区块链行业的爆发增长,以及疫情的次生影响,当今全球芯片(特别是 GPU) 很大程度上仍然处于断供状态。所以如果是为了节约资源而禁用 Colab 运行 deepfake 项目,确实可以理解。

不过除了 deepfake 之外,Colab 禁止的其它行为当中也的确包括大众认知的恶意行为,比如运行黑客攻击、暴力破解密码等。

deepfake 使用门槛变高?

在过去相当长一段时间里,对于初入门和中等水平的 deepfake 视频创作者来说,想要实现一般可接受画质(480p或720p以上)的内容输出,自己却没有足够的硬件配置的话,那么 Colab 几乎是唯一的正确选择。

毕竟 Colab 界面简单,上手轻松,训练性能达到可以接受的水平,而且还免费,没有理由不用。前面提到的一些 deepfake 算法项目也都针对 Colab 提供了代码支持。

要讨论 deepfake,很难避开新闻换脸视频和成人换脸内容。硅星人发现,DFL 主项目页面直接把新闻视频换脸作为主要使用场景之一,并且页面中引导的一些用户社群也都默许明星或私人复仇式 (revenge porn) 的换脸成人内容,使得此类内容大量存在。

现如今谷歌决定禁止 deepfake 类项目在 Colab 上运行,势必将对私人的 deepfake 内容制作造成不小的打击。

因为这意味着那些初级和中级 deepfake 制作者将失去一个最重要的免费工具,让他们继续制作此类内容的成本显著提高。

不过据领域内一些内幕人士表示,那些最顶级的,将 deepfake 当作一门生意的专业制作者,已经基本实现了完全“自主生产”。

这群人通过非法销售及会员募捐等方式,赚到了不少钱,可以投资更加高级的设备。现在他们可以制作分辨率、清晰度和脸部还原度更高的 deepfake 视频,从而不用依赖 Colab 以及云计算等在线服务,就能实现稳定生产和营收。

举个例子:想要实现2k甚至4k分辨率和60fps的帧率,并且单片单次渲染用时在可以接受的范围(比如几天)的话,需要一个庞大的渲染农场,至少10台电脑,每台两张支持 SLI 技术的英伟达 RTX 高端显卡,以及上百GB的内存。这样下来仅单台的购置成本就已经相当高了,更别提还要算上运转时的电费(渲染、冷却等),可以说是一笔相当大的投资。

很遗憾,对于这群人来说,谷歌的新政策对他们完全起不到作用。只有全社会对 deepfake 带来的负面影响提升重视,整个科技行业都行动起来,deepfake 的滥用问题才能得到解决。

把 deepfake 关进笼子里,各国、各大公司都在行动

谷歌

这的确不是谷歌第一次出面打击 deepfake 内容制作了。在2019年,Google Research 就发表过一个大型视频数据集。其背后是谷歌在自己内部通过制作 deepfake 视频的方式,从而试图了解相关算法的工作原理。

对于谷歌来说,它需要提高识别 deepfake 的能力,从而在商业化产品环境里(最典型的就是 YouTube 用户视频上传),从源头上切断恶意换脸视频的传播途径。以及,第三方公司也可以使用谷歌开放的这个数据集来训练 deepfake 探测器。

不过,近几年 Google Research 确实没有花太多心思在打击 deepfake 上。反而,该公司最近推出的 Imagen,一个超高拟真度的文字生成图片模型,效果非常惊人,反倒是引发了一些批评。

微软

微软研究院在2020年共同推出了一项 deepfake 探测技术,名为 Microsoft Video Authenticator。它能够检测画面中的渲染边界当中灰阶数值的不正常变化,对视频内容进行逐帧实时分析,并且生成置信度分数 (confidence score)。

微软也在和包括纽时、BBC、加拿大广播公司等顶级媒体合作,在新闻行业的场景下对 Video Authenticator 的能力进行检测。

与此同时,微软也在 Azure 云计算平台中加入了媒体内容元数据 (Metadata) 校验的技术。通过这一方式,那些被修改过的视频内容可以和原视频的进行元数据比对——和下载文件的时候比对 MD5 值差不多意思。

Meta

2020年,Facebook 宣布在 Facebook 产品平台全面禁止 deepfake 类视频。

然而这个政策执行得并不彻底。比如,目前在 Instagram 上还可以经常见到那个著名的中国翻版马斯克 deepfake 视频(主要是从 TikTok 上转发过来的)。

在行业层面,Meta、亚马逊 AWS、微软、MIT、UC伯克利、牛津大学等公司和机构在2019年共同发起了一个 deepfake 检测挑战赛,鼓励更多、更优秀、更与时俱进的检测技术。

Twitter:

2020年 Twitter 封杀了一批经常发布 deepfake 视频的账号。不过对于其它 deepfake 内容,Twitter 并没有完全限制,而是会打上一个标签“被修改的内容”(manipulated media),并且提供第三方事实核查机构的检测结果。

创业公司:

OARO MEDIA:西班牙公司,提供一套对内容进行多样化数字签名的工具,从而减少deepfake 等被修改过的内容传播对客户造成的负面影响。

Sentinel:位于爱沙尼亚,主要开发 deepfake 内容检测模型。

Quantum+Integrity:瑞士公司,提供一套基于 API 的 SaaS 服务,可以进行各种基于图像类的检测,能力包括视频会议实时 deepfake、截屏或图片“套娃”、虚假身份证件等。

国家(立法和行政)

中国:2020年印发的《法治社会建设实施纲要(2020 - 2025年)》进一步要求,对深度伪造等新技术应用,制定和完善规范管理办法。

美国:2019年正式签署生效的2020财年国防批准法当中包含了和 deepfake 相关的条文,主要是要求政府向立法机构通报涉及跨国、有组织、带有政治目的的 deepfake 虚假信息行为。

加州、纽约州和伊利诺伊州都有自己的 deepfake 相关法律,主要目的是保护 deepfake 受害者的权益。

欧盟:GDPR、欧盟人工智能框架提议、版权保护框架、虚假信息针对政策等高级别法律文件,都对可能和 deepfake 有关的事务实现了交叉覆盖。不过,整个区域级别目前并没有专门针对 deepfake 的法律和政策。

在成员国级别上,荷兰立法机构在2020年曾经要求政府制定打击 deepfake 成人视频的政策,以及表示会考虑将相关问题写入该国刑法。

,为了把De逆战辅助 epfake关进笼子 各大公司都拼了

相关:

再被吊销执业许可证 金准医学尝试室执照刚吊销凤凰网科技讯 6月1日消息,天眼查App显示,近日,北京金准医学检验实验室有限公司被北京市海淀区卫生健康委员会吊销《医疗机构执业许可证》。 处罚事由显示,该单位于2022年4月至5月在北京市区域化新冠病毒核酸检测过程中,未按照政府要求对10混1采样样本单管单检,擅自使用2管或3管混成1管检测,不服从突发事件应急处理指挥部的统一指挥,且情节严重。 此前,该公司被北京市海淀区市场监督管理局吊销营业执照,目前公司状态..

防未成年人陷溺做得怎么样?实测这六款网游原标题:防未成年人沉迷做得怎么样?我们实测了这六款网游近年来,关于未成年人沉迷网络游戏的话题日益受到社会各界的关注。如何有效地对未成年人进行防沉迷保护,始终是一个难题。“六一”国际儿童节到来之际,澎湃新闻对目前市场上流行的数款网络游戏进行了测试对比,以了解各大网游公司对未成年人玩家的保护力度。6款网游未成年人防沉迷机制测评结果。未成年人保护法第七十四条规定,网络产品和服务提供者不得向未成年人提供诱..

iPhone逃狱商铺建树者 起诉了苹果越狱曾是 iPhone 用户的一堂必修课,如今却已无人问津。日前,知名越狱商店 Cydia 起诉苹果,称苹果试图扼杀 Cydia 等第三方应用商店。第三方倒打一耙官方,堪称业界奇观,苹果和 Cydia,谁才是合理的一方呢?同人逼官方?事情始于 2020 年,Cydia 的创建者 Jay Freeman(又被称为 Saurik)向法院提起反垄断诉讼,称苹果“非法打压”包括 Cydia 商店在内的所有竞争对手。Cydia 商店因为无人问津,入不敷出,被 ..

iOS 16将在WWDC22发布 苹果官方预热神秘编码原标题:码上开场!iOS 16 下周 WWDC22 发布,苹果官方预热神秘编码“2022-0607-0100”IT之家 6月1日消息,Apple 官方微信公众号发文:“2022-0607-0100,这神秘编码是?” 6月7日凌晨1点,WWDC22 下周见。码上开场北京时间6月7日凌晨1点WWDC22 如约而至。苹果表示,WWDC22 日程现已公布,各项活动均将通过在线方式免费向全球超过3000 万 Apple 开发者开放。IT之家了解到,苹果今日公布了年度全球开发者大会日程,..

网易搞了个视频版知乎 可还没起飞就“折翼”了社交在互联网语境下一直以来似乎都有一种特别的魔力,更是吸引了各路英雄豪杰竞折腰,然而近年来在这一领域的诸多尝试,最终都没能撼动腾讯的地位。即便社交难做,退而求其次选择做社区来“曲线救国”,似乎是个不错的主意。顶着互联网行业的寒冬期,在2022年春季,阿里做了“友啥”、百度推出“嗨圈圈”,字节跳动带来了“识区”,甚至就连一向以佛系著称的网易也下场了。不久前,网易方面上线了一款名为“彼应”的社区产品,据..

动静称苹果一系列产物即将被列入过时产物名单原标题:消息称苹果 iPhone 4S、iPhone 6s / Plus (32GB)、iPad Pro 初代、Apple TV HD 即将被列入过时产品名单IT之家 6月1日消息,据 MacRumors 报道,苹果计划在6月底将第一代 iPad Pro 添加到过时产品名单中,该公司本周在分发给 Apple Store 和 Apple 授权服务提供商的内部备忘录中宣布了这一消息。第一代 iPad Pro自苹果上一次销售该产品以来已经过去了五年多,该产品成为“过时”产品。老式产品以..

1元钱 就能用NFC卡片实现全屋“半自动”前一阵子收拾房间,一个物件把我的思绪拉回了2020年。那年,小米发布了小米碰碰贴2,这个精致的 NFC 卡片,可以实现不少有趣的功能。作为老粉的我,第一时间就参与众筹。刚拿到手时,许多功能都仅支持小米10至尊纪念版,心想着等开放更多机型后再使用,没想到这一等,就是2年。被我遗忘了两年的小米碰碰贴 2两年过去了,如今的 NFC 卡片,又能玩出什么新花样呢?懒人目录1、不新鲜,但很好玩2、快捷指令 + 繁琐操作,一碰..

小米12 Ultra外不美观曝光:白陶瓷后盖+黑色皮质后盖新酷产品第一时间免费试玩,还有众多优质达人分享独到生活经验,快来新浪众测,体验各领域最前沿、最有趣、最好玩的产品吧~!下载客户端还能获得专享福利哦!随着小米在7月底宣布与影像大厂徕卡展开战略合作,首款新机(大概率小米12 Ultra)将于7月发布之后,关于该机的曝光越来越多。近日又有数码博主曝光了其试产样机的配色:经典质感的白陶瓷后盖,以及商务风十足的黑色皮质后盖。一提到有白色陶瓷后盖,相信米粉们都能长舒..

又一造车新势力赴港上市 创始人沈晖佳耦俩持股超30%6月1日消息,威马汽车在港交所提交IPO申请,联席保荐人为海通国际、招银国际、中银国际。截至招股书发布时,公司股权表透露,创始人沈晖王蕾夫妇共计持股30.82%,雅居乐集团持股6.46%,百度持股5.96%。招股书显示,威马汽车总收入由2019年的17.62亿元迅速增长51.6%至2020年的26.71亿元,并由2020年进一步增长77.5%至2021年的47.42亿元。相对应的销售成本为27.88亿元、38.35亿元和66.89亿元。威马汽车2021年电动汽车销量为44152辆..

又见币圈大热点闪崩 曾被质疑是旁氏圈套站长之家(ChinaZ.com) 5月30日 消息:继加密货币Luna在价值近乎归零后,又一币圈大热门闪崩!5月27日,“跑鞋”项目STEPN突然宣布清退大陆用户,引发项目代币GMT和GST价格跳水,一度跌幅近40%。不过,随着市场情绪有所缓和两个代币价格有所回升。据了解,STEPN是一款可以为你散步、慢跑或跑步支付费用的健身App。而想要赚钱,你先要购买他们的NFT球鞋。这个球鞋可不便宜,最实惠的售价也已超过7000美元。STEPN主要使用两种货币,..