【案例】
% p# ^! y! t" j$ q2 C E" @ 拒绝白人与亚洲人同框,Meta图像生成器的「歧视」,被人挖出来了
( N7 e7 A* v( T- SAI 生成工具的偏见何时休?
, x0 I) ?7 c0 ~' h3 J
. k7 Q; j0 x' c B0 c在人工智能构筑的世界中,AI 有时会像人一样存在着某种偏见或倾向性。比如对于大语言模型而言,由于训练数据的影响会不可避免地存在性别偏见、种族刻板印象,等等。
) K) [0 w2 k# ?7 P; i当然,这种偏见或倾向性在图像生成工具中同样存在。今年 2 月,谷歌 Gemini 被曝出拒绝在图像中描绘白人,生成大量违背基本事实(性别、种族、宗教等)的图片。
' j" f3 q/ u+ Y) J8 Y4 a6 W7 g2 z马斯克也被系统过分矫正了
4 b$ s: U( K& f1 \# ]- @近日,外媒 The Verge 的一篇文章指出,Meta 的 AI 图像生成器无法准确生成「亚洲男性和白人妻子」或者「亚洲女性和白人丈夫」这类图像,让人大跌眼镜。我们来看看怎么回事。
$ u6 a+ ?+ ^& q; S* N% u+ j
1 i5 V3 y, _, A# X/ S3 C4 NThe Verge 尝试使用了「Asian man and Caucasian friend」(亚洲男性和白人朋友)、「Asian man and white wife」(亚洲男性和白人妻子)和「Asian woman and Caucasian husband」(亚洲女性和白人丈夫)等 prompt,让 Meta 图像生成器生成对应的图像。 7 W; y* m0 D: R) B, A/ s
结果发现,Meta 图像生成器在多数情况下无法遵照 prompt 来生成图像,暴露出了它的某种偏见。 2 E8 _1 C: ]6 w: e9 Q5 p
图源:Mia Sato/The Verge
7 w0 f9 R5 I6 w4 @6 O8 e& Q不仅如此,调整文本 prompt 似乎也没有多大帮助。 + q- G1 F. D) l7 V7 J% E
当输入「Asian man and white woman smiling with a dog」(亚洲男性和白人女性带着狗微笑)时,Meta 图像生成器给出的都是「两个亚洲人」的图像。即使将「white」改为「Caucasian」时,结果同样如此。
( m0 {# N, Q" ?6 z1 V5 R1 l机器之心自测图像 / [' \- t5 a+ b( N) T% a
当输入「Asian man and Caucasian woman on wedding day」(婚礼上的亚洲男性和白人女性)时,生成的依然是两个亚洲人。 & R; m7 U) j8 s4 P
婚礼上的亚洲男人和白人女人。图源:Mia Sato/The Verge
2 f2 k# R4 @ e: @6 E当输入「Asian man with Caucasian friend」(亚洲男性和白人朋友)或「Asian woman and white friend」(亚洲女性和白人朋友)时, 生成的大多数图像仍是两个亚洲人形象。 ( D' o7 u8 J/ T. J. {+ C6 d$ o
+ s2 l( N6 T. N
自测图像 6 `, J( f2 C. s4 J( |
当输入「Asian woman with Black friend」(亚洲女性和黑人朋友)时,Meta 图像生成器仍是两名亚洲女性。但当将 prompt 调整为「Asian woman with African American friend」(亚洲女性和非裔美国朋友),结果反而准确得多。 , y" J# d, R" i. X; X
! ^; X4 n8 h( h! p4 i6 Q) c9 G
" Q" X6 l0 {$ _/ p, V* D7 Q: J
自测图像
# ~9 b# b- w4 V" P+ i此外,当指定南亚人时,Meta 图像生成器的结果变化也不太大。当输入「South Asian man with Caucasian wife」(南亚男性和白人妻子)时,大多数时候是两个印度人形象。该工具还有刻板印象,在没有要求的情况下,生成的南亚女性往往会穿戴纱丽。 4 m. l+ R( `# T, n5 A7 m# B
/ a6 _( |5 D8 x5 t3 t) p- Z
自测图像 ! U0 }# ^8 b0 J) f: c) n9 m1 ?' v8 y
一番测试发现,Meta 图像生成器无法想象亚洲人与白人「同框」,这样的结果令人震惊。其中,该工具始终将亚洲女性或男性描绘为肤色浅的东亚人,尽管印度已经成为世界上人口最多的国家。在没有明确提示的情况下,该工具还会添加特定文化服饰。
5 p& r$ V5 S5 ]4 r _最后,机器之心使用类似的 prompt 验证了 The Verge 的结果,对于 prompt「亚洲女性和白人丈夫」,生成的 10 张图像中,只有 3 张图像准确还原。
d3 y( |& L2 ?1 d) W* t
* p, q$ @5 z! |# K, M% i* h5 B& s5 m, I4 [* s* E* J' \
输入 prompt「asian man and caucasian wife」(亚洲男性和白人妻子),结果更离谱,生成的 8 张图像没有一张还原。
+ Y# I0 P3 ], c/ _' f4 F/ h+ _+ w
1 Z) b7 j4 y; U4 y$ `$ _" t0 E其实,这并不是 Meta 的图像生成工具第一次被曝出问题了。去年 10 月,Meta 的 AI 生成贴纸工具创建了大量不恰当的图片,比如童兵、持枪和拿刀的米老鼠等暴力、粗鲁、裸露形象。 ! T! q- }( b& _9 Z5 A, y8 `/ `
图源:arstechnica and meta
+ }, ~) w3 }& r/ V; j! V5 [此次,Meta 图像生成器再次让我们警醒 AI 系统创建者、训练者以及所用数据集可能存在的偏见和刻板印象。
( [' Q; I2 ] s( W9 C对于 The Verge 发现的这一现象,有网友分析称,这是 Meta 在训练的时候没有喂给模型关于这一场景足够的示例。
. `( d$ ]! i9 A+ q: [! W: X F" ?: R2 c N+ s7 U3 e
你觉得呢?
* u" |2 T7 q- v/ T% y9 h" t2 t1 {
+ T4 Q6 W4 a* b' ^4 y
o/ L. v4 ~( g7 l
8 N/ [* i# L& X" O5 d+ w
/ U3 p* O$ ?$ f2 ^( m2 F
- d1 u: l' O3 J( S4 H9 h |