净网特工

内容审查员就像是一名狙击手，我们的目标是违反应用程式规定的用户。 我妈妈总是告诉我，如果不好好读书，就只能跟她一样当个拾荒者，他们依赖捡垃圾为生，这是他们唯一知道的谋生方式。我害怕自己将来只能留下来跟着捡垃圾，这也是促使我用功念书的一个原因。 2016年1月，我画了一张男性器官很小的川普画像，叫做“让美国再次伟大”，它立刻爆红，数百万人在许多社群平台上疯传，几天后川普在竞选辩论中提到自己的器官尺寸，我记得有朋友打电话告诉我说，是你让川普在辩论中透露他的器官大小吗。 作为内容审查员，你必须要有原则，是你在决定人们是否该看到某张图片，所以头号重大错误就是批准裸照、 和女性胸部、男性器官，这没有容忍的余地。 一个虚构的作品，它并不暴力，也无关性爱，它只是一个人的裸体配上川普的脸，不懂为何人们会觉得人的裸体这么恶心。 这工作真的不好做，但最后却成了带罪恶感的乐趣，感到罪恶是因为我居然在看这样的东西，乐趣是因为我现在很享受看到的内容。 脸书基本上就是一家科技公司，有许多工程师经营，它重视自家产品，重视公司设施，它重视发展规模，重视用户体验，但它不是一家媒体公司，它不会考虑到内容或内容创作，或是内容编辑和审查的事，这些事并不在它的基因里面，只要脸书碰到有人说，“嘿，你们要为这内容负责的时候，他们的答复会是，‘哦，我们只是搞数学的，我们只负责写演算法，去提供你们想要的东西，我们不干涉编辑’”，但政治现实是在川普之后，在英国脱欧之后，这样的说法已经不行了，我们现在在一个点上，只要大众不接受现状，在某些点上政府就会立马介入，我认为脸书是了解这情况的。 YouTuBe一直希望能够跨越国界，因此从2007年左右，我们遭遇许多被封锁的情况，当土耳其政府不知如何与你取得联系时，他们索性关闭你在该国的服务。我们花了一段时间才弄清楚，是什么令他们感到不舒服，我们最后终于设法掌握了令他们不开心的特定影片，其中有些是关于凯末尔，有些则是他们声称违反土耳其法律的恐怖主义影片。我记得有一天我在凌晨两点，审查令土耳其政府感到不快的67个影片，从中做出哪些应该删除，哪些应该留下的决定，有个重点是对于一些影片来说，它们其实没有违反社群准则，所以一般不会从平台移除，可是却触犯了土耳其的法律，所以我们决定对土耳其用户采取IP位置封锁，土耳其用户将无法看到这些影片，我不喜欢这种解决方式，但这就是我们的做法。 街上聚集了许多了不起的人，警方在这里部署的人数相当多，我很好奇他们会在这里待多久，因为我知道只要他们一撤离，人们就会开始干架。 一些左派人士认为你政治不正确，我们这群人拥有枪支、子弹，受过训练，只要我们开始开枪射杀，我相信所有的赃东西很快就会消失。 人性归人性，而科技就只是种中性工具，并没有助长任何东西，但事实并非如此，因为科技确实存在偏见，偏见就是它实际追求的一个目标，那个目标就是什么才能得到最多人的关注，什么才能吸引数十亿人，成功转移他们的注意力，并且保持下去。 这项工作会损害你的大脑，让你觉得暴力是正常的，让你认为杀人，轰炸是正常的。 我不能让影片影响你，但这因人而异，有些人就是会受到画面的影响。 我突然自己，为什么要做这份工作，只是为了让人们认为上网是安全的，事实上在你的日常工作中，上处都是危险，我们在奴役自己，我们应该从麻木中觉醒，因为这并不安全，我们应该正视现实。 选择希望而非恐惧这需要勇气，期许我们可以建立比过去更加良好的环境，你必须乐观的认为你可以改变世界，我们投身其中，每一次都是一种联系，每一次都是一种创新，日复一日，日复一日，这就是为什么我认为我们一起投入的工作，现阶段比以往任何时候都重要。

“我觉得这项工作本事的存在就是一个秘密” 冲击性内容具有其绝对重要的含义这不仅仅关于ylzj的范畴 我是支持一定限度的审查许多不适内容对价值观未建立的小孩来说是很有破坏力的但一定是有限度的而我们是没有限度的除此之外任何言论都应该允许存在否则你是在歧视民众的受教育程度而受教育程度是你决定的这个电影应该使用中国社媒的素材不能因为“因为你是一时的不冷静而说出的不严谨的话就煽动的仇恨情绪导致最终却mz受害”而否认ylzj的重要性你认为你很道德你是在助纣为虐

#一百部纪录片计划#002《网络审查员》

几个事实：

1、网络世界，是一个虚拟世界，它并不是现实世界的本真反应，更像是一个基于现实世界某点的放大镜或者哈哈镜。网络平台，无论是社交媒体、视频网站或者搜索引擎呈现出的内容都是经过筛选和审查的。通过网络看到的世界，是带着滤镜或者有色眼镜看到的世界，但很多人以为现实就是如此，这是一种幻觉。

2、硅谷科技巨头，脸书、推特等，包括国内的字节所宣称的技术和算法中立，是一种谎言，因为这些平台的商业模式是广告模式，获取更多的用户、更多的转发和关注是他们的目的，这必然导致算法推荐带有诱导更多观看和分享的基因，刺激情绪的内容，加强极端言论的内容会有可能获得更多的推荐和传播，算法中立本身是不可能的，正如脸书的产品经理所说，脸书事实上对美国内部极端意见群体的对立冲突，起到了推波助澜的作用。

几点值得思考的问题：

1、如果网络反应的不是一个真实的世界，真实的世界，有善恶美丑，网络为了限制罪恶的扩散和影响，需要把色情、暴利、恐怖等内容进行审查删除。

那么如何界定内容的标准？艺术图片与色情图片、战争新闻与恐怖影像，邪教与神学……如果确定审查的标准与界线？

2、谁有权力制定审查的标准和界线？平台的审查标准和不同国家的法律标准是否足够公开透明？

3、执行审查工作的人的心理健康如何保护？

就如片中展示的，一个人每天2.5万张图片，几乎每个审查员每秒就要审查一张图片，其中会有大量传播色情、罪恶的内容，他们过量摄入了这些恶的东西，就像毒素一样侵入他们的大脑和心灵，冲击着他们对世界真善美的信念，有的人需要通过信仰上帝，用宗教来安慰自己的罪恶感，有的人变得麻木，有的人看了太多自残视频，过于悲伤，申请调岗而不得，最终抑郁自杀……

这些菲律宾的审查员为了相对当地较高一些的收入，以牺牲自我心灵为代价，在“保留、删除”的程序工作中异化自己、奴役自己，在自我美化、自我救赎和自我毁灭中挣扎，这是一份残酷的工作！

很有意味的一点在于，这种残酷的工作以第三方外包的形式存在于发展中国家，而硅谷只是宣称连接美好…就像一个事物的光与影，光辉留给了硅谷与科技创新者，暗影留给贫穷国家的打工者。

作為一個威權體制下的網民，看完這部紀錄片的第一感受便是：隔靴搔癢，過於浮泛。

社交媒體上出現的種種問題，其實也就是現實世界的反映。色情/血腥/恐怖組織/政治，每一個議題下都可以分化出無數的觀點與立場。紀錄片試圖用不到一個半小時的體量，以網絡審查員為主要視角進行全方面的探討，注定只能泛泛而談。

但我確實欣賞導演對不同立場的同等尊重。理论的说法叫做：“兩面說辭”。

對於色情的判斷標準。是藝術還是淫穢？

對於恐怖組血腥視頻的判斷標準。是非法傳教還是真實歷史記錄？

對於社會災難真實記錄的容忍度標準。是新聞的真實要求還是對苦難者的二次剝削？

對於不同政治觀念/仇恨言論的容忍標準。是憲法給予的言論自由保障還是民主社會的底線堅守？

不同人站在不同的立場與坐標，自會給出不同的答案。正如影片中所說：背景與身份決定了思維方式。而社交媒體這個平台無非是為不同立場、不同觀點的交鋒提供了舞台。平台背後商業資本、政治權力、民眾影響且深深塑造著社交媒體。

科技公司為了利益，會不斷滿足民眾的個性化需求進行算法推算，由此進行的信息推送最終造就信息茧房。民眾接受的信息內容越來越狹窄，加之同溫層相互抱團取暖，觀點自會越來越極化。

但我其實認為這樣的說辭有些高估了民眾的自主權與選擇空間。真正掌握且控制信息的還是那個無形的手。為了政權的穩定，可以要求科技公司進行IP鎖定，限制特定內容的瀏覽。自然也可以直接建造一個全球最大的局域網。以保護民眾之名（更多時候的常見話術是為了保護下一代）剝奪本可以擁有的自由。殘酷而又現實的未來構想“數字極權”，或許正在一步步到來。

我喜歡影片最後那位辭職的審查員說的那番話：不要逃避，不要麻木自身。

現實本身的苦難與黑暗是刪除不了的。（但我支持的是有底線的自由空間，並非放任自流）呆在一個溫良且無害的環境之中，會影響個體批判性思考能力，挑戰能力的訓練，逐漸縮緊自身表達的空間，放任民粹思想的氾濫。個體被迫或者無意識地逃避現實，逃避了公民所需承擔的責任。與此同時，語言本身也遭到了殲害。

只有在大量信息獲取的前提下，才能進行相對有效的信息判斷與審視。在簡體中文信息這個極其糟糕的環境下，一味地聽信與一味的不聽信，都是糟糕的能力體現。（孫楊一事的輿論風向轉變是極其具有參考價值的控制案例。足以以小見大。）（好像話題扯遠了orz......

說回正題來，對於影片中的審核員我內心十分同情，領著不高的薪金，每天都得直面黑暗與血腥。

但對於第三帝國的審核員，秉著一個沒有來由便被炸號的人的立場，我只能勉為其難的認可他們作為一顆不鬆動的螺絲釘所作出的努力。可轉念一想吧，我能體諒他們，誰來體諒我？

紀錄片裡提到的問題一時半會兒也解決不了。思想本來也無法統一，唯一要做的是建立一個文明包容的互聯網空間。全球都在右轉，樂觀的來說：或許此次疫情能成為契機，讓大家重新意識到全球化的重要性。開放包容的精神還能得到提倡。但悲觀的來說，歷史不會一直前進，要做好止步不前甚或倒退的準備。（或許在這個時候成為一顆第三帝國的螺絲釘不失為個體的良好選擇🌚（對不起，俺又在陰陽怪氣了

[纪录片赏析课作业01]

delete... ignore...

That's the two actions that a content moderator does every day.

"I protect the user who uses the app", said one of the moderators, as the president tried to protect his people by killing all the criminals.

"One of the misconceptions is that human nature is human nature, and then technologies are just useful tools: it's not amplifying anything - but this is not true, because technology does have a bias, and that bias has a goal, it's actually seeking a goal, it's the goal it's seeking that what will get the most number of people's attention, what tends to work on billions of people that's successfully attracting their attention out of that, and keep it; and not just getting their attention but getting them to share things, and so it turns out that our rage is actually good at doing so"(Cleaners, 2018, 1h6m).

“I sacrifice myself, yes, there will always be sacrifices, it will always be a part of life... it's my job to prevent the sinful images, I'm a preventer“(1h21m)

我们还上不了脸书呢

上周，我找到了一张《感官世界》的稀有海报，想把它发布在微博上。

可是，怎么都发布不出来，关键是这张图片并没有露点。

既然不能在微博上发布，那我是不打算在文章里贴出这张海报了。

你们也别去豆瓣上找了，没有，我也没有上传的计划。

当然，写这些不是为了显摆我发掘海报的能力。

我是对于微博上对于图片是如何审核的机制比较好奇。

大家应该有过这种经验，发布在微博上、豆瓣上、B站上、百度贴吧上的内容被删的情况。

不管是因为人工审查，亦或是因为别人举报。

困惑、震惊、愤怒，“为什么删我的东西，我发的内容没什么违规啊”，这应该是大家的第一反应。

我除了好奇这些审查机制外，更好奇这些机制背后的人。

也就是这些网络审查员。

《网络审查员》

先把时针拨回到2013年3月23日，在脸书上有一条视频，视频的内容是关于儿童性暴力。

在视频下架之前，它已经有了超过4000次的分享，以及数不清的评论。

这条视频引起了导演汉斯·布洛克和莫里茨·赖斯维克的关注。

为什么这种事情会发生？为什么这些网站没有及时地进行处理？

这个就是《网络审查员》的缘起。

01

这是一群隐形的人

菲律宾，马尼拉，一间办公室。

经常传出“忽略”、“忽略”、“删除”、“删除”的声音。

坐在电脑前的人目不转睛地盯着屏幕上频频闪过的图片、视频。

这些图片与视频包含着大量暴力、血腥、色情的讯息。

他们就是谷歌、推特、脸书等社交媒体雇佣的网络审查员。

上面就是这些网络审查员的日常工作。

他们的工作不能对外讲，甚至连工作本身都是秘密。

他们看似是为互联网三巨头工作，实际上，他们所在的公司只是外包公司，他们的工资也是由外包公司来发。

每天有2万5千个指标，意思就是他们要删除2万5千条不良信息，每一天。

想想一下让一个普通人每天看虐杀、色情、暴力，他会变成什么样。

但是这些审查员必须要看，因为这是他们每月的KPI指标。

他们可以选择跳过一些引起他们不适的视频，如果被发现业务评分就会扣分，他们每个月只有三次的机会。

他们家境的贫穷也不允许他们放弃工作的机会。

要么读书，要么捡垃圾，对于来自社会贫困阶层的他们而言，选择就是如此残酷、简单。

每天都要穿过垃圾山、趟过垃圾海去上班，他们有一家子要养，他们必须珍惜工作的机会。

她，在审查期间看过一个儿童性暴力的视频，让她震惊不已。

她很痛苦，但却不能辞职，因为她签了约，只能硬着头皮接着干。

虽然杜特尔特政府宣称,从2018到2022年，菲律宾经济规模要扩大50%,并要迈入中高等收入国家的行列，但是菲律宾的贫富差距依然悬殊。

富人吃肉，穷人吃土。

这些来此贫困村庄的审查员们，咬着牙也想挺过来。

有些情况，并不是咬牙挺一挺就能解决的。

其实几年前，我就看过一篇关于推特公司审查员心理健康问题的外文文章。

文章就讲，这些审查员工作了几个月之后，都要接受心理辅导。

就像片中出境的几位工作人员。

在直面人性丑恶之后，他们的心理健康状况都很糟糕。

她，每天都要接触大量的色情视频。为了判断一个视频是忽略还是删除，她必须了解各种性方面的术语。

她在家看了大量的A片，还经常去逛性用品店，每晚都会做各种丁丁的梦。

用她的话讲，既有罪恶感，也有羞羞的快感，甚至还看上了瘾。

一个清纯少女就这样变成了一个老司机。

她这种情况还算轻的。

他，看过几百遍斩首视频。

次数多到，仅仅凭着尸体身上的切口，他就知道尸体是用小刀割的，还是大刀砍的。

麻木，看到了麻木。

当麻木累积到阈值的时候，就是他们崩溃的时候。

片中一位审查员，生前是负责审查自残视频，看过了数不清的自虐视频后，在家上吊自杀了。

没有人关心他们的心理健康。

02

审查的标准是什么

关于网络内容的审查本身就是一个悖论，如何在追求言论自由的前提下，又能保证言论的自由不会危及到我们自身。

这世界上没有一个人不想追求言论自由，但是要付出的代价呢，怎么办？

单单靠我们自身的批判性思维，举世浑浊唯我独清,众人皆醉唯我独醒？

戴维·凯伊，联合国言论自由特别报告员是这么说的。

他觉得对于言论自由设限，会导致民众获得越来越少的信息，以至于尖锐意见会从网络上销声匿迹。

那为什么现在网络暴力越来越严重，互相仇视的情绪越来越高涨。

这问题到底是出在谁的身上，真的是这些社交平台监管不力，是我们被这些社交平台诱导？

答案是非常复杂的。

对么？对，但是这个对也有预设条件。

什么问题都不可能只有A与B两个面，我们也不能也二元论来看待问题。

一个平台该如何判断该如何审查一张图片、一段视频。

一个平台认为是危险的消息，在另一个平台可能认为其具有新闻价值。

黄安娜，前谷歌/推特法律负责人举了一个例子。

萨达姆在被处决的时候，有人把视频发到了油管上，网上一共有两段视频，一段是萨达姆被处以绞刑的视频，一段是萨达姆的尸体。

这样一来，就要决定到底是该留哪一段视频，他们最后选择了萨达姆被绞刑的视频，因为这段视频具有历史价值。

而这样就带来一个问题，如果审查员不知道图片、视频的背景信息，该如何决定是该忽略还是删除。

审查员因为不知道背景消息误删的情况，也很常见。

不仅仅是这样，每个平台都要自己的标准。

像下面这张越战的著名照片。

它就因为涉及了未成年裸露而不符合规定。

对于这些审查员来说，最严重的的失误，就是疏漏裸体内容。

03

到底为谁所用

就算一个审查员每天能处理25万条违规信息，但是每天脸书、推特上还是会有海量的信息流出现。

再说，不论是人工智能识别还是人工识别，这种机制都是被动的。

社交媒体是带来了恶，还是引爆了恶？

每个人使用社交平台的目的各不相同。

美国艺术家伊尔玛·戈尔画过一张特朗普的裸体画，并把它放在了自己的脸书上。

引发了网络上的广泛讨论。

甚至特朗普本人都在白宫发言的时候，都讨论过自己的尺寸没有那么小。

现在的社交媒体已经可以强大到可以干预到国家领导人的发言。

NGO的成员，会在网络上收集视频，在视频被删除之前，先把视频保存下来。

对于他们来说，存档非常重要。

他们把这些视频收集起来后，发布在油管上。

他们用这方式记录战争，以此来让人了解战争的残酷，从而达到反战的目的。

来自叙利亚的艺术家，会把自己的创作放在脸书上，表达自己的政治观点。

美国右翼活动家，在社交平台上发表对于难民问题的观点，一口一个绿绿、臭大粪。

也会在游行示威上做直播，表达自己对于左派的不懈。

现在的言论自由已经被曲解了，人人都相信自己认为的真相。

就像片中提到的，自从特朗普上台以后，美国政治两极化日趋严重，左派与右派都不愿意对话。

这么一来，罪魁祸首就是脸书？是脸书有意识地发挥了推波助澜的作用?

没人能够回答。

最后就用脸书创始人扎克伯格在一次发布会上说过的一段话做结吧。

选择希望、克服恐惧，需要有勇气。

说我们能做出前所未有更好的东西。

要想改变世界必须保持乐观。

每一次我们连接网络、每一次创新，日复一日前进一小步。

所以我认为我们的共同努力比任何时候都重要。

- FIN -

公众号：小鲜电影（xiaoxianmovie）