我们帮助保护 Snapchat 用户的安全的工作
2024 年 10 月 4 日
Snap 不断改进我们的安全机制和平台政策,以限制不良行为者滥用我们平台的能力。 我们利用先进技术来检测和阻止违反我们规则的活动,我们采用设计原则在好友关系过程中制造摩擦,我们支持执法部门,与政府当局合作,并努力提高人们对影响青少年以及我们社区所有成员的最严重危害的认识,并提供教育。
我们非常重视保护青少年的责任。 我们的工作量很大,包括以下内容:
I. 将 Snapchat 变成对不良行为者的敌对环境
今年早些时候,我们宣布了新的功能,以帮助进一步保护我们的社区,特别是青少年用户,并加强使 Snapchat 独一无二的现实世界关系。 这些更新包括:针对敏感联系人的扩展应用内警告、专门为青少年构建的增强好友保护,以及提高拉黑不受欢迎的联系人的能力。
这些更改专注于打击网络勒索,基于我们持续进行的投资,以打击一切形式的儿童性剥削和虐待。 例如:
我们使用信号来识别性勒索行为,以便在不良行为者有机会针对和伤害他人之前,我们能够主动清除不良行为者。 此外,还利用和部署旨在防止在 Snapchat 上传播已知的儿童性剥削和虐待图像 (CSEAI)的技术,包括 PhotoDNA(用于检测已知非法图像的复制品)、CSAI Match(用于检测已知非法视频的复制品)、以及内容安全 API(用于检测“从未被哈希”的新奇图像)。
虽然我们长期以来一直提供简单的应用内举报违反我们规则的内容和帐户,但在 2023 年,我们进行了改进,以加强我们对与性勒索相关的伤害的打击。 去年,我们推出了应用内聊天文本举报,这使 Snapchat 用户能够直接从对话中举报个人消息。 我们还扩展了我们的应用内举报工具,包括为性勒索提供一个特定的、量身定制的举报理由,并根据打击CSEA 的非政府组织 Thorn 的建议和指导,以为青少年和年轻人以相关的语言提供该举报选项(“他们泄露/威胁要泄漏我的裸体”)。 反过来,这些报告用于为我们的执法工作提供信息,包括基于信号的检测和执法。 我们监控趋势、模式和性勒索者的技术,如果帐户表现出某些特征,则会因性勒索而被锁定。
我们继续改进和添加于 2022 年发布的家庭中心工具套件,家长可以在此处查看他们的孩子在 Snapchat 上和谁是朋友,他们最近与谁聊天,并轻松举报他们可能关注的帐户。 我们的家庭中心的目标一直是促进在父母监护人和青少年之间就保持网络安全进行公开和积极的对话。
我们与执法部门密切合作,并投入大量资金投资于全球全天候运营的安全和执法运营团队,以帮助确保我们社区的安全。 例如,自 2020 年以来,我们的信任和安全团队的规模增加了一倍以上,而我们的执法团队的规模在此期间增加了两倍以上。 我们每年在美国举办执法峰会,以确保官员和机构知道如何采取适当行动,打击可能在我们平台上发生的任何非法活动。
我们还直接与尼日利亚的执法部门合作(许多性勒索案件起源于尼日利亚),以建立调查和起诉犯罪者的能力和知识,并且我们计划继续与尼日利亚政府合作,以在这一领域进一步合作。 我们与国际正义使命团、NCMEC、其他行业成员和非政府组织合作,在美国以外性勒索活动盛行的国家为执法部门提供调查 CyberTip 的培训。
多年来,我们还与一群强大的“可信举报人”合作,这些组织包括非营利组织、非政府组织和特定政府机构,这些机构通过高优先级渠道代表有需要的 Snapchatter 向我们举报虐待案件、迫在眉睫的生命威胁以及其他紧急问题。 我们的可信举报人计划中的大多数参与者都会举报针对未成年人的与性伤害相关的内容和帐户,包括性勒索。
II. 与行业专家和联合体互动
除了我们自己的调查,我们还与全球各地的专家互动,因为我们知道没有任何一个实体或组织能够单独有意义地推进这些问题。 例如,Snap 在 WeProtect 全球联盟的国际政策委员会中代表整个行业;我们是INHOPE咨询委员会成员,并且是英国互联网观察基金会 (IWF) 董事会成员。 所有这些组织的核心任务都是根除线上 CSEA。
我们仍然是科技联盟的活跃成员,这是一个专注于打击线上网络儿童性剥削和虐待的全球行业联盟,最近在其董事会执行委员会结束了一个为期两年的任期。 我们也是科技联盟的 Lantern 计划的创始成员,这是第一个跨平台信号共享计划,用于公司加强执行儿童安全政策的方式。 通过积极参与此计划,公司可以相互帮助,交叉检查对方的不良行为者,包括性勒索者。
此外,我们利用全国失踪和受剥削儿童中心 (NCMEC) 的Take It Down数据库,允许未成年人直接在他们的设备上生成称为“哈希”的数字指纹,其中包含选定的图像或视频。 然后,参与公司(包括 Snap)可以使用这些资料来查找和删除违反我们社群指南的重复图像。 我们参与了一个在英国名为“举报删除”的类似计划,去年,我们加入了 SWGfL 的 StopNCII 合作项目,通过利用该集团的哈希数据库,帮助防止非自愿的亲密图像 (NCII)在 Snapchat 上传播。 StopNCII 帮助阻止 18 岁以上者的亲密图像的传播,并为受害者提供收回他们最私密照片和视频隐私的能力。
今年,我们还推出了首届 Snap 数字健康委员会,由来自美国各地的18名青少年组成,他们被选中参与为期一年的试点计划,在他们的学校和社区倡导更安全的网络习惯和做法。 7 月,这个群体在至少一名家长或监护人的陪同下,聚集在加利福尼亚州圣塔莫尼卡的 Snap 总部,就网络陷阱、社会动态以及家长工具等话题进行了讨论,并提出了有趣的见解。 此外,Snap 的安全咨询委员会由16名专业人士和3名青年倡导者组成,他们在安全问题上向 Snap 提供直接指导和方向。 我们期待在 2025 年,为两个群体的成员创造更多的机会,让他们走到一起,挖掘出更多的见解。
III. 提高意识
除了我们的内部调查以及我们与专家和跨行业合作之外,打击线上性虐待和性勒索计划的关键组成部分正在提高公众和 Snapchat 用户的认知度。
2022 年,我们推出了行业领先的 数字健康指数,深入了解青少年和年轻人在所有平台上的上网情况。 作为这项研究的一部分,在过去的两年中,我们深入研究了性勒索。 由于这项研究一般涵盖线上体验,而不仅仅是 Snapchat ,它不仅有助于为我们的工作提供信息,而且我们希望它能为整个科技生态系统的其他人提供见解。 本月晚些时候,我们将分享我们第二年性勒索深度活动的结果,以及技术联盟即将举行的关于未成年人性勒索的虚拟多利益相关者论坛。
今年早些时候,我们很荣幸成为第一个支持 Know2Protect的实体,这是一项由美国国土安全部 (DHS) 今年早些时候推出的首个公众意识活动。 该活动旨在教育年轻人、家长、值得信赖的成年人和决策者和赋予其权力,以帮助预防和打击性勒索等犯罪。 除了在 Snapchat 上捐赠广告空间以获取 K2P 教育资源之外,我们还对美国青少年和年轻人进行额外研究,以进一步为这项活动提供信息。 我们还共同推出了一款增强现实 Snapchat 特效镜头,通过可互动的 Know2Protect 测验来帮助教育 Snapchatter。 在英国,迄今为止,我们支持 IWF 围绕这些问题开展的广泛公众意识宣传活动,Gurls Out Loud,旨在向 11 至 13 岁女孩宣传网络儿童性诱骗、性短信和发送裸体的信息。 此外,我们最近推出了一份针对 Snapchat 的教育工作者指南,与 Safe and Sound 学校合作,为教育工作者开发一个全面的工具包,其中包括有关如何打击性勒索的信息和指导。
基于我们多年的研究,我们知道提高认识和社区教育是帮助防止网络伤害的有力工具,并且我们继续开发和推广应用内资源,以便直接在 Snapchat 上接触青少年和年轻人。 2023 年 9 月,我们发布了四个新的应用内“安全性 Snapshot ”短片,重点关注性风险和伤害,包括性勒索。 我们还提供有关性短信以及制作和分享裸体的后果、为性目的而进行的儿童性诱骗以及儿童性走私的短片。 所有这些资源均由美国国家失踪和受剥削儿童中心 (NCMEC) 的专家审查,并与主要地区的相关热线和求助热线合作创建。
我们继续打击网络儿童性剥削和虐待,但仍有更多工作要做。 2025 年,我们将继续提高人们对潜在网络危害的认识,并继续重申任何人都可以成为潜在目标。 我们希望尽早并经常地破坏和阻止不良行为者,并且我们希望为执法部门提供更具可操作性的 CyberTip。
重要的是要注意,我们采用许多相同的策略来打击其他恶劣的伤害,例如非法毒品活动,包括销售假药、暴力威胁以及自杀和自残内容。 我们意识到,我们在这个领域的工作可能永远做不完,但我们深切关注 Snapchatter 的安全,并将继续与整个行业、政府和执法部门协同工作,以交换信息并加强我们的防御。