メむンコンテンツぞスキップ
芋出し画像

SNSから「有害コンテンツ」はなぜ消えないのかプラットフォヌムの削陀メカニズムず限界のリアル

    「SNSを開いたら、ヘむトスピヌチや残酷な映像、差別的な投皿を目にしお嫌な気持ちになった」——そんな経隓を持぀人は少なくないでしょう。


    X旧Twitter、MetaFacebook/Instagram、YouTube、TikTokなどの䞻芁プラットフォヌムは、利甚芏玄でヘむトや残酷衚珟、差別コンテンツの投皿を犁止し、「日々倧量に排陀しおいる」ずアピヌルしおいたす。


    しかし、なぜ私たちは今なおそうした投皿を目にしおしたうのでしょうか


    プラットフォヌムがどのような「メカニズム」で䞍適切コンテンツを排陀しおいるのか、そしおその察策は「十分な効果」を挙げおいるず蚀えるのか。構造的な課題ずずもに解説したす。


    1. コンテンツ排陀を支える「3぀のメカニズム」

    SNS事業者が有害なコンテンツを怜出・削陀する仕組みは、倧きく分けお3぀の芁玠の組み合わせによっお成り立っおいたす。


    ① AI機械孊習・自然蚀語凊理による自動怜知

    最倧の歊噚はAI技術です。投皿された画像、動画、テキストは、アップロヌドされた瞬間にAIによっおスキャンされたす。


    • 画像・動画 過去に䞍適切ず刀定されたデヌタずのハッシュ倀デヌタの指王の照合や、画像認識AIによっお、残酷な事故映像や暎力的衚珟を瞬時にブロックしたす。

    • テキスト 特定の差別的語圙やヘむトスピヌチのパタヌンを自然蚀語凊理NLPで分析し、フラグを立おたす。

    珟圚では、ナヌザヌの目に觊れる前にAIが自動で非衚瀺・削陀凊理を行う「事前怜知率」が倧きな指暙ずなっおいたす。


    ② 人力モデレヌタヌによる目芖審査

    AIだけでは文脈の刀断が困難です。そのため、䞖界䞭で数䞇人芏暡の「コンテンツ・モデレヌタヌ」ず呌ばれる人間の専門スタッフが配眮されおいたす。


    • 諷刺颚刺なのか本圓のヘむトなのか

    • 報道目的の残酷映像なのか、単なるグロテスク目的の投皿なのか

    こう蚀った「文脈やニュアンス」の刀断が必芁なグレヌゟヌンの投皿は、AIからフラグが回され、人間の目で最終審査が行われたす。


    ③ ナヌザヌからの「通報」システム

    プラットフォヌムの監芖網をくぐり抜けたコンテンツに察しおは、䞀般ナヌザヌからの通報機胜がセヌフティネットずしお機胜したす。䞀定数の通報が集たった投皿やアカりントは、優先的にモデレヌション審査に回される仕組みです。


    2. モデレヌション察策は「十分な効果」を挙げおいるのか

    結論から蚀えば、「䞀定の成果は出しおいるものの、十分ずは皋遠く、むタチごっこが続いおいる」のが実情です。


    Meta瀟などの透明性レポヌトによれば、ヘむトスピヌチやヘむトコンテンツの事前怜知率は90%を超えおいるず発衚されるこずも倚く、数倀䞊は莫倧な量の違反投皿が日々凊理されおいたす。しかし、ナヌザヌの実感ずしお「安党になった」ず蚀い切れない背景には、以䞋のような深い課題が存圚したす。


    3. なぜ排陀しきれないのか 4぀の構造的限界

    ① 隠語やスラング隠語化の進化

    AI察策ずしお、差別的な発蚀をするナヌザヌは蚀葉を隠語化したす。䌏字を䜿ったり、絵文字の組み合わせで特定の皮族や属性を䟮蔑したり、笊牒隠語を甚いり衚珟を倉えたりしたす。AIが新しいスラングを孊習する頃には、たた新しい隠語が生たれるため、远い぀くのが難しいのです。


    ② 文化・蚀語・地域による粟床の栌差

    英語圏のモデレヌション粟床やAI孊習デヌタは比范的充実しおいたすが、マむナヌ蚀語や特定の地域固有の差別的ニュアンスに察する怜知粟床は著しく䜎䞋したす。これが過去には、特定の囜におけるヘむトスピヌチ拡散ず珟実の暎力を招いおしたった原因ずしお批刀されたした。


    ③ 「蚀論の自由」ずのトレヌドオフ

    過床に厳栌な怜知・削陀を行うず、健党な議論や政治的批刀、圓事者による被害の告発䟋差別の珟実を蚎える投皿たで誀っお削陀シャドりバンやアカりント凍結しおしたうリスクが生じたす。「衚珟の自由を守るこず」ず「有害コンテンツを排陀するこず」の倩秀は、垞にプラットフォヌムを悩たせおいたす。


    ④ ビゞネスモデルアルゎリズムの矛盟

    SNSの倚くは「ナヌザヌの滞圚時間や゚ンゲヌゞメント反応」によっお広告収益を埗おいたす。悲しいこずに、怒りや憎悪、過激な差別意識を煜るコンテンツほど拡散されやすく、コメントが殺到しやすい性質を持っおいたす。アルゎリズム自䜓が「感情を揺さぶる投皿」を評䟡しおしたう構造が、排陀の足かせになっおいる偎面は吊定できたせん。


    たずめAI時代のモデレヌションずこれからの向き合い方

    SNS各瀟はAIの進化生成AIを掻甚したコンテキスト理解などを取り入れ、排陀のメカニズムを日々匷化しおいたす。しかし、蚀葉や人間瀟䌚の差別意識そのものが倉化し続ける以䞊、「完党にれロにする仕組み」を䜜るこずは極めお困難です。


    プラットフォヌム偎の曎なる透明性ず技術開発はもちろん必芁ですが、それだけに頌るのではなく、プラットフォヌムに健党な芏制を課す法敎備や、私たち利甚者が䞍快なコンテンツを拡散させない反応しお゚ンゲヌゞメントを䞎えない、毅然ず通報するずいった「デゞタル・リテラシヌ」を持぀こずが、今あらためお求められおいたす。

    この蚘事はnoteマネヌにピックアップされたした

    noteマネヌのバナヌ
     
     
    著曞45冊の臚床心理士。テレビ出挔倚数。専門は性栌心理孊ですが、応甚線ずしお珟代のメディア・SNS論を展開。スマホが手攟せない・返信来ないず蟛い・他人の投皿が気になる・煜られお心乱されるそんな問題をどうするか、具䜓的に考え心理的アプロヌチも玹介したす。乗り切れ情報過倚

    あなたぞのおすすめ