Safety & Civility
Data Science
無作為化を行わずに市民コミュニケーションの因果効果を測定する
Author
Venue
AAAI ICWSM 2024
Abstract
オンライン上の社会的コミュニケーションを分析する際、礼儀正しさの因果的効果を理解することは極めて重要であるが、因果関係を測定することは困難である。A/Bテストやその他の無作為化実験は因果的効果を立証するためのゴールドスタンダードであるが、1) 実験において礼儀正しさのレベルを制御できないこと、そしてより重要な点として、2) 意図的に礼儀正しさのレベルを無作為化することに対する倫理的制約があるため、この設定では適用できない。 我々は、明示的な無作為化を必要とせずに、Robloxソーシャル3Dプラットフォーム上のオンラインコミュニティにおける礼儀正しさの因果効果を定量化する、新しい準実験的アプローチを開発した。この手法は、観察可能な履歴データにおいて、ユーザーをサーバーに割り当てる「マッチメイキング」プロセスに残存する不確実性を、準無作為化メカニズムとして利用するものである。 我々の分析によると、礼儀正しいコミュニケーションのレベルが高いサーバーにユーザーを割り当てることで、特定の体験においてエンゲージメント時間を最大1.5%増加させることが可能であることが判明した。同プラットフォームで毎月48億人時が費やされていることを考慮すると、これは毎月8,000人年を超える社会的交流の潜在的な増加を意味する。 さらに、この効果は非因果的手法では過小評価されている。準実験的アプローチは、無作為化実験によってユーザーに悪影響を与えることなく、オンラインコミュニティにおけるユーザー行動の因果的影響を測定する新たな道筋を提示するものである。
