بدأ شاب يدعى كاي في عام 2022 تصفح الإنترنت من خلال هاتفه، وقال إن أحد أول مقاطع الفيديو التي شاهدها على منصات وسائل التواصل الاجتماعي كان لكلب لطيف، ثم تغير كل شيء بعد ذلك.
وأضاف الشاب، الذي كان يبلغ من العمر وقتها 16 عاما، أنه “فجأة وبدون سابق إنذار” أُدرج حسابه ضمن حسابات يوصى لها تلقائيا بعرض مقاطع فيديو لشخص صدمته سيارة، أو مشاركة من مدوّن يتحدث فيها عن آراء معادية للنساء، ومقاطع أخرى تتضمن مشاهد عنف، وسأل نفسه، لماذا اختاروني لمشاهدة ذلك؟
وفي دبلن، كان أندرو كاونغ يعمل محللا في خدمة سلامة المستخدم لدى تطبيق تيك توك، وهي وظيفة شغلها لمدة 19 شهرا من ديسمبر/كانون الأول 2020 إلى يونيو/حزيران 2022.
ويقول إنه وزميل آخر قررا فحص المستخدمين في المملكة المتحدة ممن أوصت لهم خوارزميات التطبيق، من بينهم بعض الأطفال الذين تبلغ أعمارهم 16 عاما، بمشاهدة مواد معينة. وقبل فترة من عمله لدى تيك توك، كان يعمل كاونغ لدى شركة “ميتا” المنافسة، التي تمتلك تطبيق “انستغرام” وهو موقع آخر يستخدمه كاي.
ويقول كاونغ إنه خلال الفترة التي عمل فيها في تيك توك، لم يراجع الذكاء الاصطناعي جميع مقاطع الفيديو التي لم تُحجب أو المُبلغ عنها للمشرفين البشريين، وأيضا لم تُراجع تلك المُبلغ عنها من مستخدمين آخرين للمشرفين، بطريقة يدوية إلا إذا وصلت إلى حد معين.
وتقول شركة تيك توك إن 99 في المئة من المحتوى الذي يحجبه التطبيق يكون بسبب انتهاك قواعدها ويُحذف بواسطة تقنيات الذكاء الاصطناعي أو المشرفين البشريين قبل أن يصل إلى 10 آلاف مشاهدة.
وتضيف أنها تفحص مسبقا مقاطع الفيديو التي تقل عن هذا العدد من المشاهدات.
ويضيف أنه في الوقت الذي كان يحجب فيه الذكاء الاصطناعي معظم مقاطع الفيديو أو تلك المُبلغ عنها للمشرفين، اعتمد الموقع على المستخدمين للإبلاغ عن مقاطع فيديو أخرى بمجرد مشاهدتها بالفعل.
ويقول إن ذلك أثار مخاوف أثناء عمله في كلتا الشركتين، بيد أن الأمر لم يحظ باهتمام بشكل أساسي بسبب مخاوف تتعلق بحجم العمل المطلوب أو التكلفة.
ويضيف أنه تيك توك وميتا أضافتا بعض التحسينات لاحقا، مشيرا إلى أن المستخدمين الصغار، مثل كاي، ظلوا معرضين للخطر في غضون ذلك.
وتقول الهيئة التنظيمية للاتصالات في المملكة المتحدة “أوفكوم” لبي بي سي إن خوارزميات جميع شركات التواصل الاجتماعي البارزة توصي بمحتويات ضارة للأطفال، حتى لو كان ذلك بدون قصد.
وتقول ألمودينا لارا، مديرة تطوير سياسة السلامة على الإنترنت: “غضت الشركات الطرف عن ذلك، وتعاملت مع الأطفال كما تتعامل مع البالغين”.
“مراجعة صديقي”
قالت تيك توك لبي بي سي إنها تمتلك إعدادات أمان “رائدة في القطاع” بالنسبة للمراهقين، كما توظّف ما يزيد على 40 ألف شخص يعملون في مجال الحفاظ على سلامة المستخدمين.
وتقول شركة ميتا، التي تمتلك إنستغرام وفيسبوك، إنها تمتلك ما يزيد على 50 أداة وخاصية مختلفة تتيح للمراهقين “تجارب إيجابية ومناسبة للعمر”.
وقال كاي لبي بي سي إنه حاول استخدام إحدى أدوات إنستغرام وأداة مماثلة على تيك توك يحدد من خلالها عدم اهتمامه بالمحتوى الذي يتسم بالعنف أو المعادي للنساء، بيد أنه يؤكد أنه ظل يُجبَر على مشاهدة هذا المحتوى بناء على توصية الخوارزميات.
وأضاف أنه مهتم ببطولة “يو إف سي”، بيد أنه وجد نفسه يشاهد مقاطع فيديو لمدوّنين يثيرون الجدل، لكنه يقول إنه لم يرغب في التوصية بهذا المحتوى الأكثر تطرفا.
ويلفت إلى أنه لاحظ توصيات خوارزمية بمقاطع فيديو لفتيات يعرفهن في نفس عمره بشأن موضوعات مثل الموسيقى والمكياج بدلا من العنف.
في غضون ذلك، يقول كاي، الذي يبلغ من العمر الآن 18 عاما، إنه لا يزال يُجبَر على محتويات عنف ومعادية للنساء على كل من إنستغرام وتيك توك.
ويقول كاي إنه لاحظ أن مقاطع الفيديو التي تحظى بملايين الإعجابات يمكن أن تكون جاذبة لشباب آخرين في مثل سنه.
ويقول، على سبيل المثال، إن أحد أصدقائه انجذب إلى محتوى نشره مدوّن مثير للجدل، وبدأ في تبني آراء معادية للنساء.
ويقول كاي إن صديقه “ذهب إلى أبعد من الحد، وبدأ يقول أشياء عن النساء، وأصبح الأمر أشبه بضرورة مراجعة صديقي”.
ويقول كاي إنه علّق على منشورات قال فيها إنه “لا يحبها”، وعندما أُعجب بمقاطع فيديو عن طريق الخطأ، حاول التراجع عن ذلك، آملا في إعادة ضبط الخوارزميات، لكنه يقول إن الأمر انتهى بمزيد من مقاطع الفيديو التي يُوصى بمشاهدتها على صفحته.
كيف تعمل خوارزميات تيك توك بالفعل؟
الخطوة الأولى للمستخدمين تكمن في تحديد إعجاب واهتمام عند تسجيل الدخول، ويقول كاونغ إن بعض المحتوى الذي تقدمه الخوارزميات في البداية، على سبيل المثال، لشخص يبلغ من العمر 16 عاما، يعتمد على تفضيلات يقدمها ويفضلها مستخدمون آخرون من نفس السن عبر موقع مشابه.
ووفقا لتيك توك لا يجري تحديد جنس المستخدم للخوارزميات، بيد أن كاونغ يقول إن الاهتمامات التي يعبر عنها المراهقون عند تسجيل الدخول، غالبا يكون لها تأثير في التقسيم على أساس الجنس.
ويقول خبير تيك توك السابق إن بعض الأولاد البالغين من العمر 16 عاما قد يتعرضون لمحتوى عنف “فورا”، نظرا لأن مستخدمين مراهقين آخرين أعربوا عن تفضيل مماثل واهتمام بهذا النوع من المحتوى، حتى لو كان ذلك يعني فقط قضاء المزيد من الوقت في مقطع فيديو يلفت الانتباه لفترة أطول قليلا.
ويقول إن الخوارزميات تستخدم ما يعرف باسم “التعلم المعزز”، وهي طريقة تتعلم فيها أنظمة الذكاء الاصطناعي عن طريق التجربة والخطأ، وتدرب نفسها على اكتشاف السلوك تجاه مقاطع الفيديو المختلفة.
ويضيف كاونغ أن الخوارزميات مصممة لتعظيم المشاركة من خلال عرض مقاطع الفيديو التي يتوقعون منك قضاء وقت أطول في مشاهدتها أو التعليق عليها أو الإعجاب بها، كل ذلك لجعلك تعاود مشاهدة المزيد.
ويقول إن الخوارزمية التي توصي بالمحتوى على تيك توك، لا تفرق دائما بين المحتوى الضار وغير الضار.
ووفقا لكاونغ، كانت إحدى المشكلات التي رصدها، عندما كان يعمل في تيك توك، هي أن الفرق العاملة في مجال تهيئة وترميز هذه الخوارزميات لم تكن على معرفة دائما بالطبيعة الدقيقة لمقاطع الفيديو التي كانت توصي بها.
وقال: “إنهم يحددون عدد المشاهدات والعمر والاتجاه، وهذا النوع من البيانات مجرد للغاية، وهم لا يتعرضون بالضرورة للمحتوى”.