يعلن Facebook عن مجموعة بيانات فيديو Ego4D لتدريب الذكاء الاصطناعي

الفيسبوك أعلنت يوم الخميس عن مشروع بحثي جمعت فيه 2200 ساعة من صور الشخص الأول من جميع أنحاء العالم لتدريب الجيل القادم من نماذج الذكاء الاصطناعي.

Le projet s’appelle Ego4D, et il pourrait s’avérer crucial pour la division Reality Labs de Facebook, qui travaille sur de nombreux projets qui pourraient bénéficier de modèles d’IA formés à l’aide de séquences vidéo tournées du point de vue d ‘إنسان. وهذا يشمل النظارات الذكية ، مثل Ray-Ban Stories التي كانت كذلك أرسلت بواسطة Facebook الشهر الماضي، والواقع الافتراضي ، الذي استثمر فيه Facebook بكثافة منذ استحواذها على Oculus مقابل 2 مليار دولار في عام 2014.

يمكن للصور تعليم الذكاء الاصطناعي لفهم أو تحديد شيء ما في العالم الحقيقي ، أو في عالم افتراضي ، يمكنك رؤيته من منظور الشخص الأول من خلال زوج من النظارات أو سماعة رأس Oculus.

أعلن Facebook أنه سيتيح مجموعة بيانات Ego4D للباحثين في نوفمبر.

“هذا الإصدار ، وهو عبارة عن مجموعة من البيانات المفتوحة وتحديًا بحثيًا ، سيحفز التقدم بالنسبة لنا داخليًا ولكن أيضًا خارجيًا إلى حد كبير في المجتمع الأكاديمي و [allow] باحثون آخرون لدعم هذه القضايا الجديدة ولكنهم الآن قادرون على القيام بذلك بطريقة أكثر جدوى وقابلة للتطوير ، “

قال غرومان إن مجموعة البيانات يمكن نشرها في نماذج الذكاء الاصطناعي المستخدمة لتدريب تقنيات مثل الروبوتات لفهم العالم بشكل أسرع.

قال غرومان: “تقليديًا ، يتعلم الروبوت من خلال القيام بأشياء في العالم أو عن طريق الإمساك باليد حرفيًا ليظهر له كيفية القيام بالأشياء”. “هناك فرص للتعلم من الفيديو فقط من تجربتنا الخاصة.”

اعتمد Facebook وكونسورتيوم من 13 جامعة شريكة على أكثر من 700 مشارك في تسع دول لالتقاط الصور من منظور الشخص الأول. يقول Facebook إن Ego4D لديها أكثر من 20 مرة من الساعات من أي مجموعة بيانات أخرى.

من بين شركاء Facebook الأكاديميين كارنيجي ميلون في الولايات المتحدة ، وجامعة بريستول في المملكة المتحدة ، وجامعة سنغافورة الوطنية ، وجامعة طوكيو في اليابان ، والمعهد الدولي لتكنولوجيا المعلومات في الهند.

تم التقاط الصور في الولايات المتحدة والمملكة المتحدة وإيطاليا والهند واليابان وسنغافورة والمملكة العربية السعودية. قال فيسبوك إنه يأمل في توسيع المشروع إلى دول أخرى ، بما في ذلك كولومبيا ورواندا.

قال غرومان: “إن أحد قرارات التصميم المهمة لهذا المشروع هو أننا أردنا شركاء يكونون أولًا وقبل كل شيء خبراء رائدين في هذا المجال ، ومهتمين ومتحمسين لمتابعة هذه القضايا ، ولكن أيضًا متنوعين جغرافيًا”.

يأتي إعلان Ego4D في وقت مثير للاهتمام على Facebook.

واصلت الشركة تكثيف جهودها في مجال الأجهزة. في الشهر الماضي ، أطلق نظارات Ray-Ban Stories بقيمة 299 دولارًا ، وهي أول نظارة ذكية له. و في جويلية، أعلن Facebook عن تشكيل فريق منتج للعمل بشكل خاص على “metaverse” ، وهو مفهوم إنشاء عوالم رقمية يمكن أن يعيشها العديد من الأشخاص في نفس الوقت.

لكن خلال الشهر الماضي ، تعرض موقع Facebook لوابل من المقالات الإخبارية من خزانة الشركات الداخلية. البحث الذي كشف عنه فرانسيس هوغن، مدير منتج سابق على Facebook تحول إلى المبلغين عن المخالفات. ومن بين الأبحاث المنشورة شرائح أظهرت أن إنستغرام ضار بالصحة العقلية للمراهقين.

تم التقاط الصور باستخدام أجهزة قياسية مثل Go Pro الكاميرات و فوزيكس نظارات ذكية.

لأسباب تتعلق بالخصوصية ، قال Facebook إنه تم توجيه الحاضرين لتجنب التقاط أي خصائص تعريف شخصية عند جمع الصور في الداخل. وهذا يشمل وجوه الناس ، والمحادثات ، والوشم ، والمجوهرات. قال فيسبوك إنه أزال معلومات التعريف الشخصية من مقاطع الفيديو وطمس وجوه المارة وأرقام لوحات ترخيص المركبات. وقالت الشركة إنه تمت إزالة الصوت أيضًا من معظم مقاطع الفيديو.

قال غرومان: “كان شركاء الجامعة الذين صنعوا مجموعة الفيديو هذه ، الخطوة الأولى للجميع ، عملية مكثفة ومهمة جدًا لإنشاء سياسة تجميع مناسبة”.