Technologia AI w statystykach edukacyjnych 2023: Raport i ankieta dla ponad 300 odbiorców

Czy tworzenie treści z wykorzystaniem sztucznej inteligencji wpływa na zaangażowanie użytkowników? Badania porównują zaangażowanie w filmy edukacyjne generowane przez sztuczną inteligencję i tworzone przez ludzi.

W kwietniu 2023 r. naukowcy z University College London porównali wydajność uczenia się w tradycyjnych filmach instruktażowych i syntetycznych filmach generowanych przez sztuczną inteligencję (generowanych za pomocą Synthesia.io) w nauce online. Oba typy filmów wykazały znaczną poprawę w nauce bez statystycznej różnicy między nimi. Uczący się również nie dostrzegali różnic między tradycyjnie i syntetycznie tworzonymi filmami.

Przeprowadziliśmy mały eksperyment, aby pobudzić rozmowę na temat wpływu filmów generowanych przez sztuczną inteligencję na zaangażowanie odbiorców. Nasz eksperyment miał na celu zapewnienie wglądu w to, jak syntetyczne filmy generowane przez sztuczną inteligencję wpływają na zaangażowanie użytkowników i czy istnieją jakiekolwiek różnice w zaangażowaniu użytkowników podczas oglądania filmów generowanych przez sztuczną inteligencję lub tworzonych przez ludzi.

Metodologia

Uczestnicy ankiety zostali losowo przydzieleni do jednej z dwóch grup, aby obejrzeć filmy mikrolearningowe na ten temat: "Dlaczego nienawidzisz dźwięku swojego głosu?". Jedna grupa obejrzała wideo stworzone przez AsapSCIENCE, podczas gdy druga grupa obejrzała

Oto dwa filmy, które porównaliśmy:

Tworzone przez człowieka wideo do mikrouczenia się (autorstwa AsapSCIENCE)

Wideo generowane przez sztuczną inteligencję

Do stworzenia syntetycznego filmu edukacyjnego wykorzystaliśmy następujące narzędzia:

• ChatGPT4, aby wygenerować skrypt;
  

• Rask Sztuczna inteligencja dla głosu (zamiana tekstu na mowę);
  

• HeyGen, aby utworzyć awatar "nauczyciela";
  

• I DeepAI dla tła wideo (zamiana tekstu na obraz).
  

Nasza ankieta miała na celu zrozumienie percepcji, myśli, uczuć i zachowań uczestników podczas i po obejrzeniu filmów edukacyjnych.

Należy wspomnieć, że nasz eksperyment miał pewne ograniczenia, takie jak niewielka ilość materiału testowego i jego ograniczona różnorodność. Ponadto wykorzystane przez nas treści edukacyjne mogą nie przypaść do gustu każdemu.

Kto wygrywa w grze o zaangażowanie: AI czy filmy edukacyjne stworzone przez człowieka?

Wyniki wykazały, że nie było znaczących różnic w poziomach zaangażowania użytkowników między treściami tworzonymi przez ludzi i generowanymi przez sztuczną inteligencję

• Oba filmy otrzymały pozytywne opinie dotyczące tematu wideo; użytkownicy uznali je zarówno za interesujące, jak i wnikliwe.
  

• Oba filmy otrzymały kilka negatywnych komentarzy dotyczących pominięcia określonych faktów. Na przykład fakt, że mikrofon nie wychwytuje niskich tonów głosu, nie został wspomniany w żadnym z filmów. Krytyka filmów miała mniej więcej taką samą częstotliwość, co pokazuje, że użytkownicy byli bardziej zaangażowani w samą treść niż w sposób jej tworzenia.
  

• Negatywne komentarze wskazują na wysoki poziom zaangażowania.
  

• Co zaskakujące, nawet jeśli uczestnicy rozpoznali, że jeden film został wygenerowany przez sztuczną inteligencję, skupili się bardziej na temacie, a mniej na sposobie jego stworzenia. Tylko 33% uczestników wyraziło opinię na temat generowania AI.
  

Co ludzie sądzą o oglądaniu treści edukacyjnych generowanych przez sztuczną inteligencję?

Postrzeganie przez użytkowników filmów edukacyjnych generowanych przez człowieka i sztuczną inteligencję

Po bliższym przyjrzeniu się, 90% widzów nie wyraziło żadnego negatywnego nastawienia do syntezy wideo ze sztuczną inteligencją. W rzeczywistości 67% nawet nie wspomniało o aspekcie sztucznej inteligencji, ponieważ byli bardziej zainteresowani samą treścią wideo.

25% użytkowników było całkowicie zadowolonych z wideo i nie chciało wprowadzać żadnych zmian. Ponad 73% uznało treść wideo za interesującą i wartościową, a 43% stwierdziło, że chciałoby obejrzeć inne filmy tego samego twórcy.

Ponadto 13% wykazało duży entuzjazm dla sztucznej inteligencji po obejrzeniu filmu i wyraziło zainteresowanie pogłębieniem wiedzy na ten temat.

Wyniki te nie sugerują, że sztuczna inteligencja jest lepsza od ludzi, ale raczej podkreślają, że filmy generowane przez sztuczną inteligencję mogą być skutecznym sposobem na usprawnienie procesów i obniżenie kosztów w określonych scenariuszach i dla określonych odbiorców.

Cytaty z ankiety przeprowadzonej wśród publiczności:

Czy jest coś, co byś zmienił?

"Nie. Myślę, że było to pouczające i zwięzłe w tym samym czasie".

Czy chciałbyś obejrzeć coś podobnego? Dlaczego?

"Tak, był krótki i treściwy. Podobał mi się sposób, w jaki został przedstawiony".

Gdybyś miał polecić ten film komuś innemu, jak byś go opisał?

"Zobacz, co odkryłem. To całkiem interesujące!"

Ludzie są zafascynowani faktem, że wideo zostało stworzone przy użyciu sztucznej inteligencji

"Może być kontrowersyjny, ale podoba mi się, że jest wykonany przy użyciu sztucznej inteligencji, wygląda żywo i interesująco, i sprawia, że zastanawiam się, kiedy nie będziemy w stanie zobaczyć sztucznej inteligencji".

"Cholera, teraz muszę śledzić postępy AI, muszę sprawić, by moja strona Dla Ciebie pokazywała więcej takich filmów".