[NEW] Szukaj pracy anonimowo — sprawdź szczegóły
Close
Nowe badania: 52 % odpowiedzi programistycznych generowanych przez ChatGPT jest nieprawidłowych

Nowe badania: 52 % odpowiedzi programistycznych generowanych przez ChatGPT jest nieprawidłowych

Zespół naukowców z Purdue University zaprezentował badania na konferencji Computer-Human Interaction, które pokazują, że 52 % odpowiedzi programistycznych generowanych przez ChatGPT jest nieprawidłowych, informuje Futurism.

Na potrzeby badania naukowcy przyjrzeli się 517 pytaniom w Stack Overflow i przeanalizowali próbę odpowiedzi na nie przez ChatGPT.

Odkryliśmy, że 52 % odpowiedzi ChatGPT zawiera błędne informacje, 77 % odpowiedzi jest bardziej rozwlekłych niż odpowiedzi udzielone przez użytkownika, a 78 % odpowiedzi cierpi na różne stopnie niespójności z odpowiedziami udzielonymi przez użytkownika” — napisali.

Zespół przeprowadził również analizę lingwistyczną 2000 losowo wybranych odpowiedzi ChatGPT i stwierdził, że były one „bardziej formalne i analityczne”, a jednocześnie przedstawiały „mniej negatywnych nastrojów”.

Naukowcy także odkryli, że programiści nie wychwytują błędów generowanych przez sztuczną inteligencję w 39%.

„Kolejne częściowo ustrukturyzowane wywiady ujawniły, że uprzejmy język, wyartykułowane i podręcznikowe odpowiedzi oraz kompleksowość są jednymi z głównych powodów, dla których odpowiedzi ChatGPT wyglądają bardziej przekonująco, więc uczestnicy obniżyli swoją czujność i przeoczyli pewne błędne informacje w odpowiedziach ChatGPT” — napisali naukowcy.


Avatar
Lut 21, 2024

Mniej spoglądaj wstecz. Blog współzałożyciela 37Signals

Jason Fried, Co-Founder і CEO 37signals, napisał interesujący wpis na blogu o retrospektywach i ich szkodliwości dla firm i zespołów. Jego zdaniem ciągłe spoglądanie w przeszłość spowalnia rozwój firmy. Poniżej tłumaczenie tekstu na język polski.
0
Wrz 26

CTO Mira Murati oraz dwóch czołowych dyrektorów ds. badań w OpenAI odchodzi

Zarząd OpenAI rozważa plany restrukturyzacji firmy na biznes nastawiony na zysk. Firma zachowa swoją część non-profit jako osobny podmiot.
0
Lip 1, 2024

Największy polski satelita już wkrótce trafi na orbitę

Satelita obserwacyjny EagleEye już gotowy do startu.
0

Ta strona używa plików cookie, aby zapewnić Ci lepsze wrażenia podczas przeglądania.

Dowiedz się więcej o tym, jak używamy plików cookie i jak zmienić preferencje dotyczące plików cookie w naszej Polityka plików cookie.

Zmień ustawienia
Zapisz Akceptuj wszystkie cookies