[NEW] Szukaj pracy anonimowo — sprawdź szczegóły
Close
ChatGPT odpowiada poprawnie tylko na 48% pytań programistycznych

ChatGPT odpowiada poprawnie tylko na 48% pytań programistycznych

​​Naukowcy postanowili przetestować ogólne umiejętności i wiedzę ChatGPT w zakresie programowania i zadali modelowi dużą liczbę pytań programistycznych. W rezultacie model językowy odpowiedział nieprawidłowo na ponad połowę pytań.

W badaniu przeprowadzonym przez Purdue University naukowcy zadali ChatGPT 517 pytań dot. Stack Overflow. Odpowiedzi były oceniane nie tylko pod kątem poprawności, ale także spójności, kompletności i zwięzłości. Zespół przeanalizował również styl językowy i ton odpowiedzi.

Nie był to najlepszy eksperyment dla ChatGPT. Narzędzie OpenAI odpowiedziało poprawnie tylko na 48% pytań, a 77% z nich określono jako "rozwlekłe".

Jednak ze względu na kompleksowość i styl językowy egzaminatorzy zatwierdzili prawie 40% odpowiedzi ChatGPT. Niestety, 77% tych odpowiedzi było niepoprawnych.

"Zauważyliśmy, że użytkownicy mogą zidentyfikować błąd ChatGPT tylko wtedy, gdy jest on oczywisty" — komentują badacze. "Jednak gdy błąd jest trudny do zweryfikowania lub wymaga zewnętrznego IDE lub dokumentacji, użytkownicy często go nie identyfikują lub nie doceniają".

A jakie jest wasze doświadczenie z ChatGPT? Przyzwyczailiście się do korzystania z niego?

Avatar
Kwi 29

OpenAI wprowadza zakupy w ChatGPT, konkurując z Google

OpenAI ogłosiło uruchomienie nowej funkcji zakupowej w ChatGPT – informuje TechCrunch. Użytkownicy mogą teraz wyszukiwać produkty, przeglądać rekomendacje oparte na recenzjach i opinii innych użytkowników, a następnie przechodzić bezpośrednio na strony sprzedawców w celu finalizacji zakupu. Funkcja jest dostępna zarówno dla użytkowników zalogowanych, jak i niezalogowanych, na całym świecie.
0
Cze 24

Japońska technologia pozwala sterować robotem przy użyciu mięśni

Japońska firma H2L zaprezentowała nowy interfejs Capsule Interface, który umożliwia zdalne sterowanie robotami humanoidalnymi za pomocą napięcia mięśniowego. System wykorzystuje czujniki do wykrywania mikroruchów mięśni i przekazywania ich w czasie rzeczywistym do robota
0
Lut 9, 2024

Zwolnienia w branży IT na świecie. Z czym to jest związane i czy warto się martwić

W styczniu 2024 roku niemal co tydzień słyszeliśmy o redukcjach w firmach IT. Łącznie w sektorze technologicznym zwolniono prawie 30 tys. specjalistów, w tym wielu programistów.Redakcja DOU Polska postara się zbadać, co dzieje się na światowym rynku IT i kto powinien być najbardziej zaniepokojony.
0

Ta strona używa plików cookie, aby zapewnić Ci lepsze wrażenia podczas przeglądania.

Dowiedz się więcej o tym, jak używamy plików cookie i jak zmienić preferencje dotyczące plików cookie w naszej Polityka plików cookie.

Zmień ustawienia
Zapisz Akceptuj wszystkie cookies