[NEW] Szukaj pracy anonimowo — sprawdź szczegóły
Close
ChatGPT odpowiada poprawnie tylko na 48% pytań programistycznych

ChatGPT odpowiada poprawnie tylko na 48% pytań programistycznych

​​Naukowcy postanowili przetestować ogólne umiejętności i wiedzę ChatGPT w zakresie programowania i zadali modelowi dużą liczbę pytań programistycznych. W rezultacie model językowy odpowiedział nieprawidłowo na ponad połowę pytań.

W badaniu przeprowadzonym przez Purdue University naukowcy zadali ChatGPT 517 pytań dot. Stack Overflow. Odpowiedzi były oceniane nie tylko pod kątem poprawności, ale także spójności, kompletności i zwięzłości. Zespół przeanalizował również styl językowy i ton odpowiedzi.

Nie był to najlepszy eksperyment dla ChatGPT. Narzędzie OpenAI odpowiedziało poprawnie tylko na 48% pytań, a 77% z nich określono jako "rozwlekłe".

Jednak ze względu na kompleksowość i styl językowy egzaminatorzy zatwierdzili prawie 40% odpowiedzi ChatGPT. Niestety, 77% tych odpowiedzi było niepoprawnych.

"Zauważyliśmy, że użytkownicy mogą zidentyfikować błąd ChatGPT tylko wtedy, gdy jest on oczywisty" — komentują badacze. "Jednak gdy błąd jest trudny do zweryfikowania lub wymaga zewnętrznego IDE lub dokumentacji, użytkownicy często go nie identyfikują lub nie doceniają".

A jakie jest wasze doświadczenie z ChatGPT? Przyzwyczailiście się do korzystania z niego?

Avatar
Maj 12

Meta chce zautomatyzować cały proces reklamowy dzięki AI

Według informacji podanych przez portal TechCrunch, Meta zamierza przejąć pełną kontrolę nad tworzeniem reklam – od kreacji po pomiar skuteczności – za pomocą sztucznej inteligencji. Mark Zuckerberg określił ten plan jako "przedefiniowanie kategorii reklamy", a jego realizacja może oznaczać przełom dla małych firm i ogromne zmiany dla całej branży reklamowej.
0
Maj 30

Grammarly pozyskało 1 mld dolarów na rozwój platformy AI i ekspansję rynkową

Firma Grammarly uzyskała finansowanie wspierające ekspansję rynkową w wysokości 1 miliarda dolarów od funduszu CVF należącego do General Catalyst. Środki te zostaną przeznaczone na rozwój sprzedaży, marketingu, przejęcia strategiczne oraz dalsze prace nad produktem.
0
Maj 1

Platforma X traci miliony użytkowników w Unii Europejskiej

Zgodnie z najnowszym raportem opublikowanym przez platformę X w ramach wymagań unijnego aktu o usługach cyfrowych (Digital Services Act), liczba użytkowników serwisu społecznościowego w Europie spadła o ponad 10,5% w ciągu zaledwie pół roku. To oznacza ubytek ponad 11 milionów aktywnych użytkowników miesięcznie – podaje Mashable.
0

Ta strona używa plików cookie, aby zapewnić Ci lepsze wrażenia podczas przeglądania.

Dowiedz się więcej o tym, jak używamy plików cookie i jak zmienić preferencje dotyczące plików cookie w naszej Polityka plików cookie.

Zmień ustawienia
Zapisz Akceptuj wszystkie cookies