Sokak számára minden bizonnyal meglepő eredménnyel zárult az IEEE egyik hivatalos magazinja, a Transactions on Software Engineering júniusi számának egy tesztje, amiben azt vizsgálták meg, a ChatGPT mennyire jól is tud programozni. Az eredmények szerint ugyanis az OpenAI mesterséges intelligenciája által előállított kód minősége és megfelelősége széles skálán mozgott - és ez még nagyon finom megfogalmazása annak, ami történt. A műszaki magazin ugyanis azt állítja, hogy a GPT által produkált kódok helyességének aránya akár 100x-os eltérést is mutatott feladat a komplexitásától és egyéb sajátosságaitól függően. Így például voltak olyan típusú feladatok, amiknek csak 0,66 százalékában volt képes a ChatGPT helyesen működő kódot generálni a kérésekre, míg más feladatok esetében akár a 89%-ot is elérte a mesterséges intelligenciás chatbot által generált programok helyességi ránya. A tanulmányban a GPT-3.5-t kérték meg a LeetCode tesztplatform összesen 728 különböző kódolási feladatának 5 ...