Infot kerni tole hosszu googlezas helyett, arra tokeletes. Meg par soros peldakodokat kerni egy kerdesre adott valasza melle. Arra jo.Biztos? Eddig egyetlen komoly tanulmány született a témában, asszerint a programozók rendre 20%-24%-os hatékonyságnövekedésnek érzékelték az LLM-ek használatát, ám ugyanakkor a tényleges mérések szerint a valóságban 19%-os hatékonyságromlással dolgoztak (METR). Akik megismételték, hasonló eredményre jutottak (25%-os növekedésnek érzékelték, valójában 21%-ot romlott a teljesítményük). Egy tweetben (ezt hogy monggyák mostanság?) még Andrej is beismerte, hogy az LLM-ek egyenesen használhatatlonok voltak (10 nappal ezelőtti tweet). Szóval amíg a programozók szentül meg voltak győződve róla, hű, de fasza, hatékonyabbak lettek és segíti a munkájukat az LLM, valójában romlott a teljesítményük. De tegyük fel, tényleg jó erre. Hát ez még mindig sovály, iszonyatosan elmarad az ígéretektől, ezt bármelyik IT tanonc csuklóból hozza, csak sokkal, de sokkal olcsóbban (ráadásul a tanonc fix havi díjért dolgozik, nem tokenenként kell fizetni neki, azaz nem nő a bekerülési költsége, ha egy helyett két vagy három programozó keze alá dolgozik. Ezzel szemben ha egy LLM-et egy helyett két vagy három programozó használ, akkor a felhasznált tokenmennyiség is két-, háromszoros).
