Apple otkrio da stari trik drastično poboljšava AI modele

bug
Izvor: bug

U novoj studiji koju su objavili i istraživači iz Applea, veliki jezični model otvorenog koda (LLM) pokazao je značajna poboljšanja performansi nakon što mu je rečeno da provjeri vlastiti rad pomoću jednostavnog, ali moćnog trika za produktivnost. Kako prenosi 9to5Mac, ključ leži u korištenju popisa za provjeru (checklist).

Nakon što se veliki jezični model istrenira, njegova se kvaliteta obično dodatno poboljšava kroz fazu poznatu kao učenje potkrepljivanjem na temelju ljudskih povratnih informacija (RLHF). U tom procesu, ljudski ocjenjivači daju “palac gore” ili “palac dolje” na odgovore modela, čime ga nagrađuju ili kažnjavaju. S vremenom, model uči koji odgovori donose pozitivne reakcije i njegova ukupna korisnost raste. Ovaj proces dio je šireg polja “usklađivanja” (alignment), čiji je cilj osigurati da se AI modeli ponašaju na koristan i siguran način.

Međutim, Appleovi istraživači u studiji naslovljenoj Checklists Are Better Than Reward Models For Aligning Language Models predlažu novu, učinkovitiju metodu: učenje potkrepljivanjem na temelju povratnih informacija s popisa za provjeru (RLCF). Umjesto jednostavnog “sviđa mi se / ne sviđa mi se” signala, RLCF ocjenjuje odgovore modela na ljestvici od 0 do 100 za svaku stavku na unaprijed definiranom popisu.

“Usporedili smo RLCF s drugim metodama usklađivanja primijenjenim na snažan model za praćenje uputa (Qwen2.5-7B-Instruct) na pet široko proučavanih mjerila – RLCF je jedina metoda koja je poboljšala performanse na svakom mjerilu, uključujući povećanje stope zadovoljstva od 4 postotna boda na FollowBench, povećanje od 6 bodova na InFoBench i rast stope pobjeda od 3 postotna boda na Arena-Hard“, objašnjavaju istraživači.

Zanimljiv je i način na koji se ti popisi kreiraju. Istraživači su, koristeći snažniji “učiteljski” AI model (Qwen2.5-72B-Instruct), automatski generirali popise za 130 tisuća različitih uputa, stvarajući tako novi skup podataka nazvan WildChecklists. Za svaku korisničku uputu, sustav generira kratki popis konkretnih da/ne zahtjeva (npr. “Je li odgovor preveden na španjolski?”). Zatim, “učiteljski” model ocjenjuje odgovore “učeničkog” modela prema svakoj stavci na popisu, a te ponderirane ocjene postaju signal za daljnje fino podešavanje.

Istraživači ističu da je njihova metoda usmjerena na “složeno praćenje uputa” i možda nije idealna za sve druge slučajeve upotrebe. Također, naglašavaju da RLCF poboljšava praćenje uputa, ali nije dizajniran za sigurnosno usklađivanje. Jedno od ograničenja je i to što se oslanja na snažniji model koji djeluje kao “sudac” za podešavanje manjeg modela.

Ipak, studija nudi jednostavan i inovativan način za poboljšanje pouzdanosti AI modela, što je ključno za budućnost AI asistenata koji će postati standardno sučelje za interakciju s našim uređajima. To postaje još važnije s obzirom na to da će asistenti sve više dobivati agentske sposobnosti, gdje će precizno praćenje uputa i usklađenost biti od presudne važnosti.

Vrhunski doživljaj igranja!

Isporuka odmah

Lenovo LOQ 15IRX10 83JE0079SC

Oslobodite snagu gaminga uz Lenovo LOQ s RTX 5060 grafikom i i7 procesorom – FHD IPS ekran i 32 GB RAM-a donose vrhunske performanse bez kompromisa!


1420,39 €


1879,00 €

Kupi

Uštedite do 90% na troškovima ispisa !

Isporuka odmah

Epson EcoTank L3286

Višenamjenski pisač A4 sa WiFi-em i zaslonom jednostavnim za upotrebu Ispis, kopiranje i skeniranje visoke kvalitete u jednom stroju.


189,90 €


259,90 €

Kupi

Sonos Era 100 – Snaga koja nadmašuje veličinu

Isporuka odmah

Sonos Era 100 prijenosni Bluetooth zvučnik

25 % veći woofer od prethodnog, za još dublji i snažniji bas u kompaktnom kućištu. Zahvaljujući pravom stereo zvuku s dvama precizno usmjerenim visokotoncima i tri Class-D pojačala, Era 100 ispunjava prostor bogatim, kristalno čistim tonovima.


191,20 €


239,00 €

Kupi

Trčanje na najvišoj razini!

Garmin Forerunner 965

Pratite sve važne parametre uz dugotrajnu bateriju i sjajan AMOLED zaslon.


569,99 €


619,00 €

Kupi

Spremni za zabavu uz JBL karaoke zvučnik.

JBL PartyBox 110

Snažan zvuk, dinamični svjetlosni show!


307,99 €


439,99 €

Kupi

Sonos Arc Ultra -najelegantniji i najsnažniji soundbar koji je Sonos ikada proizveo.

Isporuka odmah

Sonos soundbar Arc Ultra, crni

S potpuno novom akustičnom arhitekturom koju pokreće 14 Sonosovih ugrađenih zvučnih jedinica i naprednim tehnologijama poput Sound Motion™, Arc Ultra ispunjava svaki kutak prostorije i precizno raspoređuje zvuk oko vas, pružajući doživljaj zabave koji nadmašuje sva očekivanja.


891,65 €


1049,00 €

Kupi

HI-FI SETUP TJEDNA

Novosti

Audio-Technica & Elipson

U našoj slušaonici svakodnevno slažemo zanimljive hi-fi sisteme raznih razina kompleksnosti, kvalitete i cijene za prezentacije našim posjetiteljima.

Streaming pojačalo za najzahtjevnije slušatelje.

Akcija

WiiM Amp Ultra silver

WiiM Amp Ultra streaming pojačalo s 2x100W snage pri 8Ω i Class-D PFFB tehnologijom pruža čist i detaljan zvuk. Nudi HDMI ARC, optički, RCA, sub izlaz, USB audio, Bluetooth 5.3 i Wi-Fi 6, ugrađeni DAC, EQ, multi-room podršku i 3,5” zaslon te podršku za vodeće streaming servise.

Gen2 Folded Motion® XT visokotonac.

Akcija

MARTIN LOGAN Motion XT F100

Samostojeći zvučnik, frekvencijskog odziva 31Hz–25kHz, osjetljivosti 92dB i impedancije 4Ω. Opremljen Gen2 Obsidian Folded Motion XT visokotoncem, 6.5” Kevlar® srednjetoncem i tri 6.5” aluminijska woofera. Snaga pojačala 20–450W.

12. generacija Uni-Q® drivera s MAT™ tehnologijom.

Akcija

KEF R3 META

R3 Meta trosmjerni zvučnik za police dijeli iste pokretačke snage kao vrhunski R11 Meta. Sadrži 12. generaciju Uni-Q® drajvera s MAT™ i snažnim 16,5 cm hibridnim aluminijskim bas drajverom.

Jednostavan multiroom sustav.

Akcija

KEF LS50 Wireless II

Bežični zvučnici sa Uni-Q driverom, frekvencijski odziv 45 Hz – 28 kHz, izlazna snaga po zvučniku LF: 280W, HF: 100W, podrška za AirPlay 2, Google Chromecast, ROON Ready, UPnP kompatibilnost, Bluetooth 4.2, Wi-Fi

Dali tradicija u elegantnom izdanju.

Akcija

DALI Oberon 7

Podnostojeći zvučnici, frekvencijski odziv 36 – 26,000 Hz, 6 ohma, SPL 110dB, preporučena snaga pojačala 30 – 180 W, low frequency driver sa konusom od drvenih vlakana.

Potpuno automatizirani gramofon s podkonstrukcijom.

Akcija

PRO-JECT Automat A2 2M Red

Gramofon s remenskim pogonom i elektroničkom promjenom brzina 33/45/78 RPM. Potpuno automatski s prigušenim aluminijskim platom, 8,3” tonarmom (211 mm, previs 19,5 mm). Wow & flutter 0,12–0,14%, odskakanje 0,22–0,27%, omjer signal/šum 74 dB.


1.099 €


1.153,33 €

Akcija

Bezvremenski uređaj.

Preporuka

NAD C 3050 pojačalo

NAD C 3050 stereo pojačalo spaja retro dizajn s modernom tehnologijom. Nudi 100W po kanalu, HybridDigital UcD pojačalo, TI visokorezolucijski DAC, HDMI eARC, MM phono ulaz, Bluetooth aptX HD i podršku za MDC2 nadogradnje s BluOS streamingom i Dirac Live korekcijom prostorije.

Zapanjujuća kvaliteta zvuka.

Preporuka

CAMBRIDGE AUDIO CXN 100

Cambridge CXN100 mrežni player s ESS ES9028Q2M SABRE32 DAC-om i StreamMagic Gen4 modulom donosi vrhunski zvuk, podršku za MQA, Spotify, Tidal, Qobuz, Deezer, internet radio, Roon Ready funkcije te povezivanje preko USB, Coaxial, TOSLINK, Chromecast, AirPlay 2 i Bluetootha uz veliki hi-res zaslon.

Streaming pojačalo s ugrađenim HEOS-om.

Preporuka

DENON PMA-900HNE

Stereo pojačalo 50W+50W (8Ω), 85W+85W (4Ω), THD 0.01%, MM/MC phono ulaz, Subwoofer pre-out, A/B zvučnici, OLED zaslon. Wi-Fi 2.4/5GHz, Bluetooth, AirPlay 2, Alexa, Google Assistant, Siri. Streaming: Spotify, Tidal, Deezer, Amazon Music. Podržava DSD, FLAC, WAV, ALAC. Dim. 434×376×131mm, 8.3kg.

Posjetite našu Hi-Fi slušaonicu.

Ronis Velesajam

Rezervirajte termin u našoj Hi-Fi slušaoni Ronis Velesajam i iskusite zvuk najpoznatijih svjetskih Hi-Fi brendova.