Este raționamentul în lanț de gândire al LLM-urilor un miraj? ... Rezultatele noastre arată că raționamentul CoT este un miraj fragil care dispare atunci când este împins dincolo de distribuțiile de antrenament. Această lucrare oferă o înțelegere mai profundă a motivului și a momentului în care raționamentul CoT eșuează, subliniind provocarea continuă de a obține un raționament autentic și generalizabil. ... Descoperirile noastre arată că raționamentul CoT funcționează eficient atunci când este aplicat în distribuție sau în apropiere date în distribuție, dar devine fragilă și predispusă la eșec chiar și în condiții de schimbări moderate de distribuție. În unele cazuri, LLM-urile generează pași de raționament fluenți, dar inconsecvenți din punct de vedere logic. Rezultatele sugerează că ceea ce pare a fi un raționament structurat poate fi un miraj, care apare din modele memorate sau interpolate în datele de antrenament, mai degrabă decât din inferență logică. ... Împreună, aceste descoperiri sugerează că LLM-urile nu sunt raționamente principiale, ci mai degrabă simulatoare sofisticate de text asemănător raționamentului.

NYTimes: Columbia și Brown vor dezvălui datele despre admitere și rasă în afacerea Trump A fost nevoie de o amenințare existențială din partea lui Trump pentru a-i determina să publice aceste date. Cu ani în urmă, un comitet al facultății din sistemul Universității din California a examinat exact acest tip de date și a produs graficele de mai jos. Dacă vă uitați la date, veți înțelege natura monstruoasă a acțiunii afirmative așa cum a fost practicată în SUA timp de ~50 de ani. NYT: ... Columbia și Brown vor trebui să mențină "politici de admitere bazate pe merit", potrivit înțelegerilor lor, care codifică obiectivele mai largi ale administrației într-un limbaj obligatoriu din punct de vedere juridic. Universitățile "nu pot în niciun caz să prefere în mod ilegal solicitanții pe bază de rasă, culoare sau origine națională în admiterea în programele lor", se arată în ambele acorduri într-un limbaj identic. "Niciun proxy pentru admiterea rasială nu va fi tolerat". ... "Departamentul de Justiție va pune capăt unui sistem rușinos în care rasa cuiva contează mai mult decât abilitățile sale", a declarat Chad Mizelle, procurorul general adjunct interimar, în martie. "Fiecare colegiu și universitate ar trebui să știe că discriminarea ilegală la admitere va fi investigată și eliminată". Limbajul folosit în înțelegerile cu Columbia și Brown susține afirmațiile contestate despre cazul de admitere al Curții Supreme pe care administrația Trump le-a făcut din februarie. Insistă că decizia merge dincolo de admitere și interzice orice luare în considerare a rasei în viața universitară.

Susține ATOM! AI open source este bună! Mai jos, un alt 💀 grafic. Lucrurile sunt MULT mai rele decât indică acest grafic, deoarece majoritatea descărcărilor de modele din China probabil că nu se întâmplă pe HuggingFace. Cu ~50% dintre dezvoltatorii AI din RPC și ~100% din descărcări fiind modele deschise realizate de laboratoare chineze (Llama nu este competitiv, ca să fiu sincer), punctul de trecere a avut loc deja la nivel global.

America trebuie să ia mai în serios modelele deschise. În această vară, avansul timpuriu în adoptarea modelelor deschise din SUA prin Llama a fost depășit de modelele chinezești. Cu proiectul American Truly Open Models (ATOM) căutăm să construim sprijin și să exprimăm urgența acestei probleme.