Příspěvky

Špatná pověst AI: jak vznikla a jak a proč ji napravit?

Jako společnost jsme se již posunuli za počáteční fascinaci a nadšení z AI. Teď se lidé často o AI a produktech s ní vyjadřují kriticky, odsuzují ji i ty, kteří AI používají, protestují proti datovým centrům a podobně. Jako by se z fascinující technologické novinky, která slibovala vyřešit některé z největších problémů lidstva, postupně stávalo něco nežádoucího…  Přitom schopnosti AI se za tu dobu silně zlepšily a možnosti jejího využití jsou stále širší. Proč tedy její pověst podle všeho neprochází podobně pozitivním vývojem? A je špatná pověst AI skutečně zasloužená? Čím je kritičnost k AI způsobená? Později se podíváme na konkrétní důvody odmítání. Nejdříve ale zmíníme tři teorie, které odpor k AI samy možná překvapivě dobře vysvětlují. Paradox viditelnosti: nejhorší z AI je často nejvíc vidět Nejvíce je ohledně AI vidět to špatné. O tom se nejsnáze mluví, podobně jako většina zpráv je negativního charakteru. Z pozitivních událostí často zpráva ani nejde udělat (byly by atrakt...

AI bude na jednotku inteligence zlevňovat.

V poslední době je častým tématem, zda cena AI (inference přes předplatné nebo API) bude zlevňovat, nebo zdražovat. To je podle mě velmi závažné téma, protože do velké míry určí, jak bude vypadat budoucnost nás i budoucnost lidstva. Je tedy myslím velmi praktické mít v tomto jasno, abychom věděli, s čím máme počítat do budoucna. Proto bych zde rád rozebral několik argumentů.  Podle mě bude AI na jednotku inteligence zlevňovat.  Argumenty pro zlevňování: 1) Informační technologie obvykle zlevňují. Různé zákony jako ten na obrázku jasně říkají, že s růstem poptávky po IT klesá cena IT. Poptávka umožňuje investice, které vedou úsporám a novým techologiím.  2) AI procesory na jednotku výkonu dlouhodobě zlevňují. GPU, TPU a další - jsou na jednotku výkonu ročně o cca 37 % levnější.  3) Ceny energie. Ani ty nemusejí být důvodem pro zdražování AI. U datových center se často preferují obnovitelné zdroje elektřiny (solární, větrné atd), jejichž cena exponenciálně klesá. Opět ...

AI svět jako téma pro volby

Vážení kolegové z AI prostředí,  je nejvyšší čas vážně začít jednu klíčovou, ale trestuhodně opomíjenou politickou debatu. Blíží se sněmovní volby, které určí směřování naší země na dalších 5 let, co se týká vlády či zákonů. Bude spousta času věci změnit i nechat věci se pokazit.  V exponenciálním světě AI je 5 let celá věčnost. Jen si představte: dnešní nejlepší modely jako například GPT-5 budou za pět let vypadat možná stejně zastarale, jako nám dnes připadá GPT-2 z roku 2019. Ve hře je nástup velice schopných autonomních agentů se silně nadlidskými schopnostmi v klíčových oborech nebo třeba vznik obecné umělé inteligence, AGI. Tato transformace není jen technologická. Zásadně ovlivní celou naši zemi a společnost. Na tyto změny bychom měli být připravení. A právě proto by měla být jedním z ústředních témat voleb. Zatím se však politici těmto tématům příliš nevěnovali.  Položme si pár otázek, které by měly zaznít v každé politické debatě: • Ekonomika a práce: Jak připrav...

Vývoj AI jako stromy a les

V posledních dnech se v AI světě mluví o AGI v roce 2027 nebo o nedávném „překonání“ Turingova testu (které není ničím novým, protože už v roce 2014 Eugene Goostman testem „prošel“).  Myslím, že my v AI komunitě často pro stromy nevidíme les všude kolem. Zkusím shrnout pár myšlenek, které mi přijdou samozřejmé, ale o kterých se moc nemluví.  AGI a potom ASI. Krásné pojmy, které mimochodem nepředstavují kvalitativní vývoj AI. První označuje šíři schopností (ale uznávám, že jsou různé definice) a druhý kvalitu schopností. Má smysl se jimi nějak více zabývat? Nemá. Je to další strom, pro který nevidíme les, kterým jsou různé AI schopnosti. S dosažením AGI nepřijde žádný práh, před kterým byla AI k ničemu a po kterém bude ke všemu. Je to spíše jen zajímavý benchmark, ale měli bychom uvažovat o konkrétních AI schopnostech, které nám můžou usnadnit život/které nás můžou připravit o práci/které můžou zničit lidstvo atd, podle našeho aktuálního hlediska.  Radši než na otázku, jak...

Posedlost jazykem

Tak se nám v poslední době vývoj AI celkem zúžil na jazykové modely, LLM, AI modely, multimodální modely či modely světa, prostě na GPT, Gemini, Claude, Grok a tisíce jim podobných. Kdo nedělá toto, nedělá AI, protože AI (která je tu jako obor kolem 70 let) se snad za poslední dva roky stala synonymem pro tyto modely. A beztak pravděpodobně každý AI výzkumník chce s přirozeným jazykem pracovat. To je, kde „je AI“.  A nejde jen o zmíněné modely, nakonec i modely generující obrázky, video, zvuk a cokoliv dalšího jsou zároveň jazykovými modely, protože musí pochopit vstup od uživatele v přirozeném jazyce.  A my je hodnotíme často primárně podle toho, jak dobře plní přání, která vyslovíme. Myslím, že je dobré se více zaměřit na to, jaké jsou skutečné schopnosti AI a co pro nás AI může udělat mimo to, že nám může rozumět. Minimálně je myslím zjednodušování AI na sluhu, který poslouchá na slovo, velkým zjednodušením jejího potenciálu. Přehlížíme tím velké pokroky „uvnitř“ modelů, po...

o3: zamyšlení nad myslícími modely

Obrázek
Nedávno vzbudil rozruch myslící model od OpenAI s názvem o3. Zaujal hlavně skvělým skóre v benchmarku ARC. Podle některých se dokonce jedná o AGI.  Je tento model vážně tak úžasný?  Myslím, že jde o přelomový model v tom smyslu, že není určený pro „běžné prompty“, které mají hlavně ušetřit čas lidem, ale je určený spíše pro skutečně těžké problémy, se kterými si lidé a mnohdy ani odborníci neví rady. To samo o sobě vypovídá o vysoké inteligenci tohoto modelu.  Model se vyrovnává lidským odborníkům hlavně v úkolech, jako je psaní kódu nebo vědecké uvažování. Pro každodenní využití asi není moc vhodný. Pokud pro model využití najdete, odradit Vás může vysoká cena. Ta je výrazným negativním rysem tohoto modelu, na který se možná trochu zapomnělo, i když OpenAI cenu uvedla v grafu. V nejlevnějším módu za jeden prompt zaplatíte zhruba 560 Kč (stejně jako za ChatGPT Plus na měsíc). V nejdražším módu dokonce kolem 100000 Kč za jediný prompt.  Tím se dostáváme k efektivitě t...

Úvaha o AGI a ASI: žádná revoluce

Mnozí věří, že dosažení umělé obecné inteligence (AGI) – definované jako schopnost plnit nejrůznější úkoly stejně dobře jako lidé – způsobí revoluci ve světě. Nesouhlasím. Tato běžná definice AGI je zavádějící, antropocentrická a omezuje naše chápání potenciálu umělé inteligence. Tato definice totiž vnímá AI skrze lidské schopnosti, podobně jako kdybychom definovali „létání“ pouze na základě toho, jak létají ptáci. Přehlíží tak potenciál AI dosahovat cílů – a dokonce lidské výkony překonávat – zcela odlišnými způsoby. Je načase přestat vnímat AGI jako pouhou imitaci člověka. Ve skutečnosti okamžik, kdy dosáhneme AGI, jak je v současnosti definována, nemusí být vůbec revoluční. Pravděpodobně to bude jen milník, nikoliv náhlý skok vpřed. Naše inteligence (nebo AGI) ve skutečnosti není tak „obecná“. Skládá se z mnoha modulů a schopností. V některých oblastech už AI dosahuje vynikajících výsledků, například v hraní šachů nebo rozpoznávání obrazu (a kalkulačky zvládly výpočty už před desítk...

LLM NN

Můj sen je vytvořit AI, která by přesně předpovídala cokoliv a z jakýchkoliv dat.  Nyní bych tady chtěl navrhnout nový přístup, jak pomocí LLM snadno a zároveň komplexně předpovídat.  LLM NN Je běžné, že se pro předpovídání používají neuronové sítě. Jsem však přesvědčený, že stále více se budou využívat jazykové modely ( https://drozhovory.blogspot.com/2023/12/jsou-llm-vhodne-pro-predpovidani.html ).  Nyní zde představuji způsob, jak spojit LLM a neuronovou síť (NN), který nazývám LLM NN.  Tento přístup funguje následovně: 1) Řekněme, že potřebujeme předpovědět, kdo vyhraje fotbalový zápas, ale všimněte si, jak je tento přístup univerzální co do účelu i vstupních dat.  2) Získáme data: k velkým sportovním událostem existuje spousta dat, jako statistiky, předpovědi, analýzy atd. Uložme je všechny do jednoho dokumentu. Data můžou být různá a může jich být hodně, LLM si s tím poradí.  3) Prompt: budeme chtít po AI, aby vygenerovala prompty, které povedou k naš...

Předpovídání pomocí LLM

Pár zkušeností s předpovídáním s využitím jazykových modelů: 1) Gemini: i když mám zkušební přístup k Ultra verzi, Gemini se neosvědčilo, protože dává pokaždé jiné předpovědi. Zřejmě by pomohlo nastavit temperature na nižší hodnotu, ale v Česku není Gemini API, takže můžu využívat jenom webovou aplikaci. Dá se zde zadat něco kolem 31000 znaků, což je dost, ale nestačí to na spoustu dat. To se dá obejít zadáním dodatečných dat do dalších zpráv. Výhoda samozřejmě je, že toto vše je úplně zdarma a ani se mi nepodařilo narazit na žádný limit, jako je třeba u ChatGPT+. Mega jsem ale excited ohledně přicházející generace 1.5, která by schopnosti přepovídání mohla opět posunout. Navíc do obřího kontextu by se mohlo vejít opravdu hodně informací. Budu ale preferovat API. 2) GPT-4 Turbo: zde už je k dispozici API, takže to je zajímavější. Zkoušel jsem se ptát na různé věci, vítěze utkání, počty gólů atd. Kvalita argumentace byla mnohdy pro mě překvapivá. AI uvažování jistě patří budoucnost. 3)...

Jsou LLM vhodné pro předpovídání budoucích událostí?

Obrázek
Mnoho lidí si myslí, že umělé inteligence založené na jazykových modelech jsou nevhodné pro předpovídání budoucích událostí. Zde si projdeme, proč se tito lidé podle mě mýlí.  I já jsem byl zastánce numerických modelů. Jsem fanoušek čísel, strojového učení a podobných věcí. Je však třeba přiznat, že paradigma se mění v jejich neprospěch.  Numerické AI modely jako staré paradigma Ne pomocí LLM, ale pomocí klasických algoritmů pro klasifikaci a regresi je zvykem předpovídat budoucí události. Budoucí cena akcií, výsledky voleb či sportovních událostí nebo třeba počasí, všechny tyto události se předpovídají obvykle pomocí matematických modelů. Všimněme si, že některé události se však již dnes předpovídají pomocí inteligence založené na jazyce (například politické události, které jsou jedinečné a neexistují relevantní statistiky, podle kterých by se mohly předpovídat). Tyto události bývají předmětem tzv. forecastingu, forecastingových turnajů, moudrosti davu atd. Dále v textu zmíní...

Moje predikce AI do 2030

Do roku 2030 nepřišla žádná další „AI winter“. AI je stále větší téma, je kolem ní stále větší hype (i když jiného druhu: místo úžasu, že něco je konečně možné je to spíše úžas, jak je AI praktická).  Umělá inteligence je největší téma, které dominuje serióznímu zpravodajství. Média každý den informují o nových oblastech, jež AI dobyla, o nezaměstnanosti způsobené AI, o pochybnostech, nejistotě okolo AI. Velké téma je strach o lidskost, obrana lidskosti. Lidé se bojí, že přehnané spoléhání se na AI není lidské. Bojí se, že zakrníme. Další se bojí o svoje soukromí (s AI modely lidé mohou sdílet a sdílí skoro vše a data se odesílají do datových center velkých firem). Odpor proti AI je zřejmě největším odporem proti pokroku, jaký kdy byl. Daleko více je ale lidí, pro které vítězí pohodlnost používání AI.  Velké technologické firmy naprosto dominují světovému byznysu a dobývají i oblasti, které s technologiemi ještě před pár lety ani nesouvisely. Hodnoty těchto firem jsou obrovské...