Jak open source řídí AI na vysoké cestě
Na Open Source Summit China Jim Zemlin vyzdvihuje nejvýznamnější příspěvky Linux Foundation k vývoji AI.
Jim Zemlin z Linux Foundation na Open Source China 2024.
HONG KONG - Na KubeCon a Open Source Summit v Číně Jim Zemlin, výkonný ředitel Linux Foundation, řekl, že každý, s kým v Číně mluvil, chce mluvit o umělé inteligenci (AI). Proč by měla být Čína jiná než kdekoli jinde?
Zemlin dále zdůraznil významný přínos své organizace k vývoji umělé inteligence prostřednictvím iniciativ open source softwaru. Poukázal na několik klíčových oblastí, kde principy open source zlepšují vývoj AI:
Vyladěné specializované modely: Linux Foundation aktivně pracuje na projektech, jako je Open Platform for Enterprise AI, jejímž cílem je vytvořit standardy pro nasazení specializovaných modelů AI v podnikovém prostředí. Tato iniciativa se snaží usnadnit spolupráci a zefektivnit nasazení technologií AI.
"V Pekingu," řekl Zemlin, "viděl jsem přednášku od společnosti Alibaba, [která] vytvářela aplikaci AI pro včasnou detekci rakoviny slinivky břišní. Tato aplikace již zachraňuje životy v Číně tím, že pomáhá co nejdříve odhalit rakovinu slinivky." To je působivé.
Velké jazykové modely (LLM): Polootevřené modely jako Mistral a Llama 3 se rychle vyvíjejí a často soupeří se svými čistě proprietárními protějšky. Nadace podporuje tento vývoj a umožňuje organizacím využívat výkonné nástroje AI bez omezení uzavřených systémů.
"Platformy jako Hugging Face," pokračoval Zemlin, "jsou jasnými vůdci. Existuje celý ekosystém otevřených modelů, které si lidé mohou stáhnout a používat. Ty umožňují vývojářům přistupovat a využívat širokou škálu aplikací umělé inteligence."
Bezpečnost umělé inteligence: „Transparentní povaha vývoje s otevřeným zdrojovým kódem je zvláště přínosná pro řešení problémů s bezpečností umělé inteligence,“ poznamenal Zemlin. "Linux Foundation se snaží bojovat proti problémům, jako je autenticita obsahu, soukromí a algoritmické zkreslení, podporou spolupráce na nástrojích a standardech."
Iniciativy umělé inteligence Linux Foundation
Linux Foundation, pokračoval, stojí v čele několika iniciativ, které podtrhují její závazek podporovat open-source AI. Patří sem:
Open Model Initiative (OMI): Tento projekt podporuje vývoj modelů umělé inteligence v rámci neodvolatelných otevřených licencí, odstraňuje překážky bránící podnikovému přijetí a podporuje široké používání. OMI má také zabránit společnostem v uzavírání již otevřených modelů.
Acumos AI: Acumos je platforma s otevřeným zdrojovým kódem navržená pro vytváření, sdílení a nasazování aplikací AI. Standardizuje infrastrukturu nezbytnou pro vývoj AI a usnadňuje vývojářům inovace.
PyTorch: Jako jeden z nejrychleji rostoucích projektů nadace je PyTorch preferovaným nástrojem pro vytváření strojového učení a LLM, což dále posiluje roli nadace ve vývoji AI.
Unified Acceleration Foundation: Tato iniciativa si klade za cíl vytvořit společné akcelerační API, které lze využít v různých křemíkových architekturách, čímž podporuje konkurenci a zjednodušuje vývoj aplikací AI.
Koalice pro původ a autenticitu obsahu: Toto úsilí se zaměřuje na zajištění autenticity obsahu prostřednictvím digitálního vodoznaku, což je zásadní aspekt ve světě, který je stále více ovlivněn generativními technologiemi umělé inteligence.
Zemlin také zdůraznil, že je důležité stanovit jasnou definici „otevřeného“ v kontextu umělé inteligence. Zatímco Open Source Initiative (OSI) odvádí náročnou práci na definování open-source AI, Linux Foundation vyvinula Model Openness Framework (MOF).
"MOF," vysvětlil Zermlin, "je způsob, jak pomoci vyhodnotit, zda je model otevřený nebo neotevřený. Umožňuje lidem hodnotit modely. Lidé se vždy ptají, je 'Llama 3 skutečně otevřená? Je tento konkrétní model skutečně otevřený? Nevím "Nezískáte data, opravdu si nejsem jistý, jak to bylo natrénováno."
MOF poskytuje otevřený rámec, který pomáhá zodpovědět tyto otázky - vzhledem k mnoha pohyblivým součástem ve výrobě a nasazení LLM to není snadný úkol. Linux Foundation vytvořila systém hodnocení, který pomáhá pochopit, které komponenty jsou otevřené a zahrnuté v modelu.
Zemlin pokračoval: "Dohodli jsme se na třech různých třídách otevřenosti. Nejvyšší úroveň, úroveň jedna, je otevřená vědecká definice, kde data a každá komponenta, která byla použita, a všechny instrukce musí skutečně jít a vytvořit si svůj vlastní model přesného „Úroveň dvě je podmnožinou toho, kde není všechno ve skutečnosti otevřené, ale většina ano. Na úrovni tři pak máte oblasti, kde data nemusí být dostupná, a data, která popisují sady dat, budou dostupná. A můžete pochopit, že i když je model otevřený, nejsou k dispozici všechna data."
Uzavřel: "Je to pro vás skvělý způsob, jak všichni zaujmout přístup založený na rizicích, jemnější přístup k pochopení toho, co je otevřené a co ne. Umožňuje vám vyhodnotit otevřenost jakéhokoli konkrétního modelu na základě různých komponent, včetně dat. přístup, architektura modelů a školicí procesy Tento rámec umožňuje odborníkům hodnotit transparentnost modelů a přijímat informovaná rozhodnutí o jejich použití.
Vzhledem k tomu, že jsem strávil spoustu času rozhovory s odborníky o open source a AI, očekávám, že se tento odstupňovaný model stane v nadcházejících letech standardem.
Dejte to všechno dohromady a iniciativy Linux Foundation nejenže rozvíjejí technologie AI, ale také zajišťují, že tyto pokroky jsou prováděny eticky a zodpovědně. Podporou spolupráce s otevřeným zdrojovým kódem vytváří nadace inkluzivní prostředí, kde mohou všichni, nejen velké společnosti s odpovídajícími rozpočty, přispívat k inovacím AI a těžit z nich.