L’ascesa della fenice | Chatgpt | Llm Large Language Model | Chat gpt Gratis Online | Turtles AI
L’ascesa della fenice
DukeRem26 aprile 2023
Nel tentativo di #democratizzare i modelli linguistici in più lingue, un team di ricercatori della #Cina ha pubblicato un documento su un nuovo modello linguistico di grandi dimensioni (#LLM) chiamato "#Phoenix". Il modello non solo ha prestazioni competitive in #inglese e #cinese, ma supera anche gli LLM open-source esistenti in lingue (tra cui #Vicuna #13B) con risorse limitate, coprendo sia le lingue #latine che quelle non latine.
I ricercatori ritengono che il loro lavoro sarà utile per rendere i modelli linguistici più accessibili, in particolare nei Paesi in cui le persone devono affrontare restrizioni da parte di OpenAI o dei governi locali. Il team ha reso disponibili i dati, il codice e i modelli su GitHub all’indirizzo https://github.com/FreedomIntelligence/LLMZoo.
I ricercatori sostengono che lo stato attuale dello sviluppo dell’AI, in cui ChatGPT e il suo successore GPT-4 sono sviluppati e mantenuti da un’unica azienda, è inaccettabile per la comunità dell’AI. Definiscono la "supremazia dell’AI" come la leadership assoluta e la posizione di monopolio di un’azienda in un campo dell’AI, che può includere capacità esclusive al di là dell’intelligenza artificiale generale.
I ricercatori ritengono che l’esistenza di una supremazia dell’AI potrebbe portare a conseguenze impreviste, come il controllo del futuro dell’umanità da parte di una singola azienda, con responsabilità poco chiare. Sostengono che l’AI dovrebbe essere di nuovo aperta e il loro lavoro mira ad abbassare il costo e la barriera della formazione ChatGPT, in modo che più ricercatori responsabili possano unirsi alla ricerca ChatGPT e condividere i loro diversi pensieri sullo sviluppo di modelli linguistici di grandi dimensioni in un modo sicuro per il pianeta.
L’approccio del team alla democratizzazione prevede la combinazione di dati di istruzioni e di dati di conversazione per addestrare i modelli a seguire le istruzioni in una chat. L’LLM multilingue che ne risulta, "Phoenix", raggiunge prestazioni all’avanguardia su LLM cinesi completamente open-source. Nelle lingue non latine, Phoenix supera i LLM open-source esistenti, tra cui Vicuna-13b e Guanaco. La versione latina di Phoenix, chiamata "Chimera", stabilisce un nuovo stato dell’arte dei LLM open-source, impressionando persino il GPT-4 con il 96,6% di ChatGPT Quality.
I ricercatori ritengono che i modelli proposti andranno a beneficio di coloro che sono soggetti a restrizioni legali nell’uso di ChatGPT o di strumenti correlati, rendendo l’AI nuovamente più aperta e paritaria. Tuttavia, riconoscono che i loro modelli presentano dei limiti, tra cui la mancanza di buon senso, il dominio di conoscenza limitato, i pregiudizi, l’incapacità di comprendere le emozioni e le incomprensioni dovute al contesto.
I ricercatori prevedono di aggiungere in futuro altre valutazioni automatiche e umane per rendere i loro modelli più robusti. Sottolineano che il loro obiettivo non è quello di competere con altri modelli, ma piuttosto di aiutare la comunità a replicare e far progredire ChatGPT e GPT-4. I modelli sono attualmente accessibili solo all’interno della loro università e di SRIBD.
