Gemma 4 12B, l’AI multimodale di Google che gira in locale

Immagine realizzata con Ideogram

Mentre buona parte dell’industria insegue modelli sempre più grandi, costosi da addestrare e ancora più costosi da servire, Google sceglie una direzione diversa e rilascia Gemma 4 12B, un modello open-weights da 11,95 miliardi di parametri distribuito con licenza Apache 2.0. La caratteristica più interessante non sta nei numeri, ma in ciò che riesce a fare con così poche risorse: gira interamente in locale su un comune portatile aziendale con 16 GB di memoria, ed è in grado di analizzare testo, immagini e audio senza inviare un solo bit nel cloud.

Il cuore della novità è l’approccio cosiddetto encoder-free al multimodale. Tradotto in termini accessibili, vuol dire che Gemma 4 non si appoggia ai pesanti encoder separati che storicamente hanno gestito immagini e audio nei modelli concorrenti. Le immagini vengono trasformate in vettori tramite un modulo di embedding leggero, mentre l’audio viene proiettato direttamente nello stesso spazio dei token di testo. Il risultato è un’architettura più compatta, più semplice da ottimizzare e con un’impronta di memoria nettamente ridotta rispetto agli approcci tradizionali.

Sul fronte dell’ecosistema, il rilascio arriva accompagnato da un supporto immediato e ampio. vLLM e Ollama hanno già aggiunto la compatibilità, mentre Unsloth ha pubblicato versioni in formato GGUF che, grazie alla quantizzazione, permettono l’esecuzione locale con appena 8 GB di RAM. Una soglia che apre la porta non solo ai portatili aziendali, ma anche a macchine consumer di fascia media, abbattendo ulteriormente la barriera d’ingresso.

Le implicazioni pratiche sono concrete. Un professionista in volo senza connessione potrà far analizzare al modello la registrazione di una riunione, un set di fotografie tecniche o una bozza di contratto, senza mai inviare dati a un server esterno. Uno scenario, questo, che tocca due nervi scoperti dell’AI aziendale, ovvero la riservatezza dei dati e la dipendenza dalla connettività.

La direzione tracciata da Gemma 4 suggerisce che il prossimo terreno di competizione non sarà solo la potenza assoluta dei modelli frontier, ma l’efficienza per watt e per gigabyte. Mentre i grandi modelli centralizzati continueranno a dominare i compiti più complessi, una quota crescente del lavoro quotidiano si sposterà sul dispositivo dell’utente. Una tendenza che riequilibra il rapporto fra cloud ed edge, riduce i costi operativi e restituisce alle aziende un controllo sui propri dati che negli ultimi anni sembrava destinato a sfumare. Una mossa silenziosa, ma strategicamente densa.

Per approfondire: link all’articolo originale