Ora puoi consentire a Gemini di visualizzare lo schermo del tuo Mac gratuitamente.

💡 Le cose più importanti che devi sapere

• Gemini ora offre una funzione di "Dettatura intelligente" su macOS, che rimuove automaticamente le frequenze sonore come "ah" e "mm" durante la digitazione in qualsiasi finestra, semplicemente premendo il tasto Fn.
• Gemini ora è in grado di "comprendere" il contenuto dello schermo del tuo Mac tramite la funzione "Inferenza basata sullo schermo" (non abilitata per impostazione predefinita), consentendogli di eseguire attività complesse come riassumere appunti o redigere email a partire dai tuoi file.
• Nonostante i vantaggi, consentire a Gemini l'accesso completo allo schermo del Mac comporta potenziali rischi per la privacy e la sicurezza che devono essere presi in considerazione.

Le opinioni sull'intelligenza artificiale possono essere diverse, ma sono molte le persone che la utilizzano attualmente. La maggior parte di questi utenti ne limita l'uso ai chatbot, come ChatGPT o Gemini, sia come alternativa a Google (sconsigliamolo) sia come amico fidato ( anche in questo caso, sconsigliamolo ). Ma se il vostro obiettivo è utilizzare l'IA come assistente personale, fate attenzione: mercoledì Google ha annunciato due nuovi aggiornamenti per Gemini su macOS, uno dei quali potrebbe avere implicazioni per la privacy e la sicurezza degli utenti, qualora decidano di attivarlo.

Dettatura migliorata per Gemini su macOS

Se utilizzi la funzione di dettatura su macOS (pronunciando le parole ad alta voce affinché l'IA le digiti per te), ora potresti avere un motivo per usare Gemini al posto delle soluzioni integrate di Apple. Attualmente, Gemini su macOS offre la "dettatura intelligente", che secondo Google corregge il testo "istantaneamente in corrispondenza del cursore". Ciò significa che Gemini rimuoverà le sibilanti come "uh" e "mm" tra le parole, cose che non digiteresti mai manualmente. Questa funzione funziona in qualsiasi finestra del tuo Mac: basta premere il tasto Fn e iniziare a parlare.

Dovremo vedere questa funzionalità in azione per valutarne l'efficacia, ma si basa su miglioramenti simili che Gemini ha già apportato su altre piattaforme. È una piccola modifica, ma permetterà di utilizzare Gemini per scrivere bozze di testi, email o documenti senza la necessità di una modifica completamente automatizzata. Questo è il tipo di vantaggio che cerco nelle funzionalità basate sull'intelligenza artificiale. E poiché è abilitata di default, chiunque utilizzi Gemini su un Mac la utilizzerà, a meno che non acceda alle impostazioni per disattivarla.

Gemini ora è in grado di "comprendere" lo schermo del tuo Mac.

Il secondo aggiornamento di Gemini per macOS non è altrettanto immediato e non è abilitato di default. Chiamata da Google "ragionamento basato sullo schermo", questa funzione consente a Gemini di "capire" cosa succede sullo schermo del Mac. L'idea è di delegare compiti a Gemini: ad esempio, se l'app Note è aperta, si potrebbe premere il tasto Fn e dire "Trasforma queste note in un riassunto per la riunione di questo pomeriggio". A quel punto, Gemini dovrebbe essere in grado di analizzare l'app Note, esaminare il testo e formattarlo automaticamente, senza che l'utente debba utilizzare un'applicazione separata.

È anche possibile creare una serie di comandi: si può chiedere a Gemini di redigere un'e-mail per una cena di gruppo e di estrarre informazioni importanti (come partecipanti, budget, restrizioni alimentari, ecc.) da una selezione di file presenti sul Mac. Successivamente, si può chiedere a Gemini di cercare su Google Maps specifici tipi di ristoranti e di includerli tra le opzioni per il gruppo. In qualsiasi momento, è possibile correggere l'impostazione e Gemini si adeguerà di conseguenza. Ad esempio, se inizialmente si indica che la cena di gruppo dovrebbe essere alle 18:30 di venerdì, ma in seguito nel comando si specifica "Mi dispiace, la cena dovrebbe essere alle 19:00", Gemini apporterà le modifiche necessarie.

Certamente, questo tipo di funzionalità presenta dei vantaggi. Se già utilizzi Gemini su macOS, consentirgli di "vedere" lo schermo del tuo Mac lo renderebbe ancora più utile. Invece di affidarti a Gemini per tutte le tue attività, potresti estenderne l'accesso all'intero Mac, in un modo piuttosto complesso se Google ha ragione. Tuttavia, concedere a un software di intelligenza artificiale l'accesso completo a ciò che accade sul tuo PC comporta sempre un rischio per la privacy e potenzialmente anche per la sicurezza. Vuoi davvero che l'intelligenza artificiale di Google possa vedere tutto ciò che appare sul tuo schermo?

Questo rischio non è significativo quanto quello rappresentato dai veri e propri programmi agente, ovviamente. Se sottoscrivi il piano AI più costoso di Google, puoi accedere a Gemini Spark, che può essere eseguito in modo indipendente sul tuo Mac. Il rischio maggiore da tenere d'occhio è l'"iniezione di prompt", in cui gli hacker nascondono comandi dannosi per la tua IA all'interno di siti web. Se assegni alla tua IA un compito e questa incontra un comando di questo tipo, presumerà che la richiesta provenga da te e non dall'hacker. Pertanto, quando elabora una richiesta come "Apri [sito web dannoso] e scarica [file dannoso]", la eseguirà senza esitazione; oppure "Apri [portafoglio di criptovalute], accedi con le credenziali salvate e invia fondi a [conto]", si adeguerà. Questo non dovrebbe essere un problema con Gemini nella sua versione attuale, anche se teoricamente potrebbe verificarsi se gli assegni un compito che lo espone all'iniezione di comandi.

Se siete interessati alle ultime funzionalità, lo scopo di questo avviso non è quello di scoraggiarvi dall'utilizzare la nuova funzionalità proxy di Gemini su macOS , ma è importante che teniate conto dei rischi concreti prima di procedere.