--- title: "Primi passi del computer che si controlla da solo con AI" id: "1265297" type: "post" slug: "gpt-4-vision-pc-computer-controlla-solo-ai" published_at: "2023-11-30T12:29:17+00:00" modified_at: "2025-02-14T06:31:18+00:00" url: "https://www.macitynet.it/gpt-4-vision-pc-computer-controlla-solo-ai/" markdown_url: "https://www.macitynet.it/gpt-4-vision-pc-computer-controlla-solo-ai.md" excerpt: "Da OthersideAI il modello che muove mouse e digita sulla tastiera per fare tutto da solo, Imbue punta a modelli AI che ragionano" taxonomy_category: - "AI - Intelligenza Artificiale" - "Nuove Tecnologie" taxonomy_post_tag: - "AI" - "Intelligenza Artificiale" --- Questo sito contiene **[link di affiliazione](https://www.macitynet.it/pubblicita/)** per cui può essere compensato [Home](https://www.macitynet.it/) » [Hi-Tech](https://www.macitynet.it/category/hi-tech/) » [Nuove Tecnologie](https://www.macitynet.it/category/hi-tech/nuove-tecnologie/) » **Primi passi del computer che si controlla da solo con AI** [AI - Intelligenza Artificiale](https://www.macitynet.it/category/hi-tech/ai-intelligenza-artificiale/) [Nuove Tecnologie](https://www.macitynet.it/category/hi-tech/nuove-tecnologie/) # Primi passi del computer che si controlla da solo con AI Di[Daniele Piccinelli](https://www.macitynet.it/author/daniele/) 30 Nov 2023 Image by [kiquebg](https://pixabay.com/users/kiquebg-5133331/?utm_source=link-attribution&utm_medium=referral&utm_campaign=image&utm_content=4256272) from [Pixabay](https://pixabay.com//?utm_source=link-attribution&utm_medium=referral&utm_campaign=image&utm_content=4256272) Nell’incredibile evoluzione quasi [quotidiana](https://www.macitynet.it/tag/intelligenza-artificiale/) dell’intelligenza artificiale e degli strumenti AI mancava un passo che ora è stato intrapreso: il computer in grado di muovere il mouse, fare click e digitare sulla tastiera, al nostro posto, per fare praticamente tutto o quasi da solo. L’idea è venuta a Josh BIckett di OthersideAI osservando in funzione GPT-4 Vision, modello di OpenAI per funzioni AI basate sulla visione invece che su input di testo. In pratica come farebbe un uomo, il sistema osserva lo schermo del computer tramite screenshot e da questi decide i migliori spostamenti per il puntatore del mouse, per i click da effettuare e anche per inserimenti e digitazione da tastiera. Il modello AI guarda e interpreta lo schermo ed effettua una serie di azioni mirate per raggiungere l’obiettivo desiderato, proprio come farebbe un uomo seduto davanti al computer, o quasi. Bickett spiega che è proprio come un altro agente o modello AI ma non basato sul testo, bensì sulla visione. Finora per questo tipo di funzioni si seguiva un approccio basato sulle API, ma lo sviluppatore spiega che non tutto ciò che un uomo fa al computer è riproducibile tramite API. > 𝗪𝗲 𝗮𝗿𝗲 𝗲𝘅𝗰𝗶𝘁𝗲𝗱 𝘁𝗼 𝗼𝗽𝗲𝗻-𝘀𝗼𝘂𝗿𝗰𝗲 𝘁𝗵𝗲 𝗦𝗲𝗹𝗳-𝗢𝗽𝗲𝗿𝗮𝘁𝗶𝗻𝗴 𝗖𝗼𝗺𝗽𝘂𝘁𝗲𝗿 𝗙𝗿𝗮𝗺𝗲𝘄𝗼𝗿𝗸 𝘁𝗵𝗮𝘁 𝗲𝗻𝗮𝗯𝗹𝗲𝘀 𝗺𝘂𝗹𝘁𝗶𝗺𝗼𝗱𝗮𝗹 𝗺𝗼𝗱𝗲𝗹𝘀, 𝗶𝗻𝗰𝗹𝘂𝗱𝗶𝗻𝗴 𝗚𝗣𝗧-𝟰-𝗩𝗶𝘀𝗶𝗼𝗻 𝘁𝗼 𝘀𝗶𝗺𝘂𝗹𝗮𝘁𝗲 𝗵𝘂𝗺𝗮𝗻-𝗹𝗶𝗸𝗲 𝗺𝗼𝘂𝘀𝗲… [pic.twitter.com/8DyQRBsWUQ](https://t.co/8DyQRBsWUQ) > > — Josh (@josh_bickett) [November 27, 2023](https://x.com/josh_bickett/status/1729163560713060546?ref_src=twsrc%5Etfw) Matt Shumer, cofondatore e Ceo di OthersideAI, [offre](https://venturebeat.com/ai/the-self-operating-computer-emerges/) a VentureBeat un altro punto di vista «Se vuoi veramente risolvere qualcosa che sia autonomo [e] possa effettivamente aiutarci o fare di più, devi permettergli di funzionare come una persona perché il mondo è costruito per le persone». Le tecnologie AI sono un approccio migliore e per aver più probabilità di riuscire e svilupparsi il framework è stato [rilasciato](https://github.com/OthersideAI/self-operating-computer) gratis, aperto e disponibile per chiunque voglia sperimentare Non solo: il sistema proposto è anche plug and play, nel senso che in qualsiasi momento chiunque può inserire un modello AI migliore per farlo progredire. I creatori prevedono che modelli AI avanzati potrebbero imparare a prendere il controllo di tutte le interazioni del computer, il tutto semplicemente tramite comandi vocali e conversazionali. ### Dalla AI che digita a quella che ragiona Il modello AI che controlla il computer è solo il primo passo per la società di ricerca Imbue specializzata in AI. Per migliorarlo serve una potenza di calcolo enorme, ottenuta con una collaborazione da 150 milioni di dollari con Dell. La ricerca Imbue punta a modelli AI in grado di ragionare e scegliere meglio, solo così sarà possibile creare sistemi in grado di gestire incertezza, adattare gli approcci, ottenere informazioni, effettuare scelte complesse, oltre a tutto quello che serve per essere davvero autonomo. Un’autonomia che supera di gran lunga quella necessaria per agenti AI destinati a compiti limitati. Per raggiungere lo scopo Imbue non lascia nulla al caso tra agenti sperimentali e prototipi, strumenti, addestramento ottimizzato fino alla ricerca teorica: [obiettivo](https://imbue.com) una AI capace di ragionamento simile all’uomo ed eventualmente sviluppare una AGI, l’intelligenza artificiale generale o forte in grado di emulare il cervello umano. La foto in apertura articolo è di [kiquebg](https://pixabay.com/it/users/kiquebg-5133331/?utm_source=link-attribution&utm_medium=referral&utm_campaign=image&utm_content=4256272) da [Pixabay](https://pixabay.com/it//?utm_source=link-attribution&utm_medium=referral&utm_campaign=image&utm_content=4256272) . Tutte le notizie che parlano di Intelligenza Artificiale [sono disponibili a partire da questa pagina](https://www.macitynet.it/tag/intelligenza-artificiale/) di macitynet. [Segui Macitynet su Google News](https://news.google.com/publications/CAAqBwgKMI3ThAswm72BAw?hl=it&gl=IT&ceid=IT%3Ait) ### Offerte Apple e Tecnologia Le offerte dell'ultimo minuto le trovi nel nostro canale Telegram [Iscriviti](https://t.me/offertemacitynet) #### Offerte Speciali [https://www.macitynet.it/offerte-amazon-23-settembre-2026/](https://www.macitynet.it/offerte-amazon-23-settembre-2026/) ### [Offerte Amazon 23 settembre: Apple, Sandisk, LEGO, Sennheiser, Dell, Switchbot, Xiaomi, Aqara](https://www.macitynet.it/offerte-amazon-23-settembre-2026/) 23 Set 2026 Le migliori offerte Amazon del 23 settembre 2026: dispositivi tech e accessori per la vita di tutti i giorni, selezionati da Macitynet. - Tags - [AI](https://www.macitynet.it/tag/ai/) - [Intelligenza Artificiale](https://www.macitynet.it/tag/intelligenza-artificiale/) Articolo precedente[Il portale Carfax svela ipoteche e restrizioni su veicoli usati](https://www.macitynet.it/portale-carfax-ipoteche-restrizioni-veicoli-usati/) Articolo successivo[Aggiornate Google Chrome, risolte importanti vulnerabilità](https://www.macitynet.it/aggiornate-google-chrome-risolte-importanti-vulnerabilita/) /** * RECOMMENDED CONFIGURATION VARIABLES: EDIT AND UNCOMMENT * THE SECTION BELOW TO INSERT DYNAMIC VALUES FROM YOUR * PLATFORM OR CMS. * * LEARN WHY DEFINING THESE VARIABLES IS IMPORTANT: * https://disqus.com/admin/universalcode/#configuration-variables */ /* var disqus_config = function () { // Replace PAGE_URL with your page's canonical URL variable this.page.url = ‘’; // Replace PAGE_IDENTIFIER with your page's unique identifier variable this.page.identifier = ‘’; */ (function() { // REQUIRED CONFIGURATION VARIABLE: EDIT THE SHORTNAME BELOW var d = document, s = d.createElement('script'); // IMPORTANT: Replace EXAMPLE with your forum shortname! s.src = 'https://macitynet.disqus.com/embed.js'; s.setAttribute('data-timestamp', +new Date()); (d.head || d.body).appendChild(s); })(); Please enable JavaScript to view the [comments powered by Disqus.](https://disqus.com/?ref_noscript)