Che cos'è l'App Builder di OpenMind e come funziona?

OpenMind sta sviluppando strumenti volti a ridurre la complessità dello sviluppo di software per macchine autonome. Al centro di questo impegno c'è OM1, un sistema operativo open source progettato per robot e altri dispositivi intelligenti. L'azienda descrive spesso OM1 come una piattaforma robotica in stile Android, ovvero un runtime condiviso che astrae le differenze hardware consentendo agli sviluppatori di concentrarsi sul comportamento e sulla logica.

Di recente, OpenMind ha introdotto il Costruttore di app OpenMind, uno strumento di configurazione visiva nel suo portale per sviluppatori che consente agli sviluppatori di creare, modificare e distribuire applicazioni robotiche senza dover scrivere codice per le attività più comuni. L'annuncio, effettuato tramite l'account X ufficiale dell'azienda, è stato accompagnato da un breve video dimostrativo che mostrava il prodotto in funzione.

Questo articolo spiega cos'è OpenMind App Builder, come funziona a livello tecnico e dove si inserisce nel più ampio ecosistema OM1.

Qual è la missione più ampia di OpenMind?

L'obiettivo di OpenMind è quello di abilitare macchine autonome attraverso standard condivisi e software modulare. OM1 è rilasciato con licenza MIT ed è sviluppato apertamente su GitHub, dove ha attirato migliaia di utenti e contributi dalla community. Il runtime è progettato per supportare un'ampia gamma di robot, inclusi umanoidi, quadrupedi come la serie Unitree Go e piattaforme di ricerca mobili come TurtleBot.

. Azienda sostenuta da Pi Network Ventures è anche un contributore fondamentale della Fabric Foundation, un'organizzazione focalizzata sugli standard per il coordinamento di macchine autonome e l'identità on-chain. Fabric promuove specifiche come ERC 7777, che definisce come i comportamenti dei robot possono essere descritti e scambiati. L'App Builder si posiziona come un'interfaccia pratica su questi sistemi sottostanti.

Che cosa è OpenMind App Builder

OpenMind App Builder è un'interfaccia visiva low-code e no-code per la configurazione del comportamento del robot su OM1. È accessibile tramite il portale per sviluppatori OpenMind dopo aver creato un account. Invece di scrivere manualmente i file di configurazione, gli sviluppatori creano applicazioni assemblando nodi visivi che rappresentano le modalità del robot e definendo come tali modalità si connettono.

Ogni applicazione è rappresentata come un diagramma di flusso. I nodi corrispondono a stati comportamentali come saluto, navigazione o mappatura. Le transizioni tra i nodi definiscono quando e come il robot passa da un comportamento all'altro. La configurazione risultante viene salvata e può essere distribuita direttamente su hardware compatibile tramite il portale.

L'App Builder non sostituisce la programmazione tradizionale. Piuttosto, si basa sul sistema di configurazione di OM1 ed esporta file di configurazione strutturati che possono essere estesi o modificati nel codice per casi d'uso avanzati.

Scopri progetti promettenti...

Progetti promettenti...

(Annuncio pubblicitario)

L'articolo continua...

Concetti fondamentali e terminologia

Per comprendere App Builder è necessario avere familiarità con diversi concetti OM1.

Modalità

Una modalità è uno stato comportamentale discreto. Ad esempio, un robot potrebbe avere una modalità di benvenuto, una modalità di navigazione e una modalità di memoria. Ogni modalità definisce quale modello linguistico viene utilizzato, quali sensori sono attivi, quali azioni sono consentite e il contesto di sfondo disponibile.

Nodi e transizioni

Nell'editor visuale, ogni modalità appare come un nodo. Le transizioni sono collegamenti direzionali tra i nodi. Una transizione include condizioni che determinano quando il robot passa da una modalità all'altra. Gli sviluppatori possono specificare che un comando vocale attivi il passaggio dal comportamento inattivo alla navigazione.

Input, azioni e sfondi

Gli input rappresentano sensori o fonti di dati come microfoni, telecamere o feed basati sul web. Le azioni rappresentano output come comandi di movimento, sintesi vocale o scritture in memoria. Gli sfondi forniscono un contesto persistente, come la posizione GPS o lo stato di navigazione.

Ganci del ciclo di vita

Ogni modalità include hook del ciclo di vita, tra cui un prompt di sistema per il modello linguistico. Ciò consente agli sviluppatori di controllare il comportamento del modello in una determinata modalità utilizzando istruzioni in linguaggio naturale memorizzate come parte della configurazione.

Come funziona in pratica l'App Builder?

Il video dimostrativo pubblicato insieme all'annuncio mostra il flusso di lavoro completo, dall'inizio alla distribuzione.

Selezione di un robot

Quando uno sviluppatore apre l'App Builder, il primo passo è selezionare una macchina dalla barra laterale. Questo associa la configurazione a uno specifico profilo robot, inclusi i sensori e le azioni supportati. OM1 fornisce l'astrazione hardware tramite un livello dedicato, consentendo il riutilizzo della stessa configurazione di alto livello su macchine simili.

Modalità di costruzione visivamente

Dopo aver selezionato un robot, la tela si popola con un diagramma di flusso iniziale. Gli sviluppatori possono aggiungere nuove modalità cliccando sull'icona "più". Ogni nuova modalità apre un pannello di modifica in cui vengono definiti i parametri.

In questo pannello, lo sviluppatore seleziona un modello linguistico da un elenco a discesa. Le opzioni supportate includono diversi modelli commerciali e aperti. Successivamente vengono aggiunti gli input, come il riconoscimento vocale automatico per il controllo vocale o i feed della telecamera per la visione. Vengono quindi selezionate le azioni, come la navigazione o l'output vocale. È anche possibile abilitare sfondi come il GPS o il contesto di navigazione.

Tutte le modifiche vengono salvate immediatamente e la tela si aggiorna per riflettere la configurazione corrente.

Definizione delle transizioni

Una volta create le modalità, le transizioni vengono definite trascinando un connettore da un nodo all'altro. Si apre un editor di regole in cui vengono specificate le condizioni. Le condizioni possono fare riferimento a input, stati interni o altri segnali. Ad esempio, una regola di transizione potrebbe specificare che un comando vocale riconosciuto faccia sì che il robot esca dalla modalità inattiva e entri in una modalità di navigazione.

Una funzione di formattazione automatica riorganizza la tela per mantenere leggibile il diagramma di flusso man mano che cresce.

Distribuzione

Una volta completata la configurazione, lo sviluppatore può distribuirla direttamente dall'interfaccia. La configurazione viene caricata sul robot tramite il portale OpenMind e applicata senza trasferimenti manuali di file. Per i team che utilizzano OM1 localmente o in pipeline di produzione, la stessa configurazione può essere distribuita utilizzando strumenti da riga di comando o flussi di lavoro containerizzati.

Modelli e componenti supportati

Secondo OpenMind, l'App Builder supporta attualmente più di sei modelli linguistici, oltre quaranta input, trenta azioni e più di dieci contesti di background. Questi numeri riflettono il design modulare di OM1, in cui ogni componente è implementato come plugin.

I modelli linguistici possono essere scambiati senza dover riscrivere la logica dell'applicazione. Anche input e azioni sono intercambiabili, purché l'hardware sottostante li supporti. Questo approccio consente agli sviluppatori di sperimentare rapidamente diverse configurazioni, mantenendo una struttura coerente.

Integrazione con OM1 e flussi di lavoro basati su codice

Sebbene App Builder ponga l'accento sulla configurazione visiva, è progettato per integrarsi con la base di codice di OM1.

Gli sviluppatori possono esportare le configurazioni come file strutturati e memorizzarle nel controllo di versione. Gli utenti avanzati possono creare input e azioni personalizzati aggiungendo moduli Python alle directory appropriate nel repository OM1. Questi componenti personalizzati vengono quindi visualizzati nell'interfaccia di App Builder per la selezione.

Per l'implementazione su larga scala o su dispositivi edge come l'hardware Nvidia Jetson, OM1 supporta configurazioni basate su container. App Builder integra questi flussi di lavoro riducendo il tempo dedicato alla configurazione iniziale e all'iterazione.

Astrazione e portabilità dell'hardware

Uno degli obiettivi di progettazione principali di OM1 è l'agnosticismo hardware. L'App Builder riflette questo concetto esponendo solo comportamenti di alto livello anziché controlli motori di basso livello. Ad esempio, uno sviluppatore può configurare un'azione di navigazione senza specificare come si muovono le singole articolazioni.

Questa astrazione è implementata tramite un livello di astrazione hardware che collega le azioni OM1 a kit di sviluppo software specifici per robot, come ROS2, o alle API dei fornitori. Di conseguenza, la stessa logica applicativa può spesso essere riutilizzata su robot diversi con modifiche minime.

Limitazioni e considerazioni

L'App Builder è concepito per semplificare le attività più comuni, ma non elimina la necessità di un giudizio tecnico.

Alcune piattaforme hardware offrono un supporto limitato, a seconda delle capacità di elaborazione. Le funzionalità complete sono attualmente disponibili sui sistemi Nvidia più recenti, mentre le piattaforme più datate potrebbero richiedere compromessi. Il runtime di base di OM1 limita inoltre l'accesso diretto a Internet per motivi di sicurezza e affidabilità, il che influisce sull'utilizzo delle API esterne.

Per un'autonomia complessa, gli sviluppatori devono combinare le configurazioni di App Builder con simulazione, apprendimento per rinforzo e test approfonditi. La documentazione di OpenMind sottolinea l'importanza di iniziare con comportamenti semplici e di convalidarli in ambienti simulati prima di distribuirli su macchine reali.

Conclusione

OpenMind App Builder è uno strumento di configurazione visuale che si basa sul runtime OM1 e semplifica la creazione e l'implementazione di applicazioni robotiche. Rappresentando il comportamento del robot come modalità, transizioni e componenti modulari, consente agli sviluppatori di assemblare applicazioni funzionali senza dover scrivere codice per ogni fase.

Il suo valore risiede nella riduzione degli attriti di configurazione, pur rimanendo compatibile con i flussi di lavoro basati su codice. Per i team che lavorano su OM1, l'App Builder offre un modo strutturato per progettare, testare e implementare il comportamento dei robot su diverse piattaforme hardware. Anziché sostituire lo sviluppo tradizionale, funge da interfaccia che rende il sistema sottostante più accessibile e più facile da comprendere.

Fonti:

• X Post: Annuncio di OpenMind App Builder 
• Portale per gli sviluppatori: Crea app su OpenMind