Vergeet de spelers niet die honderden tieners Axie Infinity lieten spelen om Magic Love Potions voor hen te verdienen? Ja, dat was 4 jaar geleden. Nu kun je gewoon 100 Autonome Codec Operators trainen en laten draaien om voor jou te spelen ...en het monetiseren en aan anderen verkopen ✅ AI x Robotica Het AI x Robotica-narratief wordt echt heet met VLA-modellen ​ In deze fase van het AI-ecosysteem gebruiken de meeste protocollen en agenten tekstgebaseerde LLM-engines of statische screenshots om gegevens te interpreteren ​ Maar onthoud dat de meeste echte wereld geen API-toegang heeft, je hebt visie, beslissingen en acties nodig. De echte wereld moet in pixels worden gezien en dit is waar VLA-modellen in beeld komen ​ @Codecopenflow maakt automatisering van software en robotica mogelijk via visie met een techstack die vanaf nul is opgebouwd ✅ CODEC Operators ​ Operators zijn autonome software-agenten die taken kunnen uitvoeren via een waarnemen-redeneren-actie cyclus. Het vermogen om het scherm (of camerafeeds of sensorgegevens) te zien, stelt hen in staat om beslissingen te nemen die LLM's niet zouden kunnen maken ​ • Waarneming: Legt screenshots, camerafeeds of sensorgegevens vast • Redenering: Verwerkt observaties en instructies met behulp van visie-taalmodellen • Actie: Voert beslissingen uit via UI-interacties of hardwarecontrole ​ In een continue lus De Operators kunnen draaien op bare-metal servers, Virtuele Machines (op elk besturingssysteem), of zelfs op robots. ​ Elke operator krijgt automatisch een toegewijde rekenmachine (geïsoleerde VM of containerinstantie), en kan worden beveiligd door TEEs (hardware-niveau isolatie) voor gevoelige code en gegevens. ​ ✅ AI Intelligentie Laag ​ De Operators kunnen worden geconfigureerd om een of meer modellen (LLM of VLA) te gebruiken die als hun "brein" zijn gecombineerd ​ Bijvoorbeeld, het combineren van het goedkope Mixtral-8×7B-taalmodel met het open-source CogVLM-visiemodel stelt Operators in staat om tekst op het scherm te lezen en live scherm- of camerafeeds te interpreteren - allemaal tegen een fractie van de kosten van GPT-4. ​ Een VLA-model (Visie-Taal-Actie) stelt de agent in staat om visuele input te interpreteren en vervolgens een actie te beslissen op basis van wat hij ziet ✅ Gebruikscases ​ 🔹 Desktopautomatisering ​ Kan repetitieve kantoortaken automatiseren door GUIs te bedienen. Zoals het invullen van spreadsheets, het bijwerken van agenda's of andere taken die GUI-interactie vereisen ​ Kan UI-updates afhandelen omdat het daadwerkelijk kan zien wat het doet ​ 🔹 Gaming Agents ​ Operators kunnen spelers besturen of videogames testen. De agenten streamen het scherm en kunnen acties ondernemen op basis van wat ze zien door toetsenbord- of muisklikken naar het spel te sturen. ​ Kan worden gebruikt voor QA-testing, of zelfs geavanceerde NPC-tegenstanders of automatisering van web3-spellen ​ 🔹 Robotica ​ Operators kunnen fysieke robots besturen. De machine-laag zal verbinding maken met de hardware van een robot met sensoren en actuatoren, en de agent kan commando's sturen om een arm te bewegen of te navigeren. ​ Bijv. het kan een camerafeed van objecten die op een transportband bewegen vastleggen en acties ondernemen op basis van de beweging. Als er een obstakel op de weg is, kan de Operator het zien en de robot aansturen om het te vermijden ​ ✅ Gegevensverzameling en Onchain veiligheidsrails ​ Door de informatie van de Operators onchain naar Solana te brengen, kunnen ze onveranderlijke actielogs van alle uitgevoerde acties aanbieden ​ In de toekomst kunnen we een punt zien waarop robotica bedrijven verplicht zouden zijn om een token te staken om te garanderen dat hun Operators geen robot fysiek contact met een mens zouden laten maken boven een bepaalde kracht. Als ze dit schenden, zouden ze worden afgestraft voor een deel van de gestakte token (zoals EigenLayer / Symbiotic restaking) ​ ✅ Trainingsomgeving voor Robotica ​ Met Codec kunnen ongetrainde virtuele modellen worden ingezet in een dynamische, hoog-fidelity trainingsomgeving, zonder fysieke robot vereist. ​ Simuleer, train en verfijn complexe gedragingen op cloud-schaal, en breng die beleidslijnen vervolgens met vertrouwen over naar echte hardware. Trainingsomgevingen kunnen snel worden opgezet voor alle soorten Operators (Software, Gaming of Robotica) ​ ✅ Codec SDK ​ Een volledige SDK en API is ontwikkeld zodat ontwikkelaars hun Operators eenvoudig kunnen inzetten ​ ✅ Operator Marketplace ​ Operators kunnen (in de toekomst) worden verkocht op een aangepaste marktplaats. ​ Er zal een omzetverdeling zijn zodat je je VLA-operator kunt verzenden en monetiseren, wat betekent dat als je effectieve Operators traint, je extra inkomstenstromen kunt hebben ​ ✅ Concluderende gedachten ​ Ik denk dat we enorme ontwikkelingen in het VLA-veld in het komende jaar zullen zien. We hebben gezien hoe snel LLM's worden ontwikkeld, het is nog maar een paar jaar geleden dat GPT-1 werd gelanceerd. Robotica en Visie Modellen zullen zeer waarschijnlijk op een bepaald moment in deze cyclus een heet narratief worden, en ik wil vroeg gepositioneerd zijn ​ Oh, en heb ik al genoemd dat de mede-oprichters van Hugging Face en Elixir games komen 👀 ​ Opmerking: Slappjakke heeft grote $CODEC-tassen, en dit is een van die keren dat ik nog optimistischer werd terwijl ik deze thread schreef en nog meer toevoegde ​ Dit is zoals altijd geen financieel advies en een hoge risicoinvestering, dus doe je eigen onderzoek.