AI-For-Beginners/translations/nl/lessons/6-Other/23-MultiagentSystems

Multi-Agent Systemen

Een van de mogelijke manieren om intelligentie te bereiken is de zogenaamde emergente (of synergetische) benadering, die gebaseerd is op het feit dat het gecombineerde gedrag van veel relatief eenvoudige agenten kan resulteren in een algeheel complexer (of intelligenter) gedrag van het systeem als geheel. Theoretisch is dit gebaseerd op de principes van Collectieve Intelligentie, Emergentisme en Evolutionaire Cybernetica, die stellen dat systemen op een hoger niveau een soort toegevoegde waarde verkrijgen wanneer ze op de juiste manier worden gecombineerd vanuit systemen op een lager niveau (het zogenaamde principe van metasysteemtransitie).

Pre-lecture quiz

De richting van Multi-Agent Systemen ontstond in de AI in de jaren 1990 als reactie op de groei van het internet en gedistribueerde systemen. Een van de klassieke AI-handboeken, Artificial Intelligence: A Modern Approach, richt zich op het perspectief van klassieke AI vanuit het oogpunt van multi-agent systemen.

Centraal in de multi-agent benadering staat het concept van een Agent - een entiteit die leeft in een bepaalde omgeving, die het kan waarnemen en waarop het kan handelen. Dit is een zeer brede definitie, en er kunnen veel verschillende soorten en classificaties van agenten zijn:

• Op basis van hun vermogen om te redeneren:
  • Reactieve agenten hebben meestal een eenvoudig verzoek-antwoord type gedrag
  • Deliberatieve agenten maken gebruik van een vorm van logisch redeneren en/of planningsmogelijkheden
• Op basis van de plaats waar de agent zijn code uitvoert:
  • Statische agenten werken op een toegewijde netwerknode
  • Mobiele agenten kunnen hun code verplaatsen tussen netwerknodes
• Op basis van hun gedrag:
  • Passieve agenten hebben geen specifieke doelen. Dergelijke agenten kunnen reageren op externe prikkels, maar zullen zelf geen acties initiëren.
  • Actieve agenten hebben bepaalde doelen die ze nastreven
  • Cognitieve agenten betrekken complexere planning en redenering

Multi-agent systemen worden tegenwoordig gebruikt in een aantal toepassingen:

• In games maken veel niet-speler personages gebruik van een vorm van AI en kunnen ze worden beschouwd als intelligente agenten
• In videoproductie wordt het renderen van complexe 3D-scènes met menigten meestal gedaan met behulp van multi-agent simulatie
• In systeemmodellering wordt de multi-agent benadering gebruikt om het gedrag van een complex model te simuleren. Bijvoorbeeld, de multi-agent benadering is succesvol gebruikt om de verspreiding van COVID-19 wereldwijd te voorspellen. Een soortgelijke aanpak kan worden gebruikt om verkeer in een stad te modelleren en te zien hoe het reageert op veranderingen in verkeersregels.
• In complexe automatiseringssystemen kan elk apparaat functioneren als een onafhankelijke agent, wat het hele systeem minder monolithisch en robuuster maakt.

We zullen niet veel tijd besteden aan het diep ingaan op multi-agent systemen, maar één voorbeeld van Multi-Agent Modellering bekijken.

NetLogo

NetLogo is een multi-agent modelleringsomgeving gebaseerd op een aangepaste versie van de Logo programmeertaal. Deze taal is ontwikkeld om programmeerconcepten aan kinderen te leren en stelt je in staat een agent genaamd turtle te besturen, die kan bewegen en een spoor achterlaat. Dit maakt het mogelijk om complexe geometrische figuren te creëren, wat een zeer visuele manier is om het gedrag van een agent te begrijpen.

In NetLogo kunnen we veel turtles creëren met behulp van het create-turtles commando. We kunnen vervolgens alle turtles opdracht geven om acties uit te voeren (in het onderstaande voorbeeld - beweeg 10 punten vooruit):

create-turtles 10
ask turtles [
  forward 10
]

Natuurlijk is het niet interessant als alle turtles hetzelfde doen, dus we kunnen ask gebruiken om groepen turtles aan te spreken, bijvoorbeeld degenen die zich in de buurt van een bepaald punt bevinden. We kunnen ook turtles van verschillende rassen creëren met het breed [cats cat] commando. Hier is cat de naam van een ras, en we moeten zowel het enkelvoud als het meervoud specificeren, omdat verschillende commando's verschillende vormen gebruiken voor duidelijkheid.

✅ We zullen niet ingaan op het leren van de NetLogo-taal zelf - je kunt de briljante Beginner's Interactive NetLogo Dictionary raadplegen als je meer wilt leren.

Je kunt NetLogo downloaden en installeren om het uit te proberen.

Modellenbibliotheek

Een geweldig aspect van NetLogo is dat het een bibliotheek bevat met werkende modellen die je kunt proberen. Ga naar File → Models Library, en je hebt veel categorieën modellen om uit te kiezen.

Een screenshot van de modellenbibliotheek door Dmitry Soshnikov

Je kunt een van de modellen openen, bijvoorbeeld Biology → Flocking.

Hoofdprincipes

Na het openen van het model kom je op het hoofdscherm van NetLogo. Hier is een voorbeeldmodel dat de populatie van wolven en schapen beschrijft, gegeven eindige middelen (gras).

Screenshot door Dmitry Soshnikov

Op dit scherm kun je zien:

• Het Interface gedeelte dat bevat:
  • Het hoofdveld, waar alle agenten leven
  • Verschillende bedieningselementen: knoppen, schuifregelaars, etc.
  • Grafieken die je kunt gebruiken om parameters van de simulatie weer te geven
• Het Code tabblad dat de editor bevat, waar je NetLogo-programma's kunt typen

In de meeste gevallen bevat de interface een Setup knop, die de simulatiestatus initialiseert, en een Go knop die de uitvoering start. Deze worden afgehandeld door de bijbehorende handlers in de code die er als volgt uitzien:

to go [
...
]

De wereld van NetLogo bestaat uit de volgende objecten:

• Agenten (turtles) die over het veld kunnen bewegen en iets kunnen doen. Je geeft agenten opdrachten met behulp van ask turtles [...] syntax, en de code tussen de haakjes wordt uitgevoerd door alle agenten in turtle mode.
• Patches zijn vierkante gebieden van het veld waarop agenten leven. Je kunt verwijzen naar alle agenten op dezelfde patch, of je kunt patchkleuren en andere eigenschappen wijzigen. Je kunt ook ask patches gebruiken om iets te doen.
• Observer is een unieke agent die de wereld bestuurt. Alle knophandlers worden uitgevoerd in observer mode.

✅ Het mooie van een multi-agent omgeving is dat de code die wordt uitgevoerd in turtle mode of patch mode tegelijkertijd door alle agenten parallel wordt uitgevoerd. Dus door een beetje code te schrijven en het gedrag van een individuele agent te programmeren, kun je complex gedrag van het simulatiesysteem als geheel creëren.

Flocking

Als voorbeeld van multi-agent gedrag, laten we Flocking bekijken. Flocking is een complex patroon dat erg lijkt op hoe vogelzwermen vliegen. Als je ze ziet vliegen, kun je denken dat ze een soort collectief algoritme volgen, of dat ze een vorm van collectieve intelligentie bezitten. Echter, dit complexe gedrag ontstaat wanneer elke individuele agent (in dit geval, een vogel) alleen andere agenten in een korte afstand observeert en drie eenvoudige regels volgt:

• Alignement - het stuurt naar de gemiddelde richting van naburige agenten
• Cohesie - het probeert te sturen naar de gemiddelde positie van buren (langeafstandsaantrekking)
• Scheiding - wanneer het te dicht bij andere vogels komt, probeert het weg te bewegen (korteafstandafstoting)

Je kunt het flocking voorbeeld uitvoeren en het gedrag observeren. Je kunt ook parameters aanpassen, zoals mate van scheiding, of het zichtbereik, dat bepaalt hoe ver elke vogel kan zien. Merk op dat als je het zichtbereik verlaagt tot 0, alle vogels blind worden en het flocking stopt. Als je scheiding verlaagt tot 0, verzamelen alle vogels zich in een rechte lijn.

✅ Schakel over naar het Code tabblad en bekijk waar de drie regels van flocking (alignement, cohesie en scheiding) in de code zijn geïmplementeerd. Merk op hoe we alleen verwijzen naar die agenten die in zicht zijn.

Andere modellen om te bekijken

Er zijn nog een paar interessante modellen waarmee je kunt experimenteren:

• Art → Fireworks laat zien hoe een vuurwerk kan worden beschouwd als een collectief gedrag van individuele vuurstromen
• Social Science → Traffic Basic en Social Science → Traffic Grid tonen het model van stadsverkeer in een 1D en 2D raster met of zonder verkeerslichten. Elke auto in de simulatie volgt de volgende regels:
  • Als de ruimte voor hem leeg is - versnellen (tot een bepaalde maximale snelheid)
  • Als het een obstakel voor zich ziet - remmen (en je kunt aanpassen hoe ver een bestuurder kan zien)
• Social Science → Party laat zien hoe mensen samenkomen tijdens een cocktailparty. Je kunt de combinatie van parameters vinden die leidt tot de snelste toename van de groepsgeluk.

Zoals je kunt zien uit deze voorbeelden, kunnen multi-agent simulaties een nuttige manier zijn om het gedrag van een complex systeem te begrijpen dat bestaat uit individuen die dezelfde of vergelijkbare logica volgen. Het kan ook worden gebruikt om virtuele agenten te besturen, zoals NPCs in computerspellen, of agenten in 3D geanimeerde werelden.

Deliberatieve Agenten

De hierboven beschreven agenten zijn heel eenvoudig en reageren op veranderingen in de omgeving met behulp van een soort algoritme. Als zodanig zijn ze reactieve agenten. Soms kunnen agenten echter redeneren en hun acties plannen, in welk geval ze deliberatieve agenten worden genoemd.

Een typisch voorbeeld zou een persoonlijke agent zijn die een instructie ontvangt van een mens om een vakantie te boeken. Stel dat er veel agenten op het internet leven die hem kunnen helpen. Het moet dan contact opnemen met andere agenten om te zien welke vluchten beschikbaar zijn, wat de hotelprijzen zijn voor verschillende data, en proberen de beste prijs te onderhandelen. Wanneer het vakantieplan compleet is en bevestigd door de eigenaar, kan het doorgaan met boeken.

Om dit te doen, moeten agenten communiceren. Voor succesvolle communicatie hebben ze nodig:

• Sommige standaardtalen om kennis uit te wisselen, zoals Knowledge Interchange Format (KIF) en Knowledge Query and Manipulation Language (KQML). Deze talen zijn ontworpen op basis van Speech Act theory.
• Deze talen moeten ook enkele protocollen voor onderhandelingen bevatten, gebaseerd op verschillende veilingtypes.
• Een gemeenschappelijke ontologie om te gebruiken, zodat ze naar dezelfde concepten verwijzen en hun semantiek begrijpen
• Een manier om te ontdekken wat verschillende agenten kunnen doen, ook gebaseerd op een soort ontologie

Deliberatieve agenten zijn veel complexer dan reactieve, omdat ze niet alleen reageren op veranderingen in de omgeving, maar ook acties moeten kunnen initiëren. Een van de voorgestelde architecturen voor deliberatieve agenten is de zogenaamde Belief-Desire-Intention (BDI) agent:

• Beliefs vormen een set kennis over de omgeving van een agent. Het kan worden gestructureerd als een kennisbank of een set regels die een agent kan toepassen op een specifieke situatie in de omgeving.
• Desires definiëren wat een agent wil doen, d.w.z. zijn doelen. Bijvoorbeeld, het doel van de persoonlijke assistent-agent hierboven is om een reis te boeken, en het doel van een hotelagent is om winst te maximaliseren.
• Intentions zijn specifieke acties die een agent plant om zijn doelen te bereiken. Acties veranderen meestal de omgeving en veroorzaken communicatie met andere agenten.

Er zijn enkele platforms beschikbaar voor het bouwen van multi-agent systemen, zoals JADE. Dit artikel bevat een overzicht van multi-agent platforms, samen met een korte geschiedenis van multi-agent systemen en hun verschillende gebruiksscenario's.

Conclusie

Multi-Agent systemen kunnen zeer verschillende vormen aannemen en worden gebruikt in veel verschillende toepassingen. Ze richten zich allemaal op het eenvoudigere gedrag van een individuele agent en bereiken complexer gedrag van het algehele systeem door synergetisch effect.

🚀 Uitdaging

Breng deze les naar de echte wereld en probeer een multi-agent systeem te conceptualiseren dat een probleem kan oplossen. Wat zou een multi-agent systeem bijvoorbeeld moeten doen om een schoolbusroute te optimaliseren? Hoe zou het kunnen werken in een bakkerij?

Post-lecture quiz

Review & Zelfstudie

Bekijk het gebruik van dit type systeem in de industrie. Kies een domein zoals productie of de videogame-industrie en ontdek hoe multi-agent systemen kunnen worden gebruikt om unieke problemen op te lossen.

NetLogo Opdracht

---