Robotje autonoom rond laten rijden

[Monthy_23]

Een open vraag aan iedereen die er iets nuttigs over te zeggen heeft.

Ik ben al een tijdje aan het stoeien met een NVIDIA Jetson Orin Nano 8GB (super dev kit) en het doel is een klein, rijdend robotje autonoom rond laten rijden en keuzes te laten maken. Dat was een leuk plan, maar al snel kom je op het vlak van ROS2 dus het schrijven van losse nodes (python OOP), topics, producers en subscribers. Dat gecombineerd met de data van de 4 motoren, camera, sensors en de gyro's die de plaatsing van de rover communiceren wordt dit al gauw veel. Bijna te veel. Al deze lokale data opslaan in een lokale module die je kan downloaden in een ander systeem dat data chunkt --> vector embedding --> vector database en vanuit deze BD de informatie via cosine simularity tevoorschijn tovert wanneer er beslissingen genomen moeten worden (vector embedding aan twee kanten). Puur ter informatie: uiteindelijk kwam ik tot de conclusie dat de communicatie tussen de robot en de "Master PC" met de vector BD en de metadata niet ideaal was. En veel te traag om te kunnen reageren op een bewegend object. Dus, een quick access vector database (QAVD), gefilterd uit de vector database d.m.v. een ander consolidatie proces dat de grote gelijke noemer uit meerdere "gelijkende" vectors samenvoegd op basis van hoge waarschijnlijkheid (maar niet op basis van cosine simularity) .

Maar ik dwaal af... Heb ik dit allemaal werkend? Nee, totaal niet. Ik ben heel erg veel aan het leren op het gebied van code (Python), logica en architectuur. Om de bijkomende ellende maar niet te noemen (PyTorch, MCP servers, API keys en SQL(ite)).

Is er iemand die hier al mee bezig is? Of iemand die zich (net als ik) vreselijk verkeken heeft op de complexiteit van zo'n samenwerkend systeem dat als een orkest samen moet werken om het ding te doen dat je wil dat het doet.

Ben jij bezig met loale AI/ Jetson Nano/ ROS2 of Python (OOP) of iets in deze richting? Geef even een gil ofzo. Ik moet nu alles alleen doen en dat kan knap eenzaam zijn. Vooral als je zelf ook nog maar net begonnen bent (5 maanden geleden begon ik met "Hello World").

Laat wat van je horen!

[Zorg]

@Monthy_23 ik ben er (nog) niet mee bezig maar is wel iets waar ik al een tijdje wat voorwerk voor aan het doen ben. Maar eigenlijk alleen nog op het gebied van de hardware (dus welke base) en totaal nog niet aan de softwarezijde! Maar ik had zelf ook zeker niet gedacht dat dat het probleem zou zijn! Mijn gedachten zijn een iets grotere base met daarop een deftige powerbank + mini pc als laag. Die zou dan de sensors aanspreken en alles besturen. Ik weet niet wat je toepassing is, in mijn geval rijden volgens een bepaalde koers en camera voor detectie.
Ik wil een onkruidrobot maken die precisie injectie kan doen
Ben benieuwd naar je doel / toepassing!

[Monthy_23]

@Zorg Ik gebruik een heel klein robotje. Gewoon uit de winkel. Waveshare UGV 4wd Rover (uitvoering met 6 wielen). Zit ook al een pan/ tilt (AI) camera op. Is een dual control systeem. Ingebouwd esp32 motor board doet de besturing van de Rover en basis sensoren. Je hoeft er alleen nog een Pi5 of Jetson Nano in te schroeven. En rijden deed hij zo, geen punt. Maar het is de bedoeling dat hij zelf rond gaat rijden, met als doel "de wereld ervaren". Klinkt hippie achtig, maar dat is niet zo. Uiteindelijk moet er een db opgebouwd worden die dient als persistent memory. En de vraag is, veranderd een langetermijngeheugen het gedrag van een AI model? Maar jouw project klinkt meer als iets dat op de TU in Delft gebouwd wordt. Veel hardware werk. Ik moet zeggen dat hardware bouwen mij makkelijker af gaat dan software schtijven, Maar bij gebrek aan ruimte om echt zelf iets te bouwen (en de aanzienlijke kosten), moet het even zo. Hoe groot is jouw robot eigenlijk)

[F_J_K]

offtopic:
Afgesplitst van Ontwikkelingen omtrent Artificial Intelligence - losse vragen graag in losse topics. En, welkom!