Management samenvatting: Ik zoek een tool om specifieke informatie uit plaatjes te halen. De tool moet lokaal kunnen draaien, ik heb er geen moeite mee als het een AI tool is (mijn RTX4070 heeft daar ook niet zo'n moeite mee ;-))
Even voor de achtergrond;
Ik werk als Data Engineer. Mijn dagelijks werk bestaat grotendeels uit het bouwen van extraction tools in Python en transformation in SQL. De laatste tijd speelt Copilot daar steeds een grotere rol in. De AI discussie is niet zo heel zinnig hier; ik weet waar het op dit moment waarde voor mij toevoegd.
Om eens te kijken hoe AI meer waarde voor mij zou kunnen toevoegen ben ik als hobby project gaan "vibe coden"; doel om zelf geen letter code te schrijven maar alles door Copilot te laten doen.
Mijn hobby is Star Fleet Battles. Een bordspel gebasseerd op de originele Star Trek TV serie. Men vliegt met scheepjes over het bord en schiet elkaar aan gort (pun intended).
Copilot heeft een leuk tooltje voor me gebouwd waarmee ik aan kan geven waar de scheepjes zijn op het bord en die dan uitrekend hoeveel schade ze aan elkaar kunnen doen, op basis van een definitie van welke wapens van elk schip welke kant op kunnen schieten. Dit laatste trekt het tooltje uit een JSON file die een tekstuele beschrijving geeft van het zogenaamde SSD. Ieder uniek schip heeft een unieke SSD. Deze SSD is een grafische weergave.
En nu komt het probleem: Ik heb honderden van deze SSDs. Daar moeten dus honderden bijbehorende JSON files uit komen. Ik heb Copilot één SSD laten bekijken en zijn herkenning van de wapens was op zijn hoogst fragiel te noemen. Massa-analyse kan Copilot zowieso niet. Hij is simpelweg niet in staat om plaatjes te processen. Welke tool zouden jullie hier voor aanraden?
Snippet van een SSD:
:strip_exif()/f/image/NHDEKDD2rJD89iwJxsnWhPTo.png?f=user_large)
Hier zou dus uit moeten komen:
4 Photon FA
2 PH-1 FH
2 PH-1 RS
Relevante software en hardware die ik gebruik
Windows 11
VSCode met Copilot maar ik sta open voor alles
Wat ik al gevonden of geprobeerd heb
Als ik op het Internet rond zoek vindt ik heel veel tools die plaatjes kunnen genereren of plaatjes kunnen taggen met grove beschrijvingen. Ik heb nog niets gevonden wat plaatjes kan processen zoals hierboven beschreven.
Advies hoe ik kan zoeken is absoluut welkom; het kan zijn dat wat ik wil gewoon een naam heeft. Oh ja, OCR tools kunnen hier ook niet mee overweg.
Even voor de achtergrond;
Ik werk als Data Engineer. Mijn dagelijks werk bestaat grotendeels uit het bouwen van extraction tools in Python en transformation in SQL. De laatste tijd speelt Copilot daar steeds een grotere rol in. De AI discussie is niet zo heel zinnig hier; ik weet waar het op dit moment waarde voor mij toevoegd.
Om eens te kijken hoe AI meer waarde voor mij zou kunnen toevoegen ben ik als hobby project gaan "vibe coden"; doel om zelf geen letter code te schrijven maar alles door Copilot te laten doen.
Mijn hobby is Star Fleet Battles. Een bordspel gebasseerd op de originele Star Trek TV serie. Men vliegt met scheepjes over het bord en schiet elkaar aan gort (pun intended).
Copilot heeft een leuk tooltje voor me gebouwd waarmee ik aan kan geven waar de scheepjes zijn op het bord en die dan uitrekend hoeveel schade ze aan elkaar kunnen doen, op basis van een definitie van welke wapens van elk schip welke kant op kunnen schieten. Dit laatste trekt het tooltje uit een JSON file die een tekstuele beschrijving geeft van het zogenaamde SSD. Ieder uniek schip heeft een unieke SSD. Deze SSD is een grafische weergave.
En nu komt het probleem: Ik heb honderden van deze SSDs. Daar moeten dus honderden bijbehorende JSON files uit komen. Ik heb Copilot één SSD laten bekijken en zijn herkenning van de wapens was op zijn hoogst fragiel te noemen. Massa-analyse kan Copilot zowieso niet. Hij is simpelweg niet in staat om plaatjes te processen. Welke tool zouden jullie hier voor aanraden?
Snippet van een SSD:
:strip_exif()/f/image/NHDEKDD2rJD89iwJxsnWhPTo.png?f=user_large)
Hier zou dus uit moeten komen:
4 Photon FA
2 PH-1 FH
2 PH-1 RS
Relevante software en hardware die ik gebruik
Windows 11
VSCode met Copilot maar ik sta open voor alles
Wat ik al gevonden of geprobeerd heb
Als ik op het Internet rond zoek vindt ik heel veel tools die plaatjes kunnen genereren of plaatjes kunnen taggen met grove beschrijvingen. Ik heb nog niets gevonden wat plaatjes kan processen zoals hierboven beschreven.
Advies hoe ik kan zoeken is absoluut welkom; het kan zijn dat wat ik wil gewoon een naam heeft. Oh ja, OCR tools kunnen hier ook niet mee overweg.