Internetdatabase omzetten naar excel? Hoe?

[Jivecar]

Goed, ik vrees dat mijn vraag hier verkeerd staat maar had ook geen idee in welke categorie hij wel moest staan: dus dan maar mijn favoriete SG

Voor mijn scriptie wil ik een kwantitatief onderzoek uitvoeren.
Mijn populatie is: ingeschreven registeraccountants werkzaam op interne accountantsdiensten bij niet beursgenoteerde bedrijven.

Mijn bron is het openbare register van www.nivra.nl (http://www.nivra.nl/De_Registeraccountant/Het_Register/).

Maar hier komt het probleem waarvoor ik een oplossing voor nodig heb:
Het register is openbaar, je kunt dmv zoeken (bv A, voor alle A????? achternamen etc) en dan doorklikken naar openbare contactgegevens van de persoon. Dit is zeer arbeidsintensief, dus wat ik zoek is een manier om alle gegevens over te zetten in excel ingedeeld naar kolommen. Op basis hiervan kan ik dan mijn verdere selectie maken.

Als ik over een naam ga met de muis zie ik:
http://www.nivra.nl/De_Re...r/detail.asp?nummer=11131

En ieder persoon heeft een ander nummer.

Is het mogelijk om via één of andere manier (programma) de gegevens van nummer 1 t/m ????? op te slaan in een excel bestand (per rij 1 naam).

[Verwijderd]

Als die tabel openbaar is, zou ik (begeleid van een duidelijke onderbouwing, doel van je scriptie, etc) de Nivra benaderen. Misschien willen ze wel een export toesturen/afstaan.

En nog meer interessante informatie misschien.

[Jivecar]

Verwijderd schreef op maandag 16 oktober 2006 @ 12:14:
Als die tabel openbaar is, zou ik (begeleid van een duidelijke onderbouwing, doel van je scriptie, etc) de Nivra benaderen. Misschien willen ze wel een export toesturen/afstaan.

En nog meer interessante informatie misschien.

Ongetwijfeld, maar mogelijk is dit sneller.

[MadMurdock]

Uiteraard, zo te zien is het zelfs vrij simpel;
1. voer zoektermen in; (bijvoorbeeld een array met de waardes a-z);
2. lees de tabel uit (php oid); iedere rij uit de tabel is blijkbaar een interessante waarde per bedrijf;
3. schrijf de uitvoer naar een csf, welke je kan importeren in excel.

Dus; succes ermee. Het is hier geen scriptdatabase, dus je zult wel zelf een poging moeten gaan wagen. (En dan is SG waarschijnlijk niet de goede plek..)

[sariel]

Eeuhm......

Niet zo lastig. Maak een script dat het volgende doet:
1: Start getalletje bij 1
2: Open de url http://www.nivra.nl/......detail.asp?nummer=1
3: Parse de HTML zodat je de gegevens krijgt
4: Output de gegevens naar een csv bestandje: Naam;Lidnummer;Inschrijfdatum;Functie;Telwerk;Faxwerk;Emailwerk
5: Ga naar 1, verhoog getalletje

Als je alle accountants wel gezien hebt, stop je het scriptje en open je het csv bestand in je favoriete bekijker. Excel, Notepad, Openoffice, watooit.

[StevenK]

hou er rekening mee dat wanneer je op deze manier die database leegtrekt, dat juridisch niet echt heel erg toegestaan is.

[The Eagle]

StevenK schreef op maandag 16 oktober 2006 @ 13:34:
hou er rekening mee dat wanneer je op deze manier die database leegtrekt, dat juridisch niet echt heel erg toegestaan is.

Nofi, maar (afgezien van het feit dat ik weinig van programmeren weet) ik zou de onderbouwing hiervan dan (ook voor de TS) wel even willen zien

[Jivecar]

The Eagle schreef op maandag 16 oktober 2006 @ 13:43:
[...]


Nofi, maar (afgezien van het feit dat ik weinig van programmeren weet) ik zou de onderbouwing hiervan dan (ook voor de TS) wel even willen zien

Het register is openbaar, de Wet op de Registeraccountant bepaald dat.
Het register is zowel digitaal (op de website) als in een soort telefoongids verkrijgbaar.
Juridisch gezien is er mi niets verboden om alles samen te vatten in Excel.

[Oscar Mopperkont]

Jivecar schreef op maandag 16 oktober 2006 @ 13:52:
Het register is openbaar, de Wet op de Registeraccountant bepaald dat.
Het register is zowel digitaal (op de website) als in een soort telefoongids verkrijgbaar.
Juridisch gezien is er mi niets verboden om alles samen te vatten in Excel.

Als het een database is die beschermd wordt door de Databankwet, dan mag je hem niet zomaar leegtrekken. Of het dat is, kan ik niet beoordelen en is ook niet makkelijk te beoordelen. Verder is het de vraag of die gasten er een probleem mee hebben dat je er dit mee doet en ik ken de wet niet uit mijn hoofd, maar misschien mag je hem voor "wetenschappelijk" gebruik ook weer wel leegtrekken.

[Rukapul]

offtopic:
Gezien de intenties van de TS move ik deze naar CSA (ondanks de juridische aspecten)

[StevenK]

The Eagle schreef op maandag 16 oktober 2006 @ 13:43:
[...]


Nofi, maar (afgezien van het feit dat ik weinig van programmeren weet) ik zou de onderbouwing hiervan dan (ook voor de TS) wel even willen zien

Zoals Oscar Mopperkont al aangeeft: *elke* database valt onder de databankwet.

[Oscar Mopperkont]

StevenK schreef op maandag 16 oktober 2006 @ 15:52:
Zoals Oscar Mopperkont al aangeeft: *elke* database valt onder de databankwet.

Dat is dus juist net niet wat ik aangeef

Niet elke database is een database in de zin van de Databankwet. Er moet wel substantieel in geïnvesteerd zijn etc.. dat is een heel moeilijk te beantwoorden vraag en ik ben er niet voldoende in thuis om zo uit mijn hoofd even te zeggen hoe en wat. Je kunt wel in de wet zelf kijken, maar dan weet je nog niet genoeg, aangezien in de jurisprudentie pas duidelijk wordt hoe het uitgelegd moet worden.

[StevenK]

Oscar Mopperkont schreef op maandag 16 oktober 2006 @ 15:55:
[...]

Dat is dus juist net niet wat ik aangeef

Dan was ik misschien iets te kort door de bocht Komt door de antibiotica. vies spul.

Niet elke database is een database in de zin van de Databankwet. Er moet wel substantieel in geïnvesteerd zijn etc.. dat is een heel moeilijk te beantwoorden vraag en ik ben er niet voldoende in thuis om zo uit mijn hoofd even te zeggen hoe en wat. Je kunt wel in de wet zelf kijken, maar dan weet je nog niet genoeg, aangezien in de jurisprudentie pas duidelijk wordt hoe het uitgelegd moet worden.

Zelfs zonder de databankwet kun je imho overtuigend argumenteren dat 'nu de database kennelijk bedoeld is om een enkel adresgegeven op te zoeken en er geen faciliteit is om de hele database te downloaden, het geautomatiseerd downloaden van de gehele database in strijd is met het betamelijke en derhalve onrechtmatig'.

[Oscar Mopperkont]

StevenK schreef op maandag 16 oktober 2006 @ 16:10:
Zelfs zonder de databankwet kun je imho overtuigend argumenteren dat 'nu de database kennelijk bedoeld is om een enkel adresgegeven op te zoeken en er geen faciliteit is om de hele database te downloaden, het geautomatiseerd downloaden van de gehele database in strijd is met het betamelijke en derhalve onrechtmatig'.

Dat kun je altijd beargumenteren, maar de vraag is of je er ver mee komt bij de rechter, want dan is het kennelijk vrij overbodig geweest om een definitie van databank in de DW op te nemen, als je via de algemene od-actie op hetzelfde resultaat terechtkomt, namelijk dat je database beschermd wordt. Ik zeg niet dat het uitgesloten is, maar ik geef je ook niet veel kans, want ik weet wel dat de Nederlandse rechter niet snel aanneemt dat de databank bescherming krijgt van de DW.

[Jivecar]

Los van het juridisch geleuter probeer ik even terug te komen naar de kern van het topic.
Het omzetten van de dbase naar excel.

De organisatie is reeds aangeschreven, echter zonder reactie.

Het meest makkelijke lijkt mij het ophogen van dat id nummer met 1 en dan wegschrijven. Ik heb echter geen idee hoe of wat dat moet. Ja ik weet dat je hier op GoT eerst zelf moet proberen, maar als je niet weet waar, hoe, ... dan houdt het gewoon even op.

Is er hulp?

[F_J_K]

Antwoord is toch al gegeven?

MadMurdock schreef op maandag 16 oktober 2006 @ 12:19:
Uiteraard, zo te zien is het zelfs vrij simpel;
1. voer zoektermen in; (bijvoorbeeld een array met de waardes a-z);
2. lees de tabel uit (php oid); iedere rij uit de tabel is blijkbaar een interessante waarde per bedrijf;
3. schrijf de uitvoer naar een csf, welke je kan importeren in excel.

Dus; succes ermee. Het is hier geen scriptdatabase, dus je zult wel zelf een poging moeten gaan wagen.

Als je helemaal geen kaas hebt gegeten van scripting ("elke" taal zou moeten voldoen) en niet meteen een boek er bij wilt pakken: neem contact op met de eigenaren of neem (buiten GoT) contact op met iemand die dit voor je wilt doen.

[barfieldmv]

Jivecar schreef op maandag 23 oktober 2006 @ 11:46:
Los van het juridisch geleuter probeer ik even terug te komen naar de kern van het topic.
Het omzetten van de dbase naar excel.

De organisatie is reeds aangeschreven, echter zonder reactie.

Het meest makkelijke lijkt mij het ophogen van dat id nummer met 1 en dan wegschrijven. Ik heb echter geen idee hoe of wat dat moet. Ja ik weet dat je hier op GoT eerst zelf moet proberen, maar als je niet weet waar, hoe, ... dan houdt het gewoon even op.

Is er hulp?

Het is gewoon veel werk om te doen, probeer een it'er te vinden met te veel tijd die het voor je (wil) doen.

[Oscar Mopperkont]

Jivecar schreef op maandag 23 oktober 2006 @ 11:46:
Los van het juridisch geleuter...

Daar wordt op GoT vaak toch wat anders over gedacht

Laatst kreeg ik een slotje omdat het vragen naar waar ik een bepaalde reclame, iets waarvan duidelijk is dat de uitgever wil dat die verspreid wordt, kon downloaden in een betere kwaliteit dan op de website stond, werd bestempeld als een warez-request...En hoewel het op voorhand zeker niet gezegd kan worden, zou dit ook wel eens op een zelfde wijze bestempeld kunnen worden door een modje.