Data van website gebruiken voor eigen app. (deel 2)

[pkouwer]

hoi,

zojuist schreef ik het volgende:

ik vraag me het volgende af: stel ik wil een programma maken met de TV-gids (lopende topic, maar het is maar een voorbeeld) in een VB-progje. Hoe kan ik dan de data (tijden, zenders,programma's etc) naar mijn appl. downloaden, hoe kan ik zien hoe de datastructuur etc. er uit ziet ?

Wie-o-wie kan mij verblijden met wat info.

Nogmaals het gaat alleen om het principe en bovenstaande is maar een voorbeeld.

OK, het gaat er dus niet om dat dit met XML werkt, maar hoe ik er achter kan komen hoe de database heet, tabellenstructuur, dit soort zooi.

[gorgi_19]

Jij wilt dus de achterliggende databasestructuur weten van een website, hoe deze is ingericht met tabbelen, relaties, etc.?

Als het goed is, hoort deze niet bekend te zijn en de enige mogelijkheid is contact opnemen met de systeembeheerder van de site?

(zou het ook niet erg kunnen waarderen als iemand mijn dbstructuur kon zien.. )

[pkouwer]

kan ik goed begrijpen idd, maar die programma's als TV-gids waar ik hier wel eens e.e.a. over heb gelezen, hoe doen die dat dan. (heb de vraag daar als eens tevergeefs gesteld)

[Zoijar]

die betalen voor een live xml feed

[nxt]

Zoijar schreef op 04 augustus 2002 @ 17:32:
die betalen voor een live xml feed

of je zoekt een website die het laat zien,
leest de html-pagina in
verwijderd de overbodige rommel zodat je alleen data overhoud die je ook echt wilt hebben

en dat blijft goedgaan tot ze de layout v/d pagina veranderen

[pkouwer]

Stel dat deze gegevens via een PHP-scriptje geladen worden, kan ik dit script ook inlezen ?

[gorgi_19]

pkouwer schreef op 04 augustus 2002 @ 18:47:
Stel dat deze gegevens via een PHP-scriptje geladen worden, kan ik dit script ook inlezen ?

Je leest toch de output van het PHP-script? Jouw programma krijgt dus de pagina in HTML-formaat en dit programma moet de boel gaan 'strippen' van alle tags.

[Zoijar]

Ik heb laatst dit gebruikt voor stock quotes...wel goed voorbeeld denk ik.

PHP:

class QuotesParser {

    var $webpages;
    var $server;

    function QuotesParser() {
        $this->server = 'www.eurobench.com';
        $this->webpages = array('/koersen.asp?page=exchange&bc=aex&rc=801&innr=1',
                        '/koersen.asp?page=exchange&bc=aex&rc=824&innr=1',
                        '/koersen.asp?page=exchange&bc=AEX&rc=803&innr=1',
                        '/koersen.asp?page=exchange&bc=aex&rc=818&innr=1');
    }
    function getRawPage($server, $file, &$result) {
        $fp = fsockopen($server, 80);
        if ($fp) {
            fputs($fp, "GET ".$file." HTTP/1.0\r\nHost: ".$server."\r\n\r\n");
            while (!feof($fp)) {
                $result .= fgets($fp, 4096);
            }
            fclose($fp);
        } else {
            die('Unable to connect to http://'.$server.$file);
        }
    }

    function getQuotes(&$result) {
        $rawpage = '';
        foreach ($this->webpages AS $webpage) {
            $this->getRawPage($this->server, $webpage, $rawpage);
        }

        $n = array('curr', 'diff', 'time', 'bid', 'let', 'high', 'low', 'open', 'close', 'vol');
        $pos = 0;
        while (($pos = strpos($rawpage, 'showcompanydetail', $pos))) {
            $row = array();

            $pos = strpos($rawpage, '>', $pos)+1;
            $endpos = strpos($rawpage, '<', $pos);
            $row['name'] = substr($rawpage, $pos, $endpos-$pos);
            $pos = $endpos;

            $endpos = strpos($rawpage, '<SELECT', $pos);
            $subitem = str_replace("\t", '', trim(strip_tags(substr($rawpage, $pos, $endpos-$pos))));
            $pos = $endpos;

            $v = explode("\n", $subitem);
            for ($i = 0; $i < count($v); $i++) {
                $sv = sscanf(str_replace(',', '', $v[$i]), '%f');
                $row[$n[$i]] = $sv[0];
            }
            if ($row['curr'] != 0) {
                $result[] = $row;
            }
        }
    }

};

[whoami]

Data rippen van een website is mi illegaal zolang je er geen toestemming voor hebt. En illegale dingen zijn hier niet toegelaten, vandaar...