IMDB parser stuk?

[Raven]

https://www.imdb.com/title/tt12306692/
https://www.imdb.com/title/tt2701582/
^ + titel zegt denk ik wel genoeg , ben niet de enige die daar tegenaan loopt.

[ Voor 16% gewijzigd door Raven op 27-09-2021 18:48 ]

[Damic]

Ik first that

[crisp]

Zo te zien stoppen ze tegenwoordig 142KiB aan javascript meuk voor de <title>, en zoveel trekken wij niet binnen om de titel te bepalen...

[AW_Bos]

Gaat dit niet via oEmbed?

[Raven]

Wilde net een SB-topic maken maar bedacht mij dat ik die al eens had gemaakt, is er nog iets verandert sindsdien? Mis het parsen

[crisp]

Raven schreef op zaterdag 4 april 2026 @ 12:27:
Wilde net een SB-topic maken maar bedacht mij dat ik die al eens had gemaakt, is er nog iets verandert sindsdien? Mis het parsen

Blijkbaar gebruikt IMDb tegenwoordig een botcheck die javascript vereist, en dat heeft onze simpele curl-wrapper niet.

AW_Bos schreef op dinsdag 28 september 2021 @ 09:12:
Gaat dit niet via oEmbed?

Nee, IMDb ondersteund geen oEmbed.

[crisp]

Ik heb ook nog even naar noembed gekeken, maar daar werkt imdb ook niet (meer) mee...

Het lijkt steeds lastiger te worden om titel-support te blijven ondersteunen; steeds meer sites nemen anti-scraping maatregelen waar lastig doorheen te komen is (en we willen ook zelf geen shady praktijken gaan bezigen).

[ Voor 47% gewijzigd door crisp op 24-04-2026 13:00 ]

[canonball]

Mogelijk heeft het te maken met nieuws: IMDb vereist voortaan account voor lezen gebruikersrecensies in strijd tegen AI

[crisp]

canonball schreef op vrijdag 24 april 2026 @ 12:58:
Mogelijk heeft het te maken met nieuws: IMDb vereist voortaan account voor lezen gebruikersrecensies in strijd tegen AI

Nee, dit is echt een anti-scraping techniek.

[Damic]

Ik was aan't denken: "heeft imdb geen api" en jawel dat hebben ze https://developer.imdb.co...mentation/getting-access/ maar daar moet je een account via aws hebben en dan moet je daar nog een abonnement ook nog op nemen ja nee dat doen we niet he.

[crisp]

Damic schreef op vrijdag 24 april 2026 @ 13:25:
Ik was aan't denken: "heeft imdb geen api" en jawel dat hebben ze https://developer.imdb.co...mentation/getting-access/ maar daar moet je een account via aws hebben en dan moet je daar nog een abonnement ook nog op nemen ja nee dat doen we niet he.

Ja, dat had ik ook al gevonden. Sowieso voor elke site een aparte API implementeren is al gedoe, maar als het ook nog geld moet kosten dan houdt het wel op. Helaas is het internet al lang niet meer dat grote openbare netwerk...

[CH4OS]

Eventueel overstappen op TheMovieDatabase een idee? Sowieso een veel uitgebreidere database ook. Ook daar kun je middels het tt-ID matchen, al heeft het daar niet overal een IMDb match op (maar gebeurd redelijk zelden dat die mist). Heeft ook een API, maar... Gratis!

[crisp]

CH4OS schreef op vrijdag 24 april 2026 @ 14:01:
Eventueel overstappen op TheMovieDatabase een idee? Sowieso een veel uitgebreidere database ook. Ook daar kun je middels het tt-ID matchen, al heeft het daar niet overal een IMDb match op (maar gebeurd redelijk zelden dat die mist). Heeft ook een API, maar... Gratis!

Ik zou nog heel stiekum de titel daar op kunnen halen voor een IMDb-url (noembed deed vroeger blijkbaar hetzelfde). Maar daar moet ik me dan even verder in verdiepen. Het liefst hebben we natuurlijk wel een meer een future-proof oplossing...

[CH4OS]

crisp schreef op vrijdag 24 april 2026 @ 14:21:
Ik zou nog heel stiekum de titel daar op kunnen halen voor een IMDb-url (noembed deed vroeger blijkbaar hetzelfde). Maar daar moet ik me dan even verder in verdiepen. Het liefst hebben we natuurlijk wel een meer een future-proof oplossing...

Dan is de TMDB API (https://www.themoviedb.org/) sowieso interessant. Die is in jaren niet heel veel veranderd, zeker met het ophalen van titels niet.

[Damic]

@CH4OS kun je daar ook zoeken op de imdb nummer anders heeft dat geen zin.
edit: natuurlijk na een paar minuten vind ik het volgende: https://developer.themoviedb.org/reference/find-by-id dus ja je kan zoeken op imdb id's

[ Voor 49% gewijzigd door Damic op 24-04-2026 14:35 ]

[CH4OS]

Damic schreef op vrijdag 24 april 2026 @ 14:33:
@CH4OS kun je daar ook zoeken op de imdb nummer anders heeft dat geen zin.
edit: natuurlijk na een paar minuten vind ik het volgende: https://developer.themoviedb.org/reference/find-by-id dus ja je kan zoeken op imdb id's

Jazeker kan dat, al moet je anno 2026 niet op IMDB ID willen zoeken, maar dat is een andere discussie.

[ Voor 11% gewijzigd door CH4OS op 24-04-2026 14:38 ]

[Hero of Time]

Als het al te lastig wordt, is het anders een optie om te zien tijdens het parsen van linkjes dat het het om een IMDb link gaat en dan vragen om de titel op te geven en als dat niet gedaan wordt of wordt weggeklikt, de link as-is plaatsen? Dan is het aan de gebruiker om de titel in te vullen als die het niet al in de URL tag heeft gezet.