Er zijn m.i. twee belangrijke voorwaarden waaraan een goede grafische benchmark aan moet kunnen voldoen:
- Hij moet kunnen laten zijn waartoe het systeem in staat is qua mogelijke beeldqualiteit.
- Hij moet een objectief performance-indicatie geven t.o.v. de te verwachte prestaties in de praktijk lees games. Dat wil zeggen dat als bij een test in b.v. een directX 8 onderdeel (zoals deel 2 of deel 3 van 3Dmark03) Systeem_A een 2x zo hoge waarde geeft als Systeem B, dan verwacht ik dat ook dat Systeem_A in direct 8 games gemiddeld twee keer zo snel zal zijn.
Over 3Dmark2001 was ik zelf erg te spreken. Er waren drie Direct7 delen met zowel de optie low als high details, als ook een DirectX8 test. Verder kun je qua resoluties, AA, AF en dergelijke naar hartelust instellen en het mooiste van dit alles, dankzij de database, dit met andere systemen vergelijken.
Ook als je de gameperformance van je PC wilde opvoeren door b.v je Videokaart, geheugen CPU, FSB of wat dan ook te veranderen, 3Dmark2001 liet altijd een mooie indicatie zien of er de nodige winst te behalen was. Natuurlijk, de ene game is meer CPU en de andere meer GPU afhankelijk, maar ik heb altijd het idee gehad dat er bij 3Dmark2001 een goed compromis was gevonden. Wie b.v. een TB 900 en GForce 2 had en zijn gameperformance wilde updaten en zat te twijfelen of hij beter in een snellere CPU of GPU diende te investeren, die kreeg een goede indicatie, zonder dat 3Dmark2001 intel, AMD, Nvidea, ATI of welk merk dan ook bevoordeelde.
Goed, hoe zit het met 3Dmark03? Je kunt nog steeds systemen vergelijken, en allerlei resoluties en eye-candy in en uitschakelen, maar de makers hebben er deze keer voor gekozen de benchmark zo puur GPU afhankelijk te maken als maar kan. Dat is op zich begrijpelijk een keuze voor een grafische benchmark, maar wie net als vroeger in indicatie van zijn gameperformance wil hebben en eventueel wil weten of b.v zijn CPU een bottleneck vormt of niet, die heeft pech. Zo zal een Celeron 1700 met een Ti4400 beter scoren als een P4 op 2,8GHZ met een TI4200, terwijl het laatste systeem een veel betere grafische performance heeft, omdat dit altijd een combinatie is van CPU/GPU power. Dit is erg jammer en m.i. zeker.een groot nadeel t.o.v. 3Dmark2001, maar hoeft op zich geen halszaak te zijn.
Nu een belangrijker punt: Laat 3Dmark zien wat de grafische mogelijkheden zijn van b.v. Direct-X7, -X8 en -X9 ondersteunende videokaarten en of het b.v. de moeite waard is om een oude niet DirectX9 kaart in te ruilen voor een DirectX9 kaart. Dit mag iedereen zelf beoordelen, zelf heb ik het idee dat hoewel 3Dmark03 er zeker leuk uitziet, het niet echt de maximale mogelijkheden laat zien. Maar zolang er nog geen echte directX9 games zijn, kan ik dat nog niet goed beoordelen.
Nu het meest belangrijke punt, geeft 3Dmark03 een betrouwbaren en dus vergelijkbare performanceindicatie voor Videokaarten. Wie er over zit te denken zijn videokaart in te ruilen voor een andere, heeft hij/zij iets aan 3Dmark03 of niet?
Futuremark claimt dat bij 3Dmark03 game 1 bedoeld is als graadmeter voor DirectX 7, game 2 en 3 voor DirectX8 en Game 4 als indicator voor DirectX9. Voor elke game zijn er diverse wegingsfactoren, temeer daar er een flink verschil in frames is, maar het was de bedoeling dat game 4 ongeveer 20% van de totaalscore vormt, dus als GPU_A en GPU_B in directX 7 en -8 gelijkwaardig presteren, maar GPU_A ondersteund geen DirectX 9, dan zou deze volgens Futuremark 80% van de score van GPU_B moeten halen.
Genoeg over theorie en criteria, nu de cijfertjes:
Het testsysteem is een P4 op 2.8 Ghz met Windows XP en DirectX 9.0, voor de Radeons is Catalyst 3.2 gebruikt, voor de Geforce TI-4800 Detonator 43.45
Er is niet overgeklokt en er wordt getest in de default-instelling van 3Dmark03, oftewel 1024x768 zonder AA of AF.
3Dmark03:
9700 Pro : 4692
9500 Pro : 3580
9500 128 MB : 2865
TI 4800 : 1801
Duidelijke taal, nietwaar? Een Geforce 4 kaart is totaal niet meer van deze tijd, Zelfs de trage 9500 non pro presteert aanzienlijk beter, ook als wij de DirectX 9 deel weghalen, dus 80% van de 2865 = 2292, dan zien wij dat ATI rulez! Om nog maar te zwijgen van die arme stakkers die een nog langzamere TI 4200 of zelfs een zielige Geforce 3 hebben, zij doen er (volgens 3Dmark03) goed aan dat slome ding in "Vraag & Aanbod" of "Wie kan deze oude hardware nog gebruiken?" zetten of anders aan je oma cadeau doen, hopeloos traag in vergelijking met een nieuwe Radeon.
Maar is dit nu echt zo? Een kijken hoe deze kaarten in echte games presteren:
Comanche 4 scores:
9700 Pro : 50.9
9500 Pro : 48.4
9500 128 MB : 47.0
TI 4800 : 51.4
UT2003 Flyby:
9700 Pro : 194.5
9500 Pro : 160.9
9500 128 MB : 106.8
TI 4800 : 166.4
UT2003 Botmatch:
9700 Pro : 58.5
9500 Pro : 58.6
9500 128 MB : 58.0
TI 4800 : 59.7
Serious Sam 2:
9700 Pro : 171.5
9500 Pro : 164.6
9500 128 MB : 163.2
TI 4800 : 180.6
Als ik nu elke game voor 25% laat meetellen en de 9500 pro als uitgangspunt neem, d.w.z deze scoort 100%, en daar 80% van de 3Dmark03 scores van de DirectX 9 kaarten bij zet, krijg ik het volgende scores:
9700 Pro : 107.5 % vs 3754 (4692) 3D marks
9500 Pro : 100.0 % vs 2864 (3580) 3D marks
9500 128 MB : 90.8 % vs 2292 (2865) 3D marks
TI 4800 : 105.3 % vs 1801 3D marks
Hm, interessant nietwaar, dit verdient, om het voorzichtig te formuleren, enig nader onderzoek. Is het wellicht zo dat Futuremark zich een beetje vergist heeft en de DirectX 9 onderdeel i.p.v. 20% per ongeluk voor 80% heeft mee laten tellen, of is er echt iets grondig mis met de wijze waarop 3Dmark03 benchmarked? Laten wij daarom een blik werpen op de detailsscores van 3Dmark03:
Wings of Fury (DirectX 7):
9700 Pro : 164.2
9500 Pro : 128.2
9500 128 MB : 112.4
TI 4800 : 124.1
Dit is al een beetje vreemd, want zoals kenners weten is onder direct X7 de TI4800 bij 1024x768 zonder AA & AF minstens gelijkwaardig aan de 9700 Pro en sneller dan 9500 Pro en 9500 non Pro. Natuurlijk veranderd dat bij b.v 1600x1600 met AA, maar wij hebben het nog steeds over de default-instelling van 3Dmark03. Volgende 'games':
Battle of Proxycon (DirectX 8 ) :
9700 Pro : 30.6
9500 Pro : 21.3
9500 128 MB : 16.3
TI 4800 : 10.8
Troll's Lair (DirectX 8 ):
9700 Pro : 27.9
9500 Pro : 20.6
9500 128 MB : 15.7
TI 4800 : 10.5
Oké, dat is duidelijk, mysterie opgelost.
Terwijl de games onder DirectX 7, -X 8 (of b.v. Open Gl) laten zien dat een ti 4800 onder 1024x768 zonder AA en AF sneller is dan b.v. een 9500 Pro en het zonder meer kan opnemen tegen een 9700 Pro, geeft 3Dmark03 een 'ander beeld'. Het is dus niet zo, zoals sommigen beweren, dat 'game 4', het DirectX 9 deel van 3Dmark ervoor zorgt dat de Radeons de Geforce 4 TI serie het nakijken geven, het verschil wordt namelijk al voor een groot deel in de eerste 3 'games' gemaakt.
De vraag of 3Dmark03 ergens voor reprensatief is mag iedereen voor zich zelf beantwoorden, wie bevoordeeld niet in games maar alleen in benchmarks geïnteresseerd is, die mag rustig stellen dat 3Dmark03 prima in orde is en dat het juist de echte games zijn de GForce-kaarten sterk bevoordelen en dus een vertekend beeld geven.
Zelf vind ik echter, dat wie wil kijken hoe snel zijn systeem is op grafisch gebied en welke nieuwe videokaart hij zou moeten kopen, door 3dmark03 totaal op het verkeerde been gezet wordt.
[
Voor 3% gewijzigd door
Verwijderd op 09-05-2003 15:49
]