[Neonsquare]

Zitat von mrieglhofer

Dxomark wird hauptsächlich dann kritisiert, wenn Tests neuer Kameras nicht die neuen Welten der Käufer bestätigen ;-)

Nicht nur die der Käufer - die diversen Ergebnisse spiegeln einfach tatsächlich oft nicht die Wahrnehmung außerhalb der DxO-Sekte wieder ;-).

Die Kritik selbst ist allerdings objektiv. Der Großteil der "Messwerte" sind keine ebensolchen sondern nur rudimentär - wenn überhaupt - dokumentierte Noten. Es gibt weder Angaben zur exakten Methodik noch zu Toleranzen. Wissenschaftlich betrachtet ist es eigentlich Bullshit. Es wird ja nicht einmal angegeben welche Objektive für die Samples benutzt werden - stattdessen wird der (falsche) Eindruck ermittelt sie würden den Sensor selbst ausmessen. Was natürlich quatsch ist. Die schnöde Wahrheit ist, dass auch DxO einfach Testfotos macht wie jeder andere auch. Bei anderen "Labortests" sieht man wenigstens die benutzten Samples und kann dort sehen, dass:

1) falsch fokussiert wurde
2) falsch belichtet wurde
3) ein suboptimales Objektiv verwendet wurde
4) die Testszene signifikant abweicht

All dies sind typische Fälle wie sie auf nahezu allen bekannten Testseiten bereits vorkamen. Du willst nun behaupten, dass gerade DxO, die keinerlei Informationen über ihre Setups und Methoden publizieren da die fehlerfreie Ausnahme darstellen? Fehler passieren überall - bei DxO werden sie eben methodisch besser verschleiert weil die der Benotung zugrundeliegenden Messdaten möglicherweise aus genauso schlechten Samples gezogen werden wie bei allen anderen auch. Wir müssen DxO einfach glauben, dass sie so sorgfältig arbeiten wie sie auf ihrer Webseite werben. Werben? Ja Werben - denn DxO verkauft die Testsoftware und der DxOMark ist die Werbung dafür.

Ich muss es leider wiederholen - solange DxO nicht seine Methoden und Toleranzen öffentlich zugänglich und wissenschaftlich dokumentiert ist die Seite eigentlich nur als Zeitvertreib nützlich. Ich würde nie auf die Idee kommen feste Aussagen auf diesen Informationen zu basieren.

Bleibt die Frage ob es denn wenigstens konsistente Ergebnisse sind: Es gibt ja durchaus auch andere spezialisierte Testlabors wie z. B. "Image Engineering" das Labor-Aufträge von diversen Publikationen durchführt. Mir ist da bereits häufiger aufgefallen, das deren Ergebnisse sich nicht mit jenen von DxO decken.

Weiteres Beispiel: Das Projekt "SenScore" (http://www.senscore.org) ähnelt dem Prinzip des DxOMark: Es wird auf RAWs gemessen und diverse Parameter (z. B. "Noise" "Dynamic Range") gemessen. Wie DxO testen sie lediglich mit im regulär im Handel gekauften Kameras - kein Sponsoring der Hersteller. Sie dokumentieren mit welchen Objektiven die Tests gemacht werden (!). Wenn man einige der Ergebnisse mit jenen des DxOMark vergleicht - gibt es ein paar Stirnrunzler:

1) Nach SenScore ist die A7 beim Rauschen geringfügig besser als RX1 und geringfügig schlechter als die RX1R
2) Die Canon EOS 5DMkIII ist laut SensCore auf etwa einer Ebene mit der A7r bei DxOMark ist sie auf einer Ebene mit der A7.
3) Laut DxOMark zerstampft die A99 die EOS 5DMkIII bei Dynamic Range deutlich. Bei SenScore liegt die Canon jedoch vorne.

Soviel zur Aussagekraft deines Lieblingsbenchmarks . Ich will damit nicht sagen dass SenScore recht hat und DxoMark unrecht - aber da stehen nun zumindest schonmal zwei ähnliche Labore mit deutlich unterschiedlichen Ergebnissen gegenüber. Lustig: Auch SenScore ist nicht wirklich Nachvollziehbar. Der generelle Trend den ich bislang bei den Laboren festgestellt habe ist: DxOMark bewertet Nikon-RAWs stets außerordentlich gut und Canon-RAWs ungewöhnlich schlecht. Bei anderen Laboren kommen die Canons deutlich besser weg. Wer Recht hat kann ich nicht sagen - aber wer kann es denn?

Zitat von mrieglhofer

Aber wie bei jeder Messmethode kann man natürlich diskutieren, wie relevant sie für die Bildergebnisse ist. Da führt letztlich auch kein Weg an der eigenen Evaluierung vorbei.
Dxomark hat halt 3 Vorteile, 1) bauen und verkaufen sie einen anerkannt guten RAW Konverter, für den ja letztlich die Messungen Basis für Korrekturen sind,

Das ist sowohl Pro als auch Negativ - wem die Ergebnisse des DxO-Konverters taugen der sollte vielleicht wirklich dem DxOMark vertrauen, denn die Engine verwendet wohl dieselben Algorithmen. Wer jedoch Lightroom, Aperture, Capture One oder einen anderen Konverter benutzt - für den ist der DxOMark nur von sehr begrenztem Wert. Ich behaupte, dass die vermeintlichen "Messungen" bei Adobe Camera RAW oder Capture One andere Ergebnisse liefern würden als beim DxOMark. DxO schreiben selbst auf ihrer Website, dass sie bislang keine RAW-Konverter testen. Das verkaufen sie als Vorteil indem sie so tun als ob ihre Ergebnisse die objektive Basis "vor" dem Einsatz eines Konverters darstellt. Tatsächlich ist es jedoch im Prinzip lediglich die Basis nach dem Einsatz des DxO-Konverterts.

Ich bin selbst Käufer des DxO-Konverters und habe ihn eine zeitlang parallel zu Lightroom und Aperture benutzt. Die Ergebnisse konnten mich dabei nicht überzeugen. Das fing schon beim Demosaic an wo DxO für mich - im Vergleich - stets einen sehr digitalen Look mit Detailverlusten hatte und endet nicht zuletzt bei der Rauschminderung - die zwar mittlerweile schon besser ist aber immer noch nicht meine erste Wahl darstellt. Wenn die Entrauschungsergebnisse ein Indiz für die Expertise der DxOLabs bezüglich Rauschen sind, dann würde ich darauf nicht mein ganzes Vertrauen stützen. Andere Messlabore geben zusätzlich noch Messungen für "Texturverlust" an - bei DxO ist das nach wie vor nicht enthalten. "High-ISO" ist und bleibt hier eindimensional.

Zitat von mrieglhofer

b) messen sie seit Jahren mit nachvollziehbaren Methoden quer über alle Hersteller und Bieter damit eine gute Vergleichsbasis auch über die Zeit.

Das kannst Du doch gar nicht wissen. Die Methoden, Testgeräte und Toleranzen sind allesamt nicht frei zugänglich dokumentiert. Wenn sie über die Jahre Änderungen vorgenommen haben sind diese ebenfalls nicht dokumentiert. Nachvollziehbar ist eigentlich gar nichts davon. Oder haben wir unterschiedliche Vorstellungen von "Nachvollziehbar"? Ich schätze Du meinst eigentlich "Für Dich plausible Ergebnisse"?

Zitat von mrieglhofer

3) sie messen physikalische Grössen , die sie als Indikatoren für gute Bilder sehen und können damit objektive und nachprüfbare Ergebnisse liefern.

Nach allem was man wissen kann machen sie auch nur RAW-Testsamples mit Testkameras und unspezifizierten Testobjektiven in einem unspezifizierten Setup. Sie verwenden für die Auswertung der so ermittelten - hoffentlich korrekten - Samples ihre eigene Testsoftware. Wie bei SenScore werden bestimmten Messdaten nach irgendwann mal in unspezifizierter Umgebung ermittelten subjektiven Limits bestimmten Score-Werte zugeordnet. Das ganze wird auf einer schicken Website leicht bekömmlich für Laien aufbereitet.

[Itscha]

Zitat von raul

Danke für die Info, da weiss ich wenigstens, dass die Zeitschrift nix taugt!

Soweit, dass die ganze Zeitschrift nix taugt, würde ich nicht gehen.

Bisher fand ich eigentlich, dass man die "Photographie" noch kaufen konnte, weil sie nicht nur aus Tests und Neuigkeitsankündigungen der Industrie steckt, sondern durchaus auch noch Photographische Themen bietet...

[RoDiAVision]

Das die Zeitschrift nixt taugt würde ich jetzt auch nicht verallgemeinern, ist eine der Wenigen die ich ansonsten für ganz brauchbar halte.
Eine übliche Testzeitschrift ist diese eh nicht.

Hatte bisher auch nichts auszusetzen, aber der von mir monierte Test ist ja nun wirklich für die Tonne.
Ich hätte auch gerne die Fotos von der Hamburger Brücke gesehen, in der Zeitschrift als Druck sind die ja nun auch nicht verwertbar, zumal auch noch Dreigeteilt.

[Anaxaboras]

Saubere ISO-Reihen von der A7 mit SEL 2870 gibt es hier bei digitalkamera.de.

Auch die Labortests der beiden Kameras sind nun fertig. Da sie jedoch nur kostenpflichtig eingesehen werden können, verlinke ich nicht darauf. Aber ich kann mal die Kommentare zitieren, die Benjamin dazu auf Facebook gepostet hat:

BÄM! Die Sony Alpha 7R stellt mit dem FE 35mm 2.8 einen neuen Auflösungsrekord im digitalkamera.de-Testlabor auf: 77,9 lp/mm (F8, Bildmitte) und stößt damit die Nikon D800E mit dem 105er Makro vom Thron, die es bei F5,6 in der Bildmitte auf 72,1 lp/mm brachte. Schon bei Offenblende liegt das Sony 35 mm fast bei 75 lp/mm, allerdings am Bildrand nur bei 51 lp/mm (bei F11/F16 58 lp/mm).

Holla die Waldfee ist die Sony Alpha 7R gut! Da können Canon und Nikon sich warm anziehen!

LG
Martin

[mrieglhofer]

Zitat von Neonsquare

Nicht nur die der Käufer - die diversen Ergebnisse spiegeln einfach tatsächlich oft nicht die Wahrnehmung außerhalb der DxO-Sekte wieder ;-).

Die Kritik selbst ist allerdings objektiv. Der Großteil der "Messwerte" sind keine ebensolchen sondern nur rudimentär - wenn überhaupt - dokumentierte Noten. Es gibt weder Angaben zur exakten Methodik noch zu Toleranzen. Wissenschaftlich betrachtet ist es eigentlich Bullshit.

Bleibt die Frage ob es denn wenigstens konsistente Ergebnisse sind: Es gibt ja durchaus auch andere spezialisierte Testlabors wie z. B. "Image Engineering" das Labor-Aufträge von diversen Publikationen durchführt. Mir ist da bereits häufiger aufgefallen, das deren Ergebnisse sich nicht mit jenen von DxO decken.

Soviel zur Aussagekraft deines Lieblingsbenchmarks .

Insofern hast du recht, dass es sich um keine wissenschaftliche Qualitätsbewertung handelt. Es wird wohl der von ihnen hergestellte DXO-Analyzer verwendet, der recht weit verbreitet ist. D.h.mit diesem Tool kannst du prinzipiell nachmessen und wirst zu ähnlichen Ergebnissen kommen müssen. Wenn nicht, kann man drüber reden. Du kannst mit dxomark durchaus auch im Forum die Ergebnisse diskutieren. Klar wäre das Publizieren des genauen Testaufbaues im Sinne der Nachvollziehbarkeit wünschenswert.
Aber die so ermittelten Ergebnisse stehen in der Regel subjektiven Bewertungen von Neukäufern gegenüber, die plötzlich Welten bzw. Verbesserungen im Bereich von mehreren EVs feststellen, die sich dann in Jahresfrist in "rauscht wie Hulle" konvertieren. Im Vergleich dazu ist Dxomark eine zuverlässige Quelle, die auch über die Jahre im Rahmen der technischen Entwicklung nachvollziehbare Ergebnisse gebracht hat. Letztlich musst du auch dem Eichamt vertrauen, dass sie richtig gemessen haben. Oder das Gegenteil beweisen oder hast du da eine Dokumentarion, wie die alle Messwerte genau ermitteln.

Das heisst nicht, das im Einzelfall eigene Szarios eine bessere Nutzbarkeit bringen können, aber ein zumindest grobe Einordnung der Leistungsfähigkeit war immer gegeben. Immer besser als subjektive Aussagen oder visuelle Vergleiche mit völig anderen Parameter z.b,von Schärfe, Rauschunterdrückung, Kontrast, usw.

[RoDiAVision]

Zitat von Anaxaboras

Saubere ISO-Reihen von der A7 mit SEL 2870 gibt es hier bei digitalkamera.de.

Auch die Labortests der beiden Kameras sind nun fertig. Da sie jedoch nur kostenpflichtig eingesehen werden können, verlinke ich nicht darauf.

Danke für den Link

Die Jpeg-Dateien bekomme ich problemlos herunter geladen, jedoch bricht der Download der RAW-Dateien ständig ab, sowohl mit Firefox als auch mit dem Free Dowload Manager.
Sind die RAW´s auch kostenpflichtig?

[Anaxaboras]

Bei Download-Problemen kann ich leider nicht weiterhelfen. Wendet euch in diesem Fall bitte direkt an Redaktion von digitalkamera.de.

LG
Martin

[Ernst-Dieter aus Apelern]

Das Review der A7 und A7r bei DPreview steht noch aus, DPreview testet recht umfassend und verstädnlich.
D´pixx wäre auch noch zu nennen, Herbert Kaspar wartet noch auf die Serienmodelle.
Zusatzbemerkung, von der RX10 ist er sehr angetan, bis auf den Preis.
Photographie ist eine Zeitung, die nicht sensationlüsternd testet!
Sie sieht eben die Canon Eos 6D vorne, auch wegen der low Light Eigenschaften.
Daß die 6D sehr gute low Light Eigenschaften hat ist hinlänglich bekannt.
Die A7 wird aber nicht schlecht gemacht in dem Test, auch wenn sie nicht Platz 1 erreicht.Die 6D ist außerdem deutlich teurer.
Ich bin mal gespannt wie Naturfoto die A7 und die A7r testet.
Für mich steht fest daß Sony mit den beiden Kameras einen richtigen Coup gelandet hat.
Ernst-Dieter

[eac]

Zitat von Ernst-Dieter aus Apelern

Die 6D ist außerdem deutlich teurer.

Geizhals sagt: A7 1428€, 6D 1462€. Sind 34€ mehr wirklich "deutlich teurer"?

[Ernst-Dieter aus Apelern]

[QUOTE=eac;1525012]

Zitat von Ernst-Dieter aus Apelern

Die 6D ist außerdem deutlich teurer./QUOTE]

Geizhals sagt: A7 1428€, 6D 1462€. Sind 34€ mehr wirklich "deutlich teurer"?

, nur eine Familienpizza teurer.Ich hatte 1.623 Euro noch im Kopf.
Ernst-Dieter