Subjektive Wahrnehmung der Qualität von MP3s – Ein kleines Experiment

Angeregt durch eine Diskussion in einem anderen Thread möchte ich ein kleines Experiment durchführen. Es geht darum inwieweit man unter täglichen Hörbedingungen (sprich: an der eigenen Stereoanlage) in der Lage ist, unterschiedliche mp3-Komprimierungsgrade von Musik zu erkennen. Eingeladen zu diesem Test sind besonders Musikfreunde, die von sich glauben solche Unterscheidungen gut treffen zu können.

Das Experiment soll wie folgt ablaufen:

1. Ich wähle 6 Musikstücke aus (möglichst aus unterschiedlichen Genres wie Pop, Jazz, Klassik) die ich auf CD habe. Diese Stücke werden von mir auf einem CD-Laufwerk sorgfältig als WAV-Dateien ausgelesen und als Originale betrachtet.
2. Diese WAVs enkodiere ich dann als MP3s, und zwar in den Komprimierungen 128 und 192 kbps. Zusammen mit dem Original-WAV hat man dann also von jedem Musikstück 3 Dateien, also insgesamt 18 Dateien.
3. Ich brenne alle 6 Musikstücke in allen 3 Qualitätsversionen auf eine Audio-CD, wobei ich mir natürlich merke welche Version eines Musikstücks an welcher Stelle auf der CD steht. Diese Information hat außer mir niemand, sie muß gerade von den Testteilnehmern herausgefunden werden.
4. Ich verschicke die CD mit den insgesamt 18 Tracks an die Teilnehmer des Experiments, die im Blindtest versuchen für jedes der 6 Musikstücke die 3 Qualitätsversionen durch differenziertes Hören zu identifizieren. („Blindtest“ bedeutet dabei nicht, daß sie sich die Augen zubinden müssen, sondern daß sie die Reihenfolge der Versionen nicht kennen.)
5. Die Teilnehmer teilen mir per PN oder Email ihre Ergebnisse mit. Ich sammele diese und mache eine kleine Auswertung, die ich hier natürlich veröffentliche. Wer die meisten Versionen richtig herausfindet, gewinnt ein kleines lukullisches Paket von unserem Hof (natürlich ohne Weichmacher).

Dazu noch einige Anmerkungen:

• An dieser Stelle soll keine Diskussion CD vs. mp3, CD vs. Vinyl o.ä. entstehen.
• Man kann die Testbedingungen natürlich noch vielfälig verbessern/verfeinern. Im Sinne einer einfachen Durchführung möchte ich aber nichts ändern.
• Es wird nicht der Anspruch erhoben, in irgendeinem Sinne einen wissenschaftlichen Beweis zu erbringen. Die Ergebnisse des Experiments werden einfach nur veröffentlicht und sollen für sich stehen. Ich weiß auch, daß so etwas schon oft (und auch unter weitaus wissenschaftlich strengeren Bedingungen) durchgeführt wurde, aber es interessiert mich einfach mal so etwas im Forum durchzuführen.
• Die Teilnehmerzahl sollte mindestens 10 sein und höchstens 20. Wer Interesse hat mitzumachen, melde sich einfach in diesem Thread. (Edit: Bitte nicht mehr anmelden. Wir haben nun genügend Leute für den Test.)
• Es entstehen für keinen Teilnehmer Kosten. Ich habe gerade einen Mega-Kalbskopfsülzedeal abgeschlossen und kann das aus der Portokasse bezahlen.

Und noch einige technische Anmerkungen (wen es interessiert…)

• Zum Auslesen und Schreiben wurde ein DVD-Brenner NEC ND-1100A verwendet.
• Das Auslesen der Quell-CDs erfolgte mit EAC (Exact Audio Copy). Die Einstellungen dieses Programms wurden wo immer möglich so gewählt, daß größte Priorität das möglichst korrekte Auslesen der Audio-Daten war.
• Die beiden Klassik-WAVs wurden noch mit Wavelab gekürzt.
• Die Erstellung der MP3s erfolgte mit lame3.96.1 (Kommandozeilenversion) unter den Optionen -h -b , mit =128 bzw. 192.
• Zur Ermittlung der geeigneten Brenngeschwindigkeit: Die WAVs und MP3s wurden mit Nero6 mit 16x sowie 4x Speed als Audio-CDs gebrannt. Dann wurden diese beiden gebrannten CDs nochmals mit EAC ausgelesen und die ausgelesenen WAVs binär verglichen. Es ergab sich dabei in keinem Track ein Unterschied, was mich zu dem Schluß führte daß 16x Speed langsam genug und der zusätzliche Zeitaufwand von 4x Speed nicht nötig ist.
• Alle Test-CDs wurden dann mit Nero6 mit 16x Speed gebrannt.

Teilnehmerliste: Joliet Jake, futterhoernchen, Times A‘ Changin, Amadeus, Herr Rossi, thomlahn, Bewilderbeast, Faspotun, Jan Wölfer, Nes, grizzdrum, dougsahm, MarBeck, Olga, skraggy, Oldboy, Dick Laurent, muffkimuffki, Clau, klienikum, Bullit, ryansucks, JanPP, LazyLinePainterJan

Update zum Modus: Es hat sich herausgestellt daß die Differenzierung von 4 Qualitätsversionen eines Musikstücks doch recht schwierig ist. Ich habe deshalb jeweils auf die 320er MP3-Version verzichtet. Stattdessen sind nun 6 anstatt 5 Musikstücke zu untersuchen. Ich habe die Versuchsbeschreibung oben dementsprechend editiert.

Musikstücke: Diese habe ich unter dem Aspekt ausgewählt, daß sie technisch hervorragend aufgenommen jedoch nicht überproduziert sein sollten. Außerdem sollten verschiedene Stile berücksichtigt werden. Es handelt sich um folgende 6 Stücke (wobei die beiden Klassik-Stücke etwas gekürzt sind):

1. Tracks 1-3: Wilco – Ashes of American Flags (Live, aus dem 2005er Live-Album Kicking Television)
2. Tracks 4-6: Madonna – Ray of Light
3. Tracks 7-9: L. van Beethoven – Klaviersonate Nr. 17 d-moll („Der Sturm“), erster Satz (DGG 1986, Pollini)
4. Tracks 10-12: Mike Scott (Waterboys) – What do you want me to do
5. Tracks 13-15: G. F. Händel – Aria con coro: Maria, salute e speme (Archiv Produktion 1994, Musica Antiqua Köln, von Otter/Goebel)
6. Tracks 16-18: Bob Dylan – I want you (aus der 2003er Remastered-Version von Blonde on Blonde)

Auswertung: Zur Erleichterung der Auswertung verwendet ihr (per copy & paste) am besten folgendes Schema, in das ihr Eure Ergebnisse eintragt und an mich per PN schickt:

Track 01: Wilco***
Track 02: Wilco***
Track 03: Wilco***
Track 04: Madonna***
Track 05: Madonna***
Track 06: Madonna***
Track 07: Beethoven***
Track 08: Beethoven***
Track 09: Beethoven***
Track 10: Scott***
Track 11: Scott***
Track 12: Scott***
Track 13: Händel***
Track 14: Händel***
Track 15: Händel***
Track 16: Dylan***
Track 17: Dylan***
Track 18: Dylan***

wobei ihr für „***“ jeweils die Qualitätsstufe des jeweiligen Songs eintragt, die ihr herausgehört habt, also „128“ oder „192“ (für eine der beiden MP3-Versionen) oder „WAV“ (für die unkomprimierte Version). Näheres zum genauen Auswertungsmodus dann hier.

Die Test-CDs habe ich vorhin an alle Teilnehmer verschickt. Wer keine erhält, oder bei wem die CD nicht korrekt läuft (habe mit den verwendeten CD-Rohlingen auf verschiedenen CD-Playern eigentlich gute Erfahrungen gemacht) melde sich bitte.

Bitte versucht, die jeweiligen Qualitätsstufen allein durch sorgfältiges Hören zu ermitteln. Also nicht (per PN oder im Forum oder sonstwie) untereinander wegen der Ergebisse austauschen, und bitte auch keine speziellen Softwaretools (Wavelab o.ä.) zur Analyse verwenden. Bitte schickt mir Eure Resultate per PN bis spätestens Sonntag, den 19. Februar.