wp.pl > MP3 > Test odsłuchowy
 Strona główna   Strefa   ToTaLista   Wytwórnie   Informacje   Programy   Sprzęt   Forum   gajowy vs dRWAL 
 
 

  Formaty
W naszym teście testowane były następujące formaty:
  • AAC
  • MP3
  • MP3Pro
  • MPC
  • OGG
  • RA
  • VQF
  • WMA
 

Test odsłuchowy

Wyniki (11743 porównania)


Cel testu:

W teście porównywane były formaty kompresji stratnej dźwięku z podziałem na trzy klasy przepływności, czyli rozmiary plików wynikowych, z wyszczególnieniem konkretnych kodeków - algorytmów kompresji. Celem testu było wyznaczenie najlepszego pod względem jakości dźwięku kodeka w każdej klasie.

Sposób przygotowania i wykonania testu:

Test polegał na porównaniu dwóch fragmentów zakodowanych w nieznanych uczestnikom formatach dźwiękowych z danej klasy przepływności.

Przygotowano pliki w każdym formacie stratnej kompresji dźwięku (AAC, MP3, MP3 Pro, MPC, WMA, RA8, VQF, OGG) z wykorzystaniem dostępnych kodeków (wyszczególnione w tabeli), oraz odpowiednio spreparowane, nie skompresowane pliki WAV, poddane jedynie filtracji wysokich częstotliwości. Pliki skompresowane zostały zdekodowane z powrotem do formatu WAV, aby ukryć przed uczestnikami rodzaj użytej kompresji.

Zadano pytanie: "Która próbka według Ciebie brzmi lepiej?"
Możliwe odpowiedzi: "Zdecydowanie A/B", "Raczej A/B" oraz "Nie słyszę różnicy".

Odpowiedzi były przeliczane na oceny w następujący sposób:
"Zdecydowanie A" - próbka A dostaje +2 pkt., a B -2 pkt.
"Raczej A" - próbka A dostaje +1 pkt., a B -1 pkt.
"Nie słyszę różnicy" - obie próbki po 0 pkt.

Ostatecznie dla każdej z próbek (określony format i kodek, ale dla wszystkich utworów łącznie) liczona była ocena średnia, oraz odchylenie standardowe będące miarą rozrzutu wyników, która przełożona może być na większą lub mniejszą niepewność uczestnika jak daną próbkę ocenić. Podana została także liczba porównań, w których dana próbka wzięła udział.

Próbki były wybierane losowo, tak, by każda w danej grupie przepływności wystąpiła możliwie tą samą ilość razy.

Wyniki przedstawione są w tabelach obejmujących dane trzy klasy przepływności: 60kbps - 100 kbps, 101 kbps - 170 kbps i 171 kbps - 210 kbps i są posortowane według oceny.



Przepływność: 60-100 kbps

Miejsce Kodek Implementacja Ilość Średnia ocena Odchylenie standardowe
1 OGG 1.0 Final VBR 0 311 0.537 1.381
2 MP3 FastEnc 96 kbps lowpass 14 kHz 197 0.431 1.418
3 AAC Liquifier v.5.0 96 kbps, 16069 Hz 352 0.369 1.272
4 AAC Psytel v.2.15 -br 96 -production -profile 1 -c 16000 252 0.325 1.347
5 MP3 Pro 96 kbps 265 0.302 1.343
6 MP3 FastEnc VBR 10 239 0.238 1.419
7 WMA 64 kbps 273 0.216 1.396
8 OGG 1.0 Final VBR 2 298 0.208 1.481
9 AAC Psytel FastEnc v2.00 -br 96 -c 16000 308 0.201 1.455
10 AAC Liquifier v.5.0 64 kbps, 15093 Hz 286 0.189 1.489
11 RA8 96 kbps 254 0.169 1.463
12 WMA 96 kbps 342 0.152 1.309
13 RA8 64 kbps 301 0.109 1.448
14 MP3 Pro 80 kbps 280 0.100 1.451
15 MP3 Lame 3.92 -b 96 -m j -q 0 --lowpass 14 219 0.078 1.465
16 MPC thumb 270 0.037 1.395
17 MP3 Xing 96 High Frequency 200 0.010 1.396
18 VQF 96 kbps 274 0.007 1.409
19 MP3 Pro 64 kbps 228 0.004 1.387
20 MP3 FastEnc 64 kbps, 32 kHz, lowpass 12 kHz 275 -0.004 1.518
21 VQF 80 kbps 325 -0.025 1.403
22 MP3 Blade, 96 kbps 201 -0.134 1.558
23 MP3 Lame 3.92 -b 64 -m j -q 0 --resample 32 --lowpass 12 184 -0.185 1.514
24 AAC Psytel v.2.15 -br 64 -production -profile 1 -resample 32000 -pns -c 12000 276 -0.199 1.460
25 AAC Psytel FastEnc v2.00 -br 64 -c 12000 307 -0.215 1.482
26 WAV (lowpass 10 kHz) 315 -0.367 1.456
27 MP3 Xing 64 High Frequency 220 -0.414 1.473
28 VQF 64 kbps 305 -0.430 1.580
29 MPC --telephone 283 -0.452 1.417
30 MP3 Blade, 64 kbps 206 -0.660 1.421
31 WAV (lowpass 7,5 kHz) 276 -0.722 1.432



Przepływność: 101-170 kbps

Miejsce Kodek Implementacja Ilość Średnia ocena Odchylenie standardowe
1 OGG 1.0 Final VBR 4 295 0.227 1.267
2 MP3 FastEnc VBR 50 267 0.131 1.321
3 MP3 Blade, 160 kbps 337 0.120 1.285
4 RA8 132 kbps 361 0.095 1.329
5 AAC Psytel FastEnc v2.00 -br 128 -c 18000 349 0.089 1.298
6 AAC Psytel v.2.15 -br 128 -production -profile 1 -c 18000 317 0.085 1.351
7 MP3 Lame 3.92 --abr 128 -q 2 -m j --lowpass 16.5 301 0.066 1.287
8 AAC Liquifier v.5.0 160 kbps, 20145 Hz 299 0.060 1.345
9 WMA 128 kbps 345 0.053 1.293
10 MP3 FastEnc 128 kbps lowpass 16.5 kHz 317 0.047 1.276
11 MP3 FastEnc 160 kbps lowpass 18 kHz 340 0.032 1.251
12 AAC Psytel v.2.15 -br 160 -production -profile 1 -c 20000 335 0.027 1.296
13 MP3 Lame 3.92 -b 128 -m j -q 0 --lowpass 16.5 323 0.006 1.326
14 MP3 Xing 128 High Frequency 306 0.000 1.308
15 MP3 Lame 3.92 -b 160 -m j -q 0 --lowpass 18 324 -0.012 1.333
16 AAC Liquifier v.5.0 128 kbps, 18127 Hz 344 -0.017 1.266
17 MP3 Xing 160 High Frequency 295 -0.020 1.365
18 MPC --radio 318 -0.025 1.369
19 AAC Psytel FastEnc v2.00 -br 160 -c 20000 304 -0.056 1.338
20 AAC Homeboy 128 kbps 348 -0.074 1.331
21 WAV (lowpass 12,5 kHz) 357 -0.193 1.414
22 MP3 Blade, 128 kbps 346 -0.196 1.403
23 WAV (mono) 354 -0.440 1.435



Przepływność: 171-210 kbps

Miejsce Kodek Implementacja Ilość Średnia ocena Odchylenie standardowe
1 AAC Psytel v.2.15 -br 192 -production -profile 1 -c 20000 590 0.146 1.286
2 RA8 176 kbps 508 0.106 1.338
3 OGG 1.0 Final VBR 6 767 0.097 1.181
4 MPC --standard 522 0.047 1.286
5 AAC Liquifier v.5.0 192 kbps, 20145 Hz 527 0.030 1.365
6 MP3 FastEnc VBR 90 538 0.027 1.312
7 MP3 Blade, 192 kbps 504 0.021 1.353
8 MP3 Lame 3.92 -b 192 -m j -q 0 --lowpass 20 499 0.012 1.283
9 MP3 FastEnc 192 kbps lowpass 20 kHz 545 -0.012 1.332
10 WAV (lowpass 15 kHz) 494 -0.022 1.340
11 MP3 Xing 192 High Frequency 680 -0.026 1.192
12 AAC Psytel FastEnc v2.00 -br 192 -c 20000 471 -0.040 1.293
13 WMA 192 kbps 555 -0.073 1.353
14 MP3 Lame 3.92 --r3mix 482 -0.118 1.275


Interpretacja wyników:
- średnia ocena bliska '0' oznacza, że próbka jest idealnie przeciętna, czyli z taką samą ilością innych próbek wygrywa, co przegrywa,
- ujemna średnia ocena oznacza, że próbka częściej przegrywała porównanie. 100% przegranych porównań symbolizowane byłoby oceną '-2' - taki przypadek oczywiście nie zaszedł - jest to statystycznie prawie niemożliwe,
- dodatnia średnia ocena oznacza, że próbka częściej wygrywała porównanie. Ideałem byłoby osiągnięcie oceny bliskiej '+2',
- w klasie 60-100kbps oczywistym zwycięzcą jest OGG, dobrze też wypada MP3: kodowane w FastEnc 96 kbps lowpass 14 kHz, oraz AAC: Liquifier v.5.0 96 kbps, 16069 Hz i Psytel v.2.15 -br 96 -production -profile 1 -c 16000. Dość nieoczekiwana jest wyższa pozycja WMA 64 kbps niż WMA 96 kbps, jednak w obu tych przepływnościach format ten daje bardzo kiepską jakość dźwięku, żeby nie powiedzieć "równie kiepską"... Porównywanie dźwięków o tak niskich parametrach nastręcza oczywistych problemów, każdy z kodeków wnosi bowiem inne zniekształcenia, co utrudnia określenie "co jest lepsze". Należy jednak podkreślić, że czołówka tabeli, to prawdziwi zwycięzcy.
- w klasie 101-170kbps zwycięzcą jest ponownie OGG. Otrzymuje on ocenę prawie 2 razy wyższą niż MP3 z miejsca drugiego, przy mniejszym rozrzucie wyników, czyli z większą pewnością były przez uczestników wystawiane oceny. W tej klasie ścisłą czołówkę, czyli OGG, MP3: FastEnc VBR 50 i Blade, 160 kbps, RealAudio8 132 kbps, AAC: Psytel FastEnc v2.00 -br 128 -c 18000 i Psytel v.2.15 -br 128 -production -profile 1 -c 18000 należy uznać za wiarygodną, pozostałe miejsca zaś pozostają w granicach błędu (przykładowo wygrana LAME 128 z LAME 160, miejsca 13. i 15.).
- w klasie 171-210kbps zwycięzcą jest AAC z kodekiem Psytel v.2.15 -br 192 -production -profile 1 -c 20000. Wyraźnie góruje ponad miejscami kolejnymi i taki wynik należy uznać za wiarygodny. Porównywanie dźwięków o wysokiej jakości kompresji, jak to ma miejsce w tej klasie, jest oczywiście utrudnione. Należy mieć na uwadze, że przeciętny uczestnik testu dysponował niskiej jakości komputerowym sprzętem audio i tylko z tego względu mógł być pozbawiony możliwości usłyszenia różnic w tych kodekach. W tej klasie przepływności jakość jest już bardzo zbliżona do jakości CD, czyli dźwięku bez kompresji.


Statystyki:
- wykonano łącznie 11743 porównań, szczegółowe liczby przedstawione są w tabelach
- klasa najniższych przepływności zawierała 124 pliki, 4 utwory zakodowane na 31 różnych sposobów,
- klasa średnich przepływności zawierała 92 pliki, 4 utwory zakodowane na 23 różne sposoby,
- klasa najwyższych przepływności zawierała 56 plików, 4 utwory zakodowane na 14 różnych sposobów.


  Komentarze (290)
Pokaż komentarzy i ułóż je ,
wyświetlając    zapamiętaj

traszka 2003-05-22 13:38:24 zgłoś do moderacji  odpowiedz Odpowiedz
ja pierdziele, rzeczywiscie calkiem wypasiona sprawa! kto by pomyslal


M 2003-06-14 20:41:03 zgłoś do moderacji  odpowiedz Odpowiedz

Cóż za inteligentny i wiele wnoszący komentarz :D


Pro-NIT 2003-07-26 12:13:06 zgłoś do moderacji  odpowiedz Odpowiedz

Faktycznie, komentarz czaderski. Za chwilę spodziewam się, że ktoś napisze, że te wyniki to robota Millera.


Makisashi 2003-09-02 11:59:57 zgłoś do moderacji  odpowiedz Odpowiedz

Te komentarze to robota Millera. Na bank...


pAuLiNkAaAa (zobacz WWW) 2004-05-13 15:38:05 zgłoś do moderacji  odpowiedz Odpowiedz

a ja mysle ze to Bush sie msci na Bin Ladenie :D:D


dżaga 2004-06-20 19:27:46 zgłoś do moderacji  odpowiedz Odpowiedz

wysusz se mózg i pomyśl co piszerz


dod1 2004-12-08 17:37:02 zgłoś do moderacji  odpowiedz Odpowiedz

piszesz sie pisze piszesz a nie piszerz analfabeto


sliczna 2004-12-09 15:07:09 zgłoś do moderacji  odpowiedz Odpowiedz

dod1 ty napewno tez sie kiedyś pomyliłaś ale to nieznaczy że musisz odrazu wyzywac a zdrugiej strony on mugł by sie na uczyc pisac :d


wychylylybymy 2004-12-14 13:03:05 zgłoś do moderacji  odpowiedz Odpowiedz

ale mógł sie pisze a nei mugł analfabetko ;)


tomektoronto (zobacz WWW) 2005-03-14 05:29:07 zgłoś do moderacji  odpowiedz Odpowiedz

TY JESTES CHYBA d*** PONIEWAZ OD "ALE"ZDANIA SIE NIE ZACZYNA!. ALE TO WYRUCHALI GORALE PAJACU
Następne komentarze »

Wirtualna Polska nie ponosi odpowiedzialności za treść opinii.

Dodaj Twój komentarz