Kraken - új böngésző benchmark a Mozilla-tól

Címkék

Rob Sayre tegnap bejelentette a Mozilla új, Kraken névre hallgató böngésző benchmark-ját. A bejelentés szerint a Sunspider, V8 és Dromaeo teljesítménymérő programoktól eltérően a Kraken inább valós terhelésekre és előretekintő alkalmazásokra fókuszál. Részletek a bejelentésben. A benchmark itt.

Hozzászólások

"On my somewhat elderly x86_64 Linux system Google Chrome 6.0.472.55 beta completes the Kraken benchmark in 28638.1 milliseconds, Opera 10.62 completes it in 23612.4 milliseconds, and the current Firefox 4 nightly build completes it in 19897.5 milliseconds."

(Slashdot)

--
trey @ gépház

nálam a Chrome 7.0.517.5 dev: 19879.9ms

nekem core2duo T7100-on ez lett az eredmény Google Chrome6.0.472.59 beta-val:

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 24911.1ms +/- 0.7%
-----------------------------------------------

Opera 10.7: 11.975,2 ms
Firefox 3.6.8: 79.367,8 ms (!!)

Az aktuális Firefox ~7-szer lassabb.


TEST                         COMPARISON            FROM                 TO               DETAILS

====================================================================================

** TOTAL **:                 6.63x as fast     79367.8ms +/- 0.7%   11975.2ms +/- 1.0%     significant

====================================================================================

  ai:                        4.56x as fast      7699.2ms +/- 1.8%    1688.3ms +/- 2.3%     significant
    astar:                   4.56x as fast      7699.2ms +/- 1.8%    1688.3ms +/- 2.3%     significant

  audio:                     4.70x as fast     17305.1ms +/- 2.2%    3685.1ms +/- 0.9%     significant
    beat-detection:          5.40x as fast      4840.8ms +/- 1.9%     895.8ms +/- 1.9%     significant
    dft:                     3.76x as fast      4243.7ms +/- 3.0%    1127.4ms +/- 1.4%     significant
    fft:                     5.91x as fast      4732.2ms +/- 2.8%     800.5ms +/- 2.4%     significant
    oscillator:              4.05x as fast      3488.4ms +/- 3.7%     861.4ms +/- 1.8%     significant

  imaging:                   8.47x as fast     44647.1ms +/- 1.2%    5272.4ms +/- 1.1%     significant
    gaussian-blur:           8.51x as fast     31362.0ms +/- 0.8%    3684.4ms +/- 1.0%     significant
    darkroom:                9.27x as fast      6299.4ms +/- 3.3%     679.2ms +/- 1.6%     significant
    desaturate:              7.69x as fast      6985.7ms +/- 3.1%     908.8ms +/- 3.7%     significant

  json:                      1.76x as fast       354.9ms +/- 4.7%     201.9ms +/- 2.8%     significant
    parse-financial:         2.61x as fast       241.0ms +/- 5.0%      92.3ms +/- 3.5%     significant
    stringify-tinderbox:     -                   113.9ms +/- 6.4%     109.6ms +/- 2.7% 

  stanford:                  8.30x as fast      9361.5ms +/- 2.1%    1127.5ms +/- 3.5%     significant
    crypto-aes:              7.35x as fast      1735.3ms +/- 3.0%     236.2ms +/- 8.7%     significant
    crypto-ccm:              4.13x as fast      1260.9ms +/- 4.7%     305.3ms +/- 3.4%     significant
    crypto-pbkdf2:           11.6x as fast      4868.6ms +/- 3.0%     419.5ms +/- 4.2%     significant
    crypto-sha256-iterative: 8.99x as fast      1496.7ms +/- 3.8%     166.5ms +/- 7.7%     significant

--
Elder Scrolls


TEST                         COMPARISON            FROM                 TO               DETAILS
====================================================================================
** TOTAL **:                 1.52x as fast     31339.4ms +/- 1.2%   20624.5ms +/- 0.9%     significant
====================================================================================

FROM == Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.2.8) Gecko/20100722 Firefox/3.6.8
TO == Google Chrome 6.0.472.59


RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total:                        31786.6ms +/- 0.4%

Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9.2.9) Gecko/20100824 Firefox/3.6.9

@ Dell Latitude E5500 Intel Core2Duo P8600, 2004MB RAM

--
A gyors gondolat többet ér, mint a gyors mozdulat.

Ez érdekes, a Firefox lemaradása ezzel a benchmarkkal csökken.

Mozilla Firefox 3.6 - 42570.9ms

Google Chrome 6 - 31208.5ms

Opera 10.60 - 27963.1ms

Viszont nem sikerült IE kompatibilisre megcsinálni, mint a SunSpidert.

Firefox 3.6.9

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 24510.2ms +/- 0.5%
-----------------------------------------------

Chromium 6.0.472.53

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 18650.9ms +/- 0.8%
-----------------------------------------------

Opera 10.70

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 19513.0ms +/- 0.5%
-----------------------------------------------

Epiphany 2.30.5

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 18689.3ms +/- 0.4%
-----------------------------------------------

Midori 0.2.7

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 18779.9ms +/- 1.1%
-----------------------------------------------

uname -a
Linux bors 2.6.35-ARCH #1 SMP PREEMPT Fri Aug 27 17:14:28 CEST 2010 x86_64 Intel(R) Celeron(R) CPU E3200 @ 2.40GHz GenuineIntel GNU/Linux

---------------------------------------------------------------------------------
A Linux nem ingyenes. Meg kell fizetni a tanulópénzt.
Az emberek 66 százaléka nem tud számolni! Gondoljatok bele, ez majdnem a fele!!

Fedora 13 x86_64, 4 magos CPU, 4Gbyte RAM
Opera 10.62: 21403.3ms +/- 4.6%
Chrome 6.0.472.55 beta: 23988.2ms +/- 0.9%

AMD 5050e 1-2,6GHz | 2GB DDR2@800 CL5
FireFox 3.6.9
Windows 7 32bit:

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 32165.3ms +/- 0.3%
-----------------------------------------------

ai: 6166.4ms +/- 0.6%
astar: 6166.4ms +/- 0.6%

audio: 9956.4ms +/- 0.4%
beat-detection: 2334.6ms +/- 0.4%
dft: 2792.3ms +/- 1.2%
fft: 2296.7ms +/- 0.7%
oscillator: 2532.8ms +/- 0.5%

imaging: 11270.0ms +/- 0.4%
gaussian-blur: 5008.0ms +/- 0.6%
darkroom: 997.9ms +/- 0.7%
desaturate: 5264.1ms +/- 0.4%

json: 522.2ms +/- 0.8%
parse-financial: 367.8ms +/- 1.0%
stringify-tinderbox: 154.4ms +/- 0.7%

stanford: 4250.3ms +/- 1.0%
crypto-aes: 1123.3ms +/- 2.9%
crypto-ccm: 925.7ms +/- 1.7%
crypto-pbkdf2: 1533.5ms +/- 2.1%
crypto-sha256-iterative: 667.8ms +/- 0.5%

AMD 5050e 1-2,6GHz | 2GB DDR2@800 CL5
FireFox 3.6.9
Linux amd64 2.6.35-21-generic #31-Ubuntu SMP Mon Sep 13 23:14:37 UTC 2010 x86_64 GNU/Linux

Az erdekes, hogy csak 1 magot hasznalt valamint neha 1,5G+ RAMot, nem is sikerult elsore a teszt, mert memory leakelt FF, ezert kilottem mikor mar nagyon swapelt.

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 145319.3ms +/- 0.2%
-----------------------------------------------

ai: 21683.5ms +/- 0.3%
astar: 21683.5ms +/- 0.3%

audio: 32024.8ms +/- 0.3%
beat-detection: 8516.2ms +/- 0.2%
dft: 9044.2ms +/- 0.3%
fft: 8233.2ms +/- 1.0%
oscillator: 6231.2ms +/- 0.4%

imaging: 76991.7ms +/- 0.3%
gaussian-blur: 53124.3ms +/- 0.3%
darkroom: 10011.0ms +/- 0.8%
desaturate: 13856.4ms +/- 0.3%

json: 458.1ms +/- 0.9%
parse-financial: 297.8ms +/- 1.1%
stringify-tinderbox: 160.3ms +/- 0.8%

stanford: 14161.2ms +/- 0.1%
crypto-aes: 2807.2ms +/- 0.9%
crypto-ccm: 1958.2ms +/- 0.4%
crypto-pbkdf2: 7138.9ms +/- 0.2%
crypto-sha256-iterative: 2256.9ms +/- 0.8%

Vegre valami :) Most memory leaknek nyoma sem volt
AMD 5050e 1-2,6GHz | 2GB DDR2@800 CL5
Minefield 4.0b7pre
Linux amd64 2.6.35-22-generic #33-Ubuntu SMP Sun Sep 19 20:32:27 UTC 2010 x86_64 GNU/Linux

===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 18361.8ms +/- 0.4%
-----------------------------------------------

ai: 7642.8ms +/- 1.0%
astar: 7642.8ms +/- 1.0%

audio: 4661.5ms +/- 1.4%
beat-detection: 997.6ms +/- 3.2%
dft: 1828.0ms +/- 3.7%
fft: 902.8ms +/- 0.7%
oscillator: 933.1ms +/- 0.7%

imaging: 3715.1ms +/- 0.4%
gaussian-blur: 2109.5ms +/- 0.6%
darkroom: 524.8ms +/- 0.5%
desaturate: 1080.8ms +/- 0.7%

json: 346.1ms +/- 1.8%
parse-financial: 222.1ms +/- 0.3%
stringify-tinderbox: 124.0ms +/- 4.7%

stanford: 1996.3ms +/- 1.0%
crypto-aes: 548.7ms +/- 0.3%
crypto-ccm: 505.2ms +/- 2.3%
crypto-pbkdf2: 752.9ms +/- 1.5%
crypto-sha256-iterative: 189.5ms +/- 3.9%

safari (5.0.2) meg nem volt:

RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 16020.3ms +/- 0.3%
-----------------------------------------------

ugyanezen gepen meg:

firefox 4.0b6

RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 17066.4ms +/- 0.8%
-----------------------------------------------

chrome 6.0.472.59

RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 22175.6ms +/- 0.2%
-----------------------------------------------

Iceweasel/4.0b5
8587.4ms +/- 1.4%

WebKit (Epiphany 2.30.2)
13053.6ms +/- 0.4%

Persze egy Mozillaek altal gyartott benchmarknak elkepzelheto hogy maga fele hajlik a keze :)

Az lehetséges, hogy csak 1 magot használ ez a teszt (illetve a js motor, legalábbis chrome-on), és miért? (technológiai akadály?)
25%-os cpu kihasználtságnál nem okozott többet, 1. magon nagyobb terhelés, a 3. magon alig volt mozgás, a 2. és 4. magon pedig semmi(ez gondolom a ht miatt). Egyébként core i3.

Valaki nézhetne egy ff-ie(-chrome-opera) összehasonlítást is. :) (Nekem sajnos most nincs annyi időm.)

--
Don't be an Ubuntard!

OSX 64bit 2.16C2D

Safari 5.02: 14634.2ms +/- 0.3%
Opera 10.62: 17427.6ms +/- 0.9%
Chrome 6.0.472.59: 20605.1ms +/- 0.4%
Firefox 4.0b2: 17657.2ms +/- 0.3%

Az összes böngésző mindkét magot szimetrikusan terhelte.

Proci : E8400@3870MHz

Google Chrome 7.0.517.5 (Hivatalos verzió 59018) dev
WebKit 534.7
V8 2.3.11.6

Chrome

Total: 11885.5ms +/- 0.9%

----------------------------------------------------------------------------------------

Ugyanez Firefox 3.6.9

Firefox

Total: 18393.0ms +/- 0.3%

Érdekes, nekem E6300@3,5GHz (tehát elvileg lassabb kéne, hogy legyen, nemcsak az órajel, hanem a 2MB-os cache miatt is)

Firefox 3.6.8

Firefox

Total: 14564.5ms +/- 0.6%

Ráadásul a részeredmények is teljesen másmilyenek. Nálad 32 bites az OS?
---
Internet Memetikai Tanszék

OSX 10.6.2, i7-920 hackintoshon:

Safari 5.0.1: 14530.5ms +/- 0.6%
Firefox 3.6.9: 31582.0ms +/- 0.3%
Chrome 6.0.472.55: 18976.1ms +/- 0.4%

A'rpi

nohát, nekem valami parancsfájl-hibával lerohad :(

--
vindóz alatt:
===============================================
RESULTS (means and 95% confidence intervals)
-----------------------------------------------
Total: 45602.0ms +/- 0.1%
-----------------------------------------------

ai: 2180.7ms +/- 3.1%
astar: 2180.7ms +/- 3.1%

audio: 16023.6ms +/- 0.3%
beat-detection: 4192.6ms +/- 0.5%
dft: 3305.4ms +/- 0.9%
fft: 4063.9ms +/- 0.7%
oscillator: 4461.7ms +/- 0.4%

imaging: 19058.4ms +/- 0.2%
gaussian-blur: 7610.3ms +/- 0.3%
darkroom: 1947.5ms +/- 0.2%
desaturate: 9500.6ms +/- 0.3%

json: 796.2ms +/- 0.4%
parse-financial: 574.7ms +/- 0.7%
stringify-tinderbox: 221.5ms +/- 0.9%

stanford: 7543.1ms +/- 0.7%
crypto-aes: 2151.0ms +/- 2.2%
crypto-ccm: 1531.2ms +/- 0.9%
crypto-pbkdf2: 2956.3ms +/- 0.5%
crypto-sha256-iterative: 904.6ms +/- 0.7%

firefox 3.6.9

Kis ultrahordozhato gepecskemen (Lenovo X201, i5-2.4, Win7):
Chrome 6.0.472.55: 18760.9ms +/- 0.8%
Opera 10.6 14113.2ms +/- 1.1%

----------------------
while (!sleep) sheep++;

Jaj, de sok a winfosos eredmény. :(

--
GPLv3-as hozzászólás.

Opera 10.61 6430-as build: 14395

Firefox 3.6.3 értékelhetetlen, kb 10 perc gépszaggatás után lőttem le, és nagyjából az első három sorral végzett.

Tudom, nem túl összehasonlító az eredmény egy legújabb meg egy régebbi verzió...

A legújabb mozillás béta adja a legjobb eredményt a legújabb mozillás tesztre, megdöbbent ez, bazmeg, megdöbbent...
----
Hülye pelikán

??
miért írod hogy megdöbbentő?
teljesen természetes, annyira hogy még ironizálni/gúnyolódni(?) sem lehet rajta

az a megdöbbentő hogy a legújabb ie tesztek közül (testdrive) van amit a ff jobban visz :)

((egyébként nem hogy "nem túl összehasonlítható" hanem teljesen értelmetlen régi böngészővel az új tesztet összehasonlítani, kb mintha 3d tesztet futtatnál nem 3d gyorsított régi hw-en))

persze, lehet használni, (mint ahogy az egyébként létező, emuláció/processzor bencsnek alkalmas 3d teszteknek is lehet értelme)
de nem sok értelme van gyakorlatban

mert ugyanúgy ahogy arra tervezték hogy a saját böngészőjét részesítse előnyben, ugyanúgy a gyakorlati használatra is tervezték ami változott az előző ff óta

ezen kívül amit tudott az előző ff azt a mostani ie-be igyekeztek ugye belepakolni, tehát hogy az ie lassabb legyen az előző ff-nak is annak kell lennie