Notebookcheck Logo

PCMark for Android Benchmark

Praxisnaher Ansatz. Mit seiner ersten Version des PCMark for Android möchte Futuremark einiges besser machen als die übrige Benchmark-Konkurrenz. Alltägliche Aufgaben eines Smartphones sollen simuliert werden. Die Wertung soll dabei nicht auf einzelne Komponenten des Gerätes abzielen, sondern das Device in seiner Gesamtleistung beurteilen. Wir haben uns das mal genauer angeschaut.
Android Tablet Smartphone Touchscreen
PCMark for Android

Technik

PCMark for Android
PCMark for Android
Der Work-Test gliedert sich in vier Untertests.
Der Work-Test gliedert sich in vier Untertests.

Der Benchmark PCMark for Android beansprucht für sich, anders zu sein als andere Benchmark-Tools, indem er nicht nur die Leistungsfähigkeit der einzelnen Komponenten ermittelt, sondern die verbaute Technik im Ganzen beurteilt. PCMark soll dabei eine Anwendung sein, welche die Leistung eines Gerätes zudem für bestimmte Szenarien bewertet. Während das Gaming-Segment mit dem 3DMark sehr gut bedient wird, ist im PCMark for Android 1.2 zunächst ein Test enthalten, welcher sich auf die Arbeitsleistung („Work performance“) des Systems fokussiert. Weitere Test-Szenarien sollen in kommenden Versionen folgen. Vermutlich werden auch diese an der PC-Version angelehnt sein, welche einen Work-, Home-, Storage- und Creative-Test beinhaltet.

Um den Benchmark überhaupt ausführen zu können wird ein Smartphone oder Tablet benötigt, welches als Betriebssystem Google Android 4.1 oder eine neuere Variante verwendet. Außerdem werden mindestens 450 MB freier Speicher, 1 GB Arbeitsspeicher, eine Panelauflösung von 800 x 480 Bildpunkten sowie die Unterstützung von OpenGL ES 2.0 empfohlen. Die ursprüngliche Dual-Core-Voraussetzung wurde wieder gestrichen. Futuremark weist darauf hin, dass auch schwächere Systeme möglicherweise den Benchmark ausführen können, sie dafür aber keine Gewähr übernehmen oder irgendwelchen Support leisten. Im Test mit einem Google Nexus S blieb der Benchmark während der Ausführung reproduzierbar mit einem weißen Bildschirm hängen.

Der Work-Test unterteilt sich in vier Teilabschnitte: das Surfen im Web, Video-Wiedergabe, Textverarbeitung und Bildbearbeitung. Im ersten Abschnitt wird schlicht die Zeit gemessen, welche benötigt wird, um Webseiten aufzurufen, nach Inhalten zu suchen und eine Seite neu zu laden, nachdem sie bearbeitet wurde. Während der Wiedergabe eines 1080p-Videos (1.920 x 1.080 Pixel, max. 5.4 Mbps, 30 fps, H.264) werden die Frameraten protokolliert. PCMark nutzt hierfür die Media Player API des Android-Systems. Es kann also auch zu unterschiedlichen Ergebnissen anhand der Betriebssystem-Version kommen. Mit dem in Android enthaltenen Text-Programm wird das Öffnen und Bearbeiten von Texten überprüft. Hierfür stehen zwei komprimierte Datenpakete zur Verfügung, welche zunächst vom Testgerät entpackt werden müssen. Das eine enthält ein 100 KB großes Textdokument und zwei jeweils 1,2 MB große Bilder und das andere beinhaltet ein 90 KB großes Dokument mit je einer 1,6 und 1,9 MB großen Bilddatei. Mehrere APIs werden im Foto-Test benutzt. In diesem wird eine 4 MB große JPEG-Datei (2.048 x 2.048 Pixel) geöffnet, bearbeitet und wieder gespeichert. Die Bearbeitung besteht dabei aus der Anwendung verschiedener Filter, welche auf jeweils andere APIs zurückgreifen.

Das Gesamtergebnis errechnet sich aus einem geometrischen Mittel der einzelnen Teilbereiche. Dabei gilt, je höher der Punktewert ist, desto besser ist das Ergebnis. Die genauen Formeln und detaillierte Abläufe können auf der Webseite von Futuremark eingesehen werden. Unsere Angaben beziehen sich auf die Version 1.2.1781 vom 28. Oktober 2014.

Testabschnitt: Surfen im Web
Testabschnitt: Surfen im Web
Testabschnitt: Video-Wiedergabe
Testabschnitt: Video-Wiedergabe
Testabschnitt: Textverarbeitung
Testabschnitt: Textverarbeitung
Testabschnitt: Bildbearbeitung
Testabschnitt: Bildbearbeitung

Neben dem Work-Test enthält der PCMark for Android auch einen Akku-Benchmark. Für diesen muss der Energiespeicher des Testgerätes mindestens zu 80 Prozent geladen sein, um ihn starten zu können. Danach führt die App den Work-Test solange in einer Schleife aus, bis der Akkustand unter 20 Prozent fällt. Dabei ist zu beachten, dass das Panel des Testgerätes auf eine Leuchtkraft von 200 cd/m² eingestellt ist, die Umgebungstemperatur zwischen 18 und 28 °C und die Luftfeuchtigkeit zwischen 10 und 80 Prozent liegt, um vergleichbare Testergebnisse zu erzielen. Das Ergebnis wird auf einen Wert geschätzt, welchen das Testgerät in diesem dieses Szenario durchhalten würde, wenn 95 Prozent der Akkuleistung zur Verfügung stehen würde. Außerdem werden in einem Diagramm neben dem Ladestand des Akkus auch die CPU-Temperatur und die Benchmark-Scores protokolliert.

Benchmark

Ergebnisse des LG G3
Ergebnisse des LG G3

Futuremark verspricht im Work-Benchmark des PCMark for Android Messabweichungen unter drei Prozent. Der Benchmark soll dreimal ausgeführt werden, um ein einheitliches Ergebnis erhalten zu können. Dabei soll zwischen den einzelnen Testläufen eine Pause von 15 Minuten gemacht werden, um durch ein mögliches Throttling des Gerätes, den Wert nicht zu stark zu beeinflussen. Dies trifft oft auf Highend-Devices zu. Zudem sollen alle Hintergrundanwendungen beendet und Apps geschlossen werden.

Wir haben mit dem LG G3 (Android 5.0 Lollipop) die Konsistenz des PCMark genauer untersucht und das Smartphone den Work-Benchmark unter den empfohlenen Bedingungen zehn Mal absolvieren lassen. Der Mittelwert der erhaltenen Werte ergibt 3.731 Punkte. Die höchste Messung erreichte 3.829 Zähler (plus 2,6 %) und die niedrigste 3.662 Punkte (minus 1,8 Prozent). Damit liegen alle Ergebnisse in dem von Futuremark versprochenen Toleranzbereich von drei Prozent

Auch die Vergleichbarkeit der verschiedenen Ergebnisse im Akkutest haben wir überprüft. Mit dem HTC Desire Eye haben wir zwei Durchläufe mit einem vollgeladenen Akku gestartet. Die ermittelten Werte des PCMark lagen nur vier Minuten auseinander. Auch hier liegen die Abweichungen damit deutlich unterhalt der 3-Prozent-Marke. Anders verhält es sich, wenn der Test bei unterschiedlichen Akkuständen ausgeführt wird. Immerhin behauptet Futuremark, dass der Akku nur zu 80 Prozent geladen sein muss, um den Test absolvieren zu können. Dies haben wir mit dem LG G3 ausprobiert. Mit vollem Akku erreichte das Smartphone eine Laufzeit von 315 Minuten. Mit einem Ladestand von 80 Prozent fiel der Wert auf 290 Minuten und ist damit rund acht Prozent geringer. Der errechnete Schätzwert erfüllt nicht die offerierten Qualitätskriterien von Futuremark. Außerdem wird die Masse der Vergleichswerte in der Datenbank des finnischen Unternehmens von privaten Anwendern kommen. Die wenigsten werden jedoch über ein entsprechendes Spektrometer verfügen, um die genormte Lichtstärke (200 cd/m²) für das jeweilige Gerät einstellen zu können. Somit ist die Vergleichbarkeit der Geräte innerhalb der öffentlichen Datenbank eher als schwammig zu bezeichnen.

LG G3: Akkutest mit 80 % Ladung.
LG G3: Akkutest mit 80 % Ladung.
LG G3: Akkutest mit 100 % Ladung.
LG G3: Akkutest mit 100 % Ladung.

Resultate

Die Ergebnisse des PCMark for Android der verschiedenen Geräte zeigt, dass nicht immer die Devices mit den stärksten SoC die besten Resultate erzielen. Außerdem wird am Beispiel des LG G3 gut sichtbar, dass auch die Betriebssystemversion eine entscheidende Rolle spielen kann. Denn das Smartphone erreichte mit Android 4.4 KitKat einen Wert von 3.308 Punkten, während es mit dem neuen Android 5.0 Lollipop auf durchschnittlich 3.731 Zähler klettert, was einem Leistungsgewinn von rund 13 Prozent entspricht.

Interessant ist auch, dass die Leistung des Nexus 9 mit dem K1-Denver-SoC rund fünf Prozent über dem des Nvidia Shield Tablets mit der 32-Bit-Variante liegt.

Die Resultate des Akkutests sind bei einer einheitlichen Handhabung sicherlich ebenfalls recht interessant, zumal hier anhand des Diagramms gut ein mögliches Throttling unter Alltagsbedingungen sichtbar gemacht werden kann. Einen Vergleich innerhalb der öffentlichen Datenbank halten wir jedoch für zu ungenau.

Gut sichtbar wurde dieses Dilemma, als wir den Akku-Test mit dem Sony Xperia M2 Aqua absolvierten. Der Wert wurde von Futuremark als zu gering eingestuft, obwohl die Einstellungen gemäß den Spezifikationen getätigt wurden.

In summa präsentiert Futuremark jedoch einen weiteren gelungenen Benchmark, der durch seine Genauigkeit im Work-Test besticht. Der Ausdauertest muss jedoch noch verbessert werden, dies betrifft vor allem die Schätzung der Laufzeiten.

Auch im Work-Test wird ein Diagramm erstellt.
Auch im Work-Test wird ein Diagramm erstellt.
Akkutest: LG G3 (Android 5.0)
Akkutest: LG G3 (Android 5.0)
Akkutest: HTC Desire Eye
Akkutest: HTC Desire Eye
Akkutest: Sony Xperia M2 Aqua
Akkutest: Sony Xperia M2 Aqua
PCMark for Android
     Work performance score
GeForce ULP K1 (Tegra K1 Kepler GPU), K1 (Denver), 32 GB eMMC Flash
Google Nexus 9
5841 (0min) Points ∼29%
GeForce ULP K1 (Tegra K1 Kepler GPU), K1, 32 GB eMMC Flash
NVIDIA Shield Tablet LTE P1761
5567 (5372min) Points ∼28%
HD Graphics (Bay Trail), Z3745, 16 GB eMMC Flash
Asus Transformer Pad TF103C-1B072A
4298 (4084min) Points ∼22%
Adreno 330, 800 MSM8974, 16 GB eMMC Flash
Acer Liquid S2
4241 (4108min) Points ∼21%
Adreno 420, 805 APQ8084, 32 GB eMMC Flash
Samsung Galaxy Note 4
3914 (0min) Points ∼20%
Adreno 330, 801 MSM8974AB, 16 GB eMMC Flash
HTC Desire EYE
3774 (0min) Points ∼19%
Adreno 330, 801 MSM8974AC, 16 GB eMMC Flash
LG G3
3731 (3662min) Points ∼19%
3308 (0min) Points ∼17%
SGX544MP2, Z2580, 16 GB iNAND Flash
Asus Fonepad Note FHD 6 ME560CG (K00G)
3678 (3520min) Points ∼18%
Mali-T628 MP6, 5420 Octa, 32 GB eMMC Flash
Samsung Galaxy Note Pro 12.2
3617 (0min) Points ∼18%
Mali-450 MP4, MT6592, 16 GB iNAND Flash
Zopo ZP1000
2991 (0min) Points ∼15%
GeForce ULP (Tegra 3), 3, 16 GB SSD
Asus Eee Pad Transformer Prime TF201
2937 (2928min) Points ∼15%
Adreno 320, S4 Pro APQ8064A, 16 GB SSD
Google Nexus 4
2735 (2729min) Points ∼14%
Adreno 305, 400 MSM8926, 8 GB eMMC Flash
Sony Xperia M2 Aqua
2620 (0min) Points ∼13%
Mali-450 MP4, Kirin 910, 16 GB eMMC Flash
Huawei MediaPad X1
2019 (0min) Points ∼10%
SGX544, MT8125, 16 GB eMMC Flash
Asus Memo Pad HD 7
1873 (1847min) Points ∼9%

Übersicht

Einschränkungen

(Hersteller, Modell, Serie, Codename), Suchworte mit   verknüpfen.

alle, keine

Benchmarks / Tests einschränken:

Permalink:

PosModellProcessorGraphics CardPCMark for Android Work performance scorePCMark for Android Work 2.0 performance scorePCMark for Android Work 2.0 battery lifePCMark for Android Storage scorePCMark for Android Computer Vision scorePCMark for Android Work 3.0PCMark for Android Work 3.0 battery lifePCMark for Android Storage 2.0
Asus ROG Phone 7 UltimateQualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
19783
52498
Nubia RedMagic 8 ProQualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
12600
51113
Oppo Find X6 ProQualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
14001
50983
Xiaomi 13 Pro
Test Xiaomi 13 Pro - Hochwertiges Smartphone mit Leica-Kameras inklusive Kopfschüttel-Effekt
Die besten Kamera-Handys 2023 im Test - Wenn der schlafende Riese erwacht, dann ...		Qualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
14789
48843
Xiaomi 13Qualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
14094
47525
Xiaomi 13 Ultra
Test Xiaomi 13 Ultra - Spektakuläres Smartphone mit variabler Kamera-Blende für Leica-Fans
Die besten Foto-Handys 2023 im Test - Smartphones aus dem Reich der Mitte schlagen zurück?		Qualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
15411
46847
Realme GT Neo 3MediaTek Dimensity 8100ARM Mali-G610 MP6
19297
12871
46795
13844
14650
35017
Vivo X90 ProMediaTek Dimensity 9200ARM Immortalis-G715 MP11
42567
Samsung Galaxy S23+Qualcomm Snapdragon 8 Gen 2 for GalaxyQualcomm Adreno 740
15483
41063
Samsung Galaxy S23 Ultra
Kamera-Test Samsung Galaxy S23 Ultra vs. Galaxy S22 Ultra - Fortschritt ist erkennbar ...
Test Samsung Galaxy S23 Ultra - Das Smartphone mit galaktischer Power und 200-MPix-Kamera
Die besten Kamera-Smartphones 2023 im Video-Test - Wir beerdigen einen Handy-Mythos		Qualcomm Snapdragon 8 Gen 2 for GalaxyQualcomm Adreno 740
15991
39949
Honor Magic5 ProQualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
15550
39317
Asus ROG Phone 6 ProQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
17727
37239
Lenovo IdeaPad Flex 5 CB 13IML05 82B80010GEIntel Core i5-10210UIntel UHD Graphics 620
18559
12514
37178
Asus Zenfone 9Qualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
16528
36884
Vivo X90 Pro+Qualcomm Snapdragon 8 Gen 2Qualcomm Adreno 740
12748
36873
Motorola Moto G200 5GQualcomm Snapdragon 888 Plus 5GQualcomm Adreno 660
18567
36738
OnePlus 10 Pro
Test OnePlus 10 Pro - Gelungenes Flagship-Smartphone mit fragwürdigen Anpassungen
Kameratest - 4 Jahre Smartphone-Entwicklung: Ein Ergebnis, das viele zweifeln lassen wird		Qualcomm Snapdragon 8 Gen 1Qualcomm Adreno 730
13827
36721
Samsung Galaxy S23Qualcomm Snapdragon 8 Gen 2 for GalaxyQualcomm Adreno 740
15270
35786
Oppo Find X5Qualcomm Snapdragon 888 5GQualcomm Adreno 660
12769
13913
35783
PosModellProcessorGraphics CardPCMark for Android Work performance scorePCMark for Android Work 2.0 performance scorePCMark for Android Work 2.0 battery lifePCMark for Android Storage scorePCMark for Android Computer Vision scorePCMark for Android Work 3.0PCMark for Android Work 3.0 battery lifePCMark for Android Storage 2.0
Huawei P50 PocketQualcomm Snapdragon 888 4GQualcomm Adreno 660
11897
35655
Samsung Galaxy S22+Samsung Exynos 2200Samsung Xclipse 920
12571
14998
35551
Asus Zenfone 8 FlipQualcomm Snapdragon 888 5GQualcomm Adreno 660
15201
35480
Asus ROG Phone 5Qualcomm Snapdragon 888 5GQualcomm Adreno 660
18942
15027
11551
16391
35263
Asus ZenFone 8Qualcomm Snapdragon 888 5GQualcomm Adreno 660
16428
34974
Xiaomi 12S ProQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
13878
34867
Samsung Galaxy Tab S8 5GQualcomm Snapdragon 8 Gen 1Qualcomm Adreno 730
11351
13740
34800
Samsung Galaxy S22 Ultra 5GSamsung Exynos 2200Samsung Xclipse 920
12579
34722
ZTE Axon 30 Ultra 5GQualcomm Snapdragon 888 5GQualcomm Adreno 660
16564
34562
Oukitel WP2Mediatek MT6750TARM Mali-T860 MP2
33199
Sony Xperia 5 IIIQualcomm Snapdragon 888 5GQualcomm Adreno 660
14729
32283
Nubia RedMagic 6S ProQualcomm Snapdragon 888 Plus 5GQualcomm Adreno 660
13127
31947
Xiaomi 12S UltraQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
13983
31822
Motorola Edge 40MediaTek Dimensity 8020ARM Mali-G77 MP9
16611
31713
Motorola Edge 30Qualcomm Snapdragon 778G+ 5GQualcomm Adreno 642L
15194
31581
Xiaomi 12T Pro 5GQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
15067
31537
Acer Chromebook 15 CB315-3HT-P297Intel Pentium Silver N5030Intel UHD Graphics 605
13200
31170
Samsung Galaxy S21 Ultra
Test Samsung Galaxy S21 Ultra Smartphone - Macht vieles besser, aber nicht alles
Kameravergleich: Xiaomi Mi 11 vs Samsungs Allstars
Kameravergleich Flagship-Smartphones: Welches aktuelle Android-Handy hat die beste Kamera?
Vergleichstest: Die besten Video-Handys 2021 - Unterschiede gravierender als im Foto-Bereich		Samsung Exynos 2100 5GARM Mali-G78 MP14
16741
14362
26688
14339
31127
Samsung Galaxy S22Samsung Exynos 2200Samsung Xclipse 920
12233
14068
31101
Samsung Galaxy S22 Ultra 5G Snapdragon
Vergleichstest Samsung Galaxy S22 Ultra: Snapdragon 8 Gen. 1 vs. Exynos 2200 - Betrug an Europa?
Die besten Foto-Handys zum Jahresstart 2023 - Testvergleich Kamera-Smartphone		Qualcomm Snapdragon 8 Gen 1Qualcomm Adreno 730
13752
30753
PosModellProcessorGraphics CardPCMark for Android Work performance scorePCMark for Android Work 2.0 performance scorePCMark for Android Work 2.0 battery lifePCMark for Android Storage scorePCMark for Android Computer Vision scorePCMark for Android Work 3.0PCMark for Android Work 3.0 battery lifePCMark for Android Storage 2.0
Xiaomi Poco X4 GTMediaTek Dimensity 8100ARM Mali-G610 MP6
13056
30576
Samsung Galaxy Tab S8+ 5GQualcomm Snapdragon 8 Gen 1Qualcomm Adreno 730
13711
30302
Nothing Phone (1)Qualcomm Snapdragon 778G+ 5GQualcomm Adreno 642L
11690
11662
30076
OnePlus 10TQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
15944
29833
Huawei P40 Pro
Test Huawei P40 Pro - Smartphone mit starker Kamera
Kameratest Huawei P40 Pro vs. P40 vs. P40 Lite: Huawei Smartphones im Vergleich
Kameravergleich Huawei P40 Pro vs P30 Pro: Der Google Verzicht lohnt sich nicht! [UPDATE]
Kameratest: Samsung Galaxy S20 Ultra vs. Huawei P40 Pro vs. OnePlus 8 Pro vs. Xiaomi Mi 10 Pro – Low-Light-Debakel bei Samsung		HiSilicon Kirin 990 5GARM Mali-G76 MP16
14352
11341
29206
Huawei Mate 30 ProHiSilicon Kirin 990ARM Mali-G76 MP16
13947
29072
Samsung Galaxy Z Fold4 5GQualcomm Snapdragon 8+ Gen 1Qualcomm Adreno 730
13983
29048
OnePlus Nord 2TMediaTek Dimensity 1300ARM Mali-G77 MP9
29020
Xiaomi Redmi K40 ProQualcomm Snapdragon 888 5GQualcomm Adreno 660
14328
13546
14876
28973
Xiaomi 11T ProQualcomm Snapdragon 888 5GQualcomm Adreno 660
13865
28964
Xiaomi 12Qualcomm Snapdragon 8 Gen 1Qualcomm Adreno 730
<