Notebookcheck

Wie wir testen

Ergänzend zu unseren Tests finden Sie hier Erklärungen zu den von uns durchgeführten Tests und Hilfestellung bei der Interpretation von Messergebnissen.

Basierend auf unser Arbeit der letzten Jahre haben wir einen Kriterienkatalog erstellt, der den Großteil kaufrelevanter Aspekte eines Gerätes abdecken soll. Da sich über die Jahre natürlich auch Anforderungen und Technologie verändert haben und auch weiterhin werden, versuchen wir, unsere Testberichte laufend weiterzuentwickeln und zu verbessern. Einen wesentlichen Beitrag dazu können auch Sie als Leser leisten. Wir möchten Sie herzlich einladen, an einem Gedankenaustausch teilzunehmen. Ihre Meinung können Sie entweder via Mail oder in unserem Forum kundtun. Hier stehen sämtliche Redakteure der Testberichte, als auch eine Reihe von engagierten Moderatoren zur Verfügung.

Folgend finden sie eine Übersicht aller Testkriterien der Reviews von Notebookcheck und jeweils eine nähere Erklärung: 

Gehäuse

Das Gehäuse unserer Testgeräte wird unter die Lupe genommen und zufolge folgender Punkte analysiert und bewertet: Design (Farben, Gestaltung, Materialien, Haptik, Abmessungen, Gewicht...), Verarbeitung (Spaltmaße, Lackierung, Kanten, Passgenauigkeit, Sitz der einzelnen Teile,...), Stabilität (Verhalten unter Druck - punktuell, flächig, Verwindungsresistenz,...), Scharniere (Kraftaufwand, Nachwippen, Öffnungswinkel...), Wartung (mögliche Upgrades durch User, Reinigung des Gerätes/Lüfter,...). Die Bewertung der Verarbeitung liegt im Ermessen des jeweiligen Redakteurs und wird nach Rücksprache mit dem Redaktionsteam und dem zuständigen Bereichsleiter, im Vergleich mit bisherigen Testgeräten erstellt.

Ausstattung

Wir bewerten das Angebot der zur Verfügung stehenden Anschlüsse sowie und ihre Lage am Gerät, unter Berücksichtigung der Geräteklasse. 

SDCardreader

Sofern ein Testgerät über ein SDCard-Lesegerät verfügt, wird dieses einem Test hinsichtlich zu erwartender Übertragungsraten unterzogen. Zur Anwendung kommen dabei unsere jeweiligen Referenz-SD-Karten, aktuell eine Toshiba Exceria Pro SDXC UHS-II für Full-Size-Lesegeräte sowie eine Toshiba Exceria microSDHC UHS-I für Geräte mit MicroSD-Slot. Getestet wird die maximal zu erwartende Übertragungsrate beim Kopieren von großen Datenblöcken (beispielsweise Videos) von der SD-Karte auf das Testgerät mittels dem AS SSD Seq. Read Test sowie die beim Kopieren von zahlreichen Bildern (ca. 1 GB .jpg-Bilder mit je rund 5 MB, standardisierte Testdateien) zu erwartende Transferrate, die in der Regel erheblich niedriger als die maximale Übertragungsrate ausfällt. Folgend zur Orientierung die aktuellen Minimum und Maximum-Werte sowie der Durchschnittswert unsere Datenbank (Stand 07/2016).

SDCardreader Transfer Speed - maximum AS SSD Seq Read Test (1GB)
max.
246 MB/s ∼100%
average
87.3 MB/s ∼35%
min.
10.2 MB/s ∼4%
SDCardreader Transfer Speed - average JPG Copy Test (av. of 3 runs)
max.
213 MB/s ∼100%
average
64 MB/s ∼30%
min.
(Toshiba Exceria Pro SDXC 64 GB UHS-II)
10.3 MB/s ∼5%

Konnektivität

Beurteilt werden die zur Verfügung stehenden Kommunikationsmodule wie etwa LAN, WLAN, Bluetooth, 3G, 4G,... Neben einem Praxistest der Telefonfunktionen bei Smartphones führen wir auch einen standardisierten Test der WiFi-Funktion durch.

WiFi Performance

In einem standardisierten Testaufbau ermitteln wir die maximalen Übertragungsraten (Senden und Empfangen) im Zusammenspiel mit unserem Linksys EA8500 Referenzrouter (Abstand 1 m) und der Software Jperf. Hierbei wird der schnellste vom Testgerät unterstützte Übertragungsstandard genutzt.

Networking - iperf Server (receive) TCP 1 m
max.
735 MBit/s ∼100%
average
320 MBit/s ∼44%
min.
24.3 MBit/s ∼3%
Networking - iperf Client (transmit) TCP 1 m
max.
597 MBit/s ∼100%
average
272 MBit/s ∼46%
min.
41.3 MBit/s ∼7%

Eingabegeräte

Folgende Kriterien kommen im Test zur Bewertung: Tastatur - Tastenlayout (Anordnung, Größe, Gruppierung, Übersicht, Funktionstasten, Beschriftung...), Tippgefühl (Hubweg, Druckpunkt, Anschlag, Geräuschkulisse,...), ggf. Zusatztasten; Touchpad - Ansprechverhalten (Oberfläche, Multitouch,...), Mausersatztasten (Bedienung, Geräuschkulisse,...); Touch-Display - Ansprechverhalten (Präzision, Geschmeidigkeit,...), virtuelle Tastatur (Layout, Feedback, Ansprechverhalten, Tastengröße,..), Sensoren, ggf. Digitizer (kapazitives Display);

Display

Folgende Kriterien werden hinsichtlich Display in unseren Tests, zugrunde der zuvor ermittelten Messergebnisse, behandelt und bewertet: Auflösung und Format (Pixeldichte, Übersicht am Display, Mehrfensterbetrieb...), Displayhelligkeit [cd/m²] (maximal, minimal, Netz-/Akkubetrieb,...), Ausleuchtung (Abschattungen, Bleeding,...), Kontrast (max., Schwarzwert,...), Farbdarstellung (DeltaE Colorchecker, Grayscale), darstellbarer Farbraum (sRGB, AdobeRGB98), Blickwinkel, Reflexionen, PWM, Response Time;

Messpunkte Ausleuchtung
Messpunkte Ausleuchtung

Helligkeit, Ausleuchtung und Kontrast

Für die Messung des eingesetzten Displays verwenden wir einen X-Rite i1 Pro 2 Fotospektrometer im Zusammenspiel mit der Software Calman Ultimate in der jeweils aktuellsten Version. Die Abnahme der maximalen Helligkeit wird bei 100 % Weiß vorgenommen. Eine "Warmlaufphase" von rund 10 Minuten wird bei den Messungen eingehalten. Geräteabhängige Optionen, wie etwa eine automatische Helligkeitsanpassung, werden deaktiviert, mögliche voreingestellte Farbprofile bleiben unberücksichtigt, sprich gemessen wird im Auslieferungszustand.
Die Ermittlung des Schwarzwertes wird folglich, ebenso nach einer Adaptionsphase von 10 Minuten, bei 100 % Schwarz, im zentralen Messquadranten vorgenommen (Dunkelkammer). Der von uns daraus errechnete maximale Kontrast bezieht sich auf die so festgestellten Werte im zentralen Displaybereich. Zur Feststellung der Ausleuchtung wird der maximal gemessene Wert in Relation zur minimal festgestellten Helligkeit gesetzt.

Bei für Grafikbearbeitung prädestinierten Geräten wird zudem eine Kalibrierung vorgenommen und das Display erneut hinsichtlich Farbgenauigkeit vermessen. Ein entsprechendes .icc-Profil wird in den Tests zum Download angeboten.

Farbdarstellung: Auslieferungszustand vs. kalibriert

Ab einem Berich von DeltaE kleiner 3 ist es für das Auge kaum möglich die dargestellte Farbe von ihrem Soll (sRGB) zu unterscheiden. Unter 5 ist dies bereits sehr schwer, während bei höheren Abweichung zunehmend deutliche Unterschiede ausgemacht werden können (siehe folgende Grafik, Actual - Target). Geräte für die Bearbeitung von Grafiken, Bildern und Videos sollten demnach im Bereich kleiner 3 agieren bzw. eine entsprechend gute Kalibrierung unterstützen.

CalMAN Graustufen
CalMAN Graustufen
CalMAN ColorChecker
CalMAN ColorChecker
CalMAN Sättigung
CalMAN Sättigung
CalMAN Graustufen kalibriert
CalMAN Graustufen kalibriert
CalMAN ColorChecker kalibriert
CalMAN ColorChecker kalibriert
CalMAN Sättigung kalibriert
CalMAN Sättigung kalibriert

Farbraum

Neben der korrekten Darstellung der Farben spielt für professionelle Grafik- und Bildbearbeitung auch der darstellbare Farbraum eine Rolle. Wir prüfen unsere Testgeräte hinsichtlich Abdeckung des sRGB sowie des AdobeRGB98-Farbraumes. Zur Anwendung kommt hier das per iProfiler erstellte .icc-file im Zusammenspiel mit des Software Argyll. 

Farbraum sRGB 100 %
Farbraum sRGB 100 %
Farbraum AdobeRGB 74 %
Farbraum AdobeRGB 74 %

Response Times - Reaktionszeiten

Mittels Oszilloskop und Fotodiode messen wir die Reaktionsgeschwindigkeit beim Wechsel von Weiß auf Schwarz (0 % zu 100 %) sowie von Grau zu Grau (50 % zu 80 %). Eine niedrige Reaktionszeit ist vor allem für Gaming-Notebooks relevant. Zum Vergleich: speziell auf Gaming ausgelegte Monitore verfügen über eine Response Time von nur wenigen Millisekunden. 

No response rate data found - remove plugin

Leistung

In Abhängigkeit der vorliegenden Geräteklasse und dem damit zu erwartenden Einsatzgebiet wird von uns die Leistung des jeweiligen Modells einerseits mit diversen Benchmarktests (das sind Programme die einzelne Komponenten oder aber das Gesamtsystem fordern und durch eine erreichte Punkteanzahl bewerten), und andererseits durch den Praxistest mit verschiedenen Programmen und Computerspielen, da sich mit ihrer Hilfe Prozessor und Grafikkarte oft bis aufs äußerste fordern lassen, getestet.
Zum Einsatz kommen unter anderem die 3D Mark und PC Mark Benchmarktests von Futuremark, Cinebench R10, als auch diverse Games.

Hinsichtlich Grafiktreiber werden keine Veränderungen am Testsystem vorgenommen, es sei den dies wird zwecks Demonstrationszwecken explizit angeführt. Durch ein Update mit den aktuellsten Treibern für die Grafikkarte und eventuellen Modifikationen lassen sich oftmals Verbesserungen hinsichtlich Spiele- und Benchmarkperformance erreichen. Dennoch liegt es unserer Meinung nach in der Verantwortung des Herstellers, sein System zum Auslieferungszeitpunkt mit aktueller und leistungsfähiger Software auszustatten. 
Folgende Kapitel werden hinsichtlich Leistung abgedeckt:

  • CPU (Turbo-Analyse, Cinebench R10, R11.5, wprime, SuperPi,...)
  • System (PCMark Vantage, PCMark 7)
  • Massenspeicher (HDTune, Crystaldiskmark, ASSSD,...)
  • GPU (3D Mark 2006 1280x1024, Vantage 1280x1024, 3D Mark 11 1280x720, Unigine Heaven,...)
  • Gaming (div. aktuelle Spiele)

Teil der Displayanalyse ist auch die Bewertung der Outdoor-Tauglichkeit, sprich des Einsatzes unter freiem Himmel. Hierbei wird paxisnah überprüft, wie das verbaute Display mit besonders hellen Umgebungslichtbedingungen (3000-10000 cd/m² - bedeckt bis sonnig) zurecht kommt und ob dargestellte Inhalte hier noch gut ablesbar sind. Dazu maßgebliche Faktoren sind:

  • Art der Displayoberfläche (matte Panels verhindern störende Reflexionen)
  • Helligkeit des dargestellten Bildes 
  • in Folge auch Bildkontrast

Die Blickwinkelstabilität beschreibt, wie stark man vom optimalen lotrechten Blickwinkel abweichen kann, während das dargestellte Bild hinsichtlich Farbdarstellung stabil bleibt. Die Überprüfung erfolgt sowohl im praxisnahen Einsatz als auch anhand eines Vergleiches definierter Blickwinkel (45° Abstufungen). Dazu wird das Display in einer Dunkelkammer bei fixierter Blendenanzahl und Verschlusszeit fotografiert.
Die angefertigten Fotomontagen sollen die Bildveränderungen bei definierten Abweichungen von der idealen Betrachtungsposition veranschaulichen.

Weiterführende Informationen:

  • Vergleich mobiler Grafikkarten - detaillierte Informationen, techn. Daten und Leistungswerte aller verfügbaren mobilen Grafikkarten, sortiert nach ihrer Leistungsfähigkeit
  • Benchmarkliste mobiler Grafikkarten - sortierbare Tabelle in der sich alle verfügbaren mobilen Grafikkarten nach verschiedensten Benchmarks und technischen Daten ordnen lassen
  • Benchmarkliste mobiler CPUs - Sortierbare Tabelle in der sich alle verfügbaren mobilen Prozessoren nach verschiedensten Benchmarks und technischen Daten ordnen lassen
  • Spieleliste - Welche GPU kann bei welchen Einstellungen aktuelle Games flüssig wiedergeben

Emissionen

Lärmpegel: Position Messmikrofon
Lärmpegel: Position Messmikrofon

Lautstärke

Unsere Messungen werden mittels eines Lärmpegelmessgerätes (Voltcraft SL-300 oder gleichwertig) unter Einhaltung einer standardisierten Versuchsanordnung durchgeführt. Das Messgerät wird dabei mittig in einer fixierten Entfernung (15 cm) zum Notebook in Position gebracht und gegen eventuell direkt übertragene Vibrationen gesichert. Die Messergebnisse werden in dB(A) (Dezibel) angegeben. Folgend die Versuchsanordnung für unsere Messungen:

  • Idle
    Minimum: Minimal messbarer Lärmpegel im Betrieb ohne Last (Windows Energieprofil: Energiesparmodus)
    Median: Überwiegend beobachtbarer Lärmpegel im Betrieb ohne Last (Profil: Energiesparmodus)
    Maximal: Höchster beobachtbarer Lärmpegel im Betrieb ohne Last (Profil: Höchstleistung)
  • Last
    Median: Überwiegend beobachtbarer Lärmpegel im Last-Betrieb. (3D Mark 2006, Profil Höchstleistung)
    Maximal: Höchster beobachtbarer Lärmpegel im Betrieb bei Auslastung des Systems (Profil: Höchstleistung, 100% CPU und GPU-Last mittels Prime95 und Furmark)

Für die Interpretation der Messergebnisse kann man sich an folgenden Vergleichswerten orientieren: 

Herrscht für das menschliche Ohr absolute Stille in einem Wohnraum, dann beträgt der Lärmpegel des Hintergrundgeräusches etwa 28 dB. Eine Unterhaltung bei normaler Lautstärke bewegt sich bei etwa 60 dB. Alle diese Werte sind jedoch sehr stark von der Entfernung zur Schallquelle abhängig. Unsere Messungen werden daher in einer festen Entfernung zu den Testsamples durchgeführt, um ein aussagekräftiges und untereinander vergleichbares Ergebnis sicher zu stellen. Die Messwerte werden grafisch dargestellt und können anhand einer subjektiven Empfindungsskala bewertet werden:

  • Unter 30 dB: Betriebsgeräusch kaum wahrnehmbar
  • bis 35 dB: Geräusch vorhanden jedoch nicht störend. Idealzustand für Arbeitsgeräte im Office Betrieb
  • bis 40 dB: Schallemissionen deutlich hörbar, eventuell störend nach längerer Zeit
  • bis 45 dB: Lärmemissionen wirken unangenehm bei leiser Umgebung. Noch akzeptabel beim Spielen von Games
  • über 50 dB: Ab dieser Schwelle ist ein Notebook als unangenehm laut zu bezeichnen
Messzonen Oberflächentemperatur
Messzonen Oberflächentemperatur

Temperatur

Die Verteilung der Oberflächentemperatur, welche auch für den Benutzer direkt spürbar ist, wird durch eine berührungslose Messung mit Hilfe eines Infrarotthermometers (Raytek Raynger ST oder vergleichbar) ermittelt. Auch hier wird die Ober- bzw. die Unterseite des Notebooks in neun Messzonen unterteilt, in denen jeweils der maximal feststellbare Wert festgehalten wird.

Die Messung erfolgt einerseits nach 60 Minuten im Idle Zustand des Laptops und im Stresstest nach 60 Minten Auslastung des Systems (100% CPU und GPU-Last) mit den Tools Prime95 und Furmark. 
Zudem wird im Stresstest die Temperaturentwicklung der Kernkomponenten GPU und CPU kontrolliert und hinsichtlich etwaiger Einschränkungen (Throtteln) beobachtet (Tools: HWInfo64, HWMonitor, GPUz,...).
Folgende Bewertungsskala hilft bei der Interpretation der ausgewiesenen Ergebnisse:

  • kleiner als 30°C: Kaum wahrnehmbare und unauffällige Erwärmung.
  • 30 bis 40°C: Erwärmung gut spürbar aber nicht störend.
  • 40 bis 50 °C: bei direktem Kontakt über längere Zeit unangenehm
  • über 50°C: heiß empfundene Oberfläche, problematisch speziell beim Betrieb am Schoß

Lautsprecher

Die Beurteilung der Lautsprecher wird hinsichtlich ihres Klanges, sowie im Zusammenspiel mit der maximal möglichen Lautstärke getroffen. Dabei wird auch die Lage der Lautsprecher berücksichtigt. Die Beurteilung erfolgt subjektiv unter Berücksichtigung der bisherigen Testgeräte in der jeweiligen Klasse.

  • Klang (Höhen, Tiefen, verschiedenste Musikrichtungen, Sprachwiedergabe,...)
  • maximale Lautstärke (Übersteuern, ausreichend für Filmwiedergabe,...)
  • Lage der Lautsprecher (Wiedergabe beim Betrieb auf Oberschenkeln,...)

Energieaufnahme

Metrahit Energy Multimeter
Metrahit Energy Multimeter

Neben der Akkulaufzeit wird von uns auch der Stromverbrauch des Notebooks in unterschiedlichen Betriebszuständen gemessen (Primärseite Netzteil). Wir unterscheiden dabei folgende Settings:

  • Idle: Stromverbrauch beim Betrieb im Leerlauf. 
    Minimum: alle Zusatzfunktionen deaktiviert (WLAN, Bluetooth,..), minimale Displayhelligkeit und aktivierte Stromsparmaßnahmen (Leistungsprofil Energiesparmodus). 
    Median: Maximale Helligkeit, Zusatzfunktionen deaktiviert, Windows Leistungsprofil "Ausgewogen". 
    Maximum: maximal beobachteter Energiebedarf im Idle Betrieb, alle Funktionen aktiviert (WLan, Bluetooth), maximale Displayhelligkeit, Leistungsprofil "Höchstleistung".
  • Last: Betrieb unter Last bei maximaler Displayhelligkeit, alle Zusatzfunktionen aktiviert, Windows Leistungsprofil "Höchstleistung". Median: Für den Test wird das Benchmarkprogramm 3D Mark 2006 herangezogen und der durchschnittliche Stromverbrauch unter Last während der ersten Testsequenz festgehalten.
    Maximum: Stresstest mit 100% CPU und GPU Last mittels der Tools Prime95 und Furmark, maximal gemessener Wert.
    Bei Android Geräten verwenden wir die App "Stability Test" CPU+GPU für Maximum, Classic für Median.
    Bei IOS verwenden wir die Epic Citadel App im Demo Modus.

Als Testgerät verwenden wir derzeit hauptsächlich das professionelle Multimeter Metrahit Energy von Gossen Metrawatt. Dieses erlaubt durch die gleichzeitige TRMS Strom- und Spannungsmessung und die hohe Genauigkeit auch z.B. Standby-Verbräuche von Smartphones zu messen.

Akkulaufzeit

Ausschlaggebend für die Mobilität eines Notebooks ist vor allem die erreichbare Akkulaufzeit in den unterschiedlichsten Betriebszuständen. Wir unterscheiden aktuell bei unseren Tests  vier verschiedene Laufzeittests:

  • Minimale Laufzeit: Ermittelt beim Betrieb unter Last unter Zuhilfenahme des Softwaretools BatteryEater (Classic Test). Folgende Einstellungen werden beim Testgerät getroffen: maximale Displayhelligkeit,  alle Kommunikationsmodule eingeschaltet (WLAN, Bluetooth,…), Windows Leistungsprofil Höchstleistung. 
    Für Android-basierende Geräte wird hier ersatzweise die App "Stability Test" ausgeführt (GPU + CPU), bzw. bei Inkompatibilität mittels 3D Games eine möglichst hohe Auslastung simuliert.
    Für IOS basierende Geräte verwenden wir die App Epic Citadel im Demo Modus.
  • Maximale Laufzeit: Wird ebenso mit dem Tool BatteryEater ermittelt (Readers Test). Gemessen wird die mögliche Einsatzdauer bei minimaler Displayhelligkeit, alle Stromsparfunktionen aktiviert, WLAN und Bluetooth deaktiviert, Leistungsprofilprofil Energiesparmodus.
    Für Android-basierende Geräte dient ersatzweise ein Script, das im Browser Seiten eines Textdokuments aufruft: http://www.notebookcheck.com/fileadmin/Notebooks/book1.htm
  • WLAN Betrieb: Erreichbare Laufzeit beim kabellosen WLAN Betrieb mit angepasster Displayhelligkeit (~150 cd/m²) und aktivierten Stromsparmaßnahmen (Leistungsprofilprofil Ausgeglichen o.ä.). Für den Laufzeittest wird ein automatisches Script (Update am 5.3.2015 auf v1.3 - html 5, javascript, kein flash) ausgeführt, das einen Mix aus Internetseiten aufruft und konstant wechselt (30s Takt).
  • DVD Wiedergabe: Laufzeit im kabellosen DVD Wiedergabebetrieb bei maximaler Displayhelligkeit, deaktiviertem WLAN und Bluetooth sowie aktivierten Stromsparmaßnahmen (Leistungsprofilprofil Energiesparmodus oder höher sofern zur fließenden Wiedergabe notwendig)

Bei den Testergebnissen ist zu berücksichtigen, das es sich bei unseren Testsamples in der Regel um Neugeräte handelt, und die volle Akkuleistung erst nach einigen vollständigen Lade- und Entladezyklen erreicht werden kann. Auch die durchgeführten Test geben lediglich eine Momentaufnahme des Testsystems wieder. Nähere Informationen wie Sie die Akkulaufzeit ihres Gerätes optimieren können, finden Sie in folgendem FAQ Artikel.

Bewertung

Jedes von uns im Rahmen eines ausführlichen Berichtes getestete Notebook wird in allen oben angeführten Bereichen bewertet und im Vergleich zu klassenähnlichen Notebooks beurteilt. Das Bewertungsergebnis setzt sich aus insgesamt 12 Punkten zusammen die die erreichte Punkteanzahl in Form von Prozent auf einer Skala von 0-100 definieren (je höher desto besser).
Abschließend erhält das getestete Notebook eine Gesamtbewertung, in der die einzelnen Bewertungspunkte in Hinblick auf die vorliegende Geräteklasse unterschiedlich stark einfließen (Gewichtung). 
Mit Ausnahme der Punkte Gehäuse und Eingabegeräte werden sämtliche Bewertungskriterien anhand eines speziellen Algorithmus automatisiert und Datenbank gestützt vorgeschlagen, wobei die gesammelten Mess- und Benchmarkdaten die Grundlage bilden. 

Nähere Informationen zu unserem Bewertungssystem finden Sie in diesem Artikel.

> Notebook Test, Laptop Test und News > Benchmarks / Technik > Benchmarks / Technik > Wie wir testen
Autor: Redaktion,  9.10.2006 (Update: 27.07.2016)