DatenschutzerklärungSo testet die Stiftung Warentest
Die Stiftung Warentest bewertet Multimediahandys und Smartphones in acht Disziplinen: Telefon, Internet und PC, Kamera, Ortung und Navigation, Musikspieler, Handhabung, Stabilität sowie Akku. Die Noten in den Disziplinen werden Gruppenurteile genannt. Aus den acht Gruppenurteilen ergibt sich das test-Qualitätsurteil. Lesen Sie hier, wie die Stiftung Warentest testet und bewertet.
Multimediahandys und Smartphones im Test
Handys und Smartphones testet die Stiftung Warentest gemeinsam mit Verbraucherorganisationen aus Belgien, Frankreich, Italien, Spanien, Portugal, den Niederlanden sowie einigen skandinavischen Ländern. Die Geräte werden anonym im Handel eingekauft. Weder Pressemuster noch Vorserienmodelle kommen in den Test.
Video: So testen wir Smartphones
Die interessantesten der aufwendigen Tests im Video.
Preise
Der Produktfinder zeigt Online-Preise ohne Versandkosten. Die Preise ermittelt der Onlinedienst idealo.de. In der Einzelproduktansicht zeigen wir zudem Ladenpreise an, die wir in regelmäßigen Abständen in einer überregionalen Handelserhebung ermitteln. Der Stand der jeweiligen Preisangabe wird für jedes Produkt angezeigt.
Untersuchungen
Alle subjektiven – also nicht auf Messungen beruhenden – Bewertungen werden jeweils von drei Experten vorgenommen.
Telefon: 15 %
Die Sprachverständlichkeit messen wir an einem Kunstkopf mit nachgebildetem Ohr und Mund (links). Bei der Messung der Sendeleistung simuliert eine künstliche Hand den Einfluss der Hand des Nutzers (rechts).
Sprachqualität: Wir messen die Sprachqualität in beide Richtungen (Hören und Sprechen) in einem simulierten UMTS-Netz sowohl mit als auch ohne Umgebungslärm. Dabei ermitteln wir mit einem Kunstkopf mit geeigneter Mund- und Ohrnachbildung in einem reflexionsarmen Raum die Übertragungsgüte nach den Verfahren „POLQA/P.863“ (Perceptual Objective Listening Quality Analysis).
Netzempfindlichkeit: Wir betreiben das Handy in einer reflexionsarmen Freifeldkabine mit Phantomhand und künstlichem Kopf in einem simulierten GSM-Netz und messen, bei welcher Sendeleistung des Netzes die Verbindung abreißt. Zudem bestimmen wir die maximale Sendeleistung des Handys mittels einer 2D-SAR-Messung (spezifische Absorptionsrate). Auch bewerten wir, wie stark die Sendeleistung des Handys einbricht, wenn es dabei an der hierfür empfindlichsten Stelle berührt wird.
SMS: Wir bewerten, wie gut sich SMS-Textnachrichten empfangen, lesen, eingeben, senden, bearbeiten und löschen lassen.
Internet und PC: 15 %
Surfen: Wir bewerten in Praxistests mit verschiedenen Websites das Navigieren (URL-Eingabe, Bookmarks, Link-Aufruf, Scrollen, Zoomen, Auswählen) und die Leistungsfähigkeit (Darstellung, Geschwindigkeit) beim Surfen im Internet.
E-Mail: Wir prüfen die Funktion und Handhabung beim Einrichten von E-Mail-Konten und beim Empfangen, Lesen und Schreiben von Mails.
Backup auf PC: Wir bewerten die vom Anbieter des jeweiligen Handys bereitgestellten Möglichkeiten, von wichtigen Daten auf dem Handy (unter anderem Adressbucheinträge, Textnachrichten, Anruflisten, Apps und App-Daten, Fotos und Musik) ein Backup auf dem PC zu speichern und die Daten daraus wiederherzustellen.
Kamera: 15 %
Mit der Hauptkamera auf der Handyrückseite machen wir mehrere Fotos unter anderem von einer Testtafel (links). Wie wirksam ein Handy das Bild stabilisiert, prüfen wir bei Foto- und Videoaufnahmen in einem Versuchsaufbau, bei dem sogenannte Schwingerreger eine zittrige Hand simulieren (rechts).
Foto bei normaler Beleuchtung: Im Automatikmodus mit maximaler Auflösung fotografieren wir eine Testtafel und bewerten das Ergebnis subjektiv und automatisiert mittels einer Test-Software hinsichtlich Auflösung, Bildschärfe, Kontrast, Verzeichnung, Farbwiedergabe, Farbrauschen und Lichtempfindlichkeit. Zusätzlich bewerten wir subjektiv Porträt- und Stilllebenaufnahmen sowie Aufnahmen mit Zoom.
Foto bei geringer Beleuchtung: Wir bewerten subjektiv Fotos einer Szene in einem abgedunkelten Innenraum (10 Lux), die auch ein bewegtes Objekt enthält, mit und ohne Blitz. Dabei prüfen wir mithilfe von mehrachsigen Schwingerregern auch, wie wirksam der Bildstabilisator arbeitet.
Auslöseverzögerung: Wir messen Auslösezeit, Fokussierungszeit sowie die Zeit zwischen mehreren in direkter Folge ausgelösten Aufnahmen.
Video: In einem Kameraschwenk filmen wir eine unterschiedlich ausgeleuchtete Szene mit ruhigen und bewegten Objekten und bewerteten subjektiv die Video- und Tonqualität. Dabei bewerten wir auch die Zoom-Funktion. Zudem prüfen wir mithilfe von mehrachsigen Schwingerregern, wie wirksam der Bildstabilisator arbeitet.
Selfie mit Frontkamera: Wir bewerten subjektiv ein Foto der Frontkamera von einer Szene mit einer Testpuppe im Vordergrund.
Ortung und Navigation: 10 %
In Praxistests bewerten wir die Schnelligkeit und Genauigkeit der Ortung und die Routenführung mit der mitgelieferten Navigationssoftware (unter anderem Funktionsumfang, Zieleingabe, Verhalten beim Abweichen von der vorgegebenen Route). Auch die Eignung des eingebauten Lautsprechers für Navigationsansagen fließt in die Bewertung ein.
Musikspieler: 5%
Die Klangqualität bewerten wir in Hörtests mit Klangproben aus den Genres Pop und Klassik über die mitgelieferten Ohrhörer und mit hochwertigem Kopfhörer. Sind keine Kopfhörer mitgeliefert, fließt dies negativ in die Bewertung ein.
Handhabung: 20 %
Wir bewerten subjektiv die Gebrauchsanleitung und Hilfefunktion (Lesbarkeit, Verständlichkeit, Vollständigkeit), die Inbetriebnahme (Registrierungsprozess) und das Display (unter anderem Schärfe, Lesbarkeit, Kontrast, Farbdarstellung, Blickwinkel). Weiterhin bewerten wir das Menü und die Bedienung von Tastatur beziehungsweise Touchscreen, Telefon (unter anderem Gesprächsannahme, Entsperren, Wählen, Telefonbuch), Kamera (unter anderem Aufnehmen, Löschen, Speichern) und Musikspieler (Starten, Stoppen, Lautstärkeregelung, Navigieren zu Musikstücken, Play-Listen) und Geräteeinstellungen. Hier fließen auch Tests zur Rechenleistung ein. Außerdem bewerten wir den Transport (unter anderem Gewicht und Abmessungen).
Stabilität: 5 %
In der Falltrommel durchlaufen die Handys 100 Stürze (links). Neben der Kratzfestigkeit von Display und Gehäuse prüfen wir auch die des Kamerafensters (Mitte). Alle Handys werden fünf Minuten lang beregnet. Die meisten überstehen das problemlos (rechts).
Wir prüfen die Passgenauigkeit und Solidität von Gehäuse, Kontakten und Anschlüssen.
Auch testen wir, wie kratzfest Display und Gehäuse sowie das Kamerafenster sind. Die Kratzfestigkeit von Display und Gehäuse prüfen wir dabei vermittels einer Ritzhärteprüfung in Anlehnung an ISO 1518.
Die Bruchfestigkeit prüfen wir in einer Falltrommel in Anlehnung an DIN EN 60068–2–31. Dabei bewerten wir, welche Beschädigungen nach 50 und nach 100 Stürzen aus 80 cm Fallhöhe auf einen Steinboden auftreten. Bei Geräten, denen der Anbieter eine Schutzhülle beilegt, führen wir diese Falltests sowohl mit als auch ohne diese Hülle durch.
Außerdem beregnen wir die Handys liegend in Anlehnung an DIN EN 60 529 je fünf Minuten mit 1 mm/min Wasser und prüfen direkt im Anschluss sowie gegebenenfalls nach 24 und noch einmal nach 48 Stunden die Funktion.
Handys, die laut Anbieter nach DIN EN 60 529 als wassergeschützt (mindestens IPX7) zertifiziert sind, unterziehen wir zudem einem Tauchtest, dessen Dauer und Tauchtiefe sich nach der jeweiligen Zertifizierung beziehungsweise den Angaben des Anbieters richtet. Direkt im Anschluss sowie gegebenenfalls nach 24 und noch einmal nach 48 Stunden prüfen wir die Funktion.
Akku: 15 %
Ein Roboterarm spielt ein standardisiertes Nutzungsszenario solange durch, bis der Akku leer ist.
Ein Industrieroboter führt das folgende Nutzungsszenario solange durch, bis der Akku leer ist und sich das Handy ausschaltet: Pro Stunde 7,5 Minuten ein YouTube-Video über WLan abspielen, 1,25 Minuten per GPS navigieren, 2,5 Minuten telefonieren, fünf Fotos aufnehmen, zwei Benachrichtigungen empfangen. Die restliche Zeit bleibt das Gerät im Standby (WLan und GPS an, Bluetooth aus). Wir bewerten die resultierende Betriebsdauer.
Außerdem bewerten wir die Ladedauer des Akkus und die Schnellladefunktion (Akkukapazität nach 15 Minuten Aufladen).
Wenn sich der Akku vom Anwender nicht wechseln lässt, fließt dies negativ in die Bewertung ein.
ABWERTUNGEN
Abwertungen sorgen dafür, dass sich Produktmängel verstärkt auf das test-Qualitätsurteil auswirken. Sie sind in der Tabelle mit einem Sternchen *) gekennzeichnet. Folgende Abwertungen setzen wir ein:
- Telefon: Ab ausreichender Note für die Sprachqualität werten wir das Urteil für Telefon ab.
- Kamera: Ab mangelhafter Note für Fotos bei normaler oder geringer Beleuchtung sowie ab mangelhafter Auslöseverzögerung werten wir die Kamera ab. Ab ausreichender Kamera (3,6) werten wir das test-Qualitätsurteil ab.
- Ortung und Navigation: Ab ausreichender Note (3,6) werten wir das test-Qualitätsurteil ab.
- Handhabung: Ab mangelhafter Note für Gebrauchsanleitung und Inbetriebnahme oder ausreichendem Display werten wir die Handhabung ab. Ab ausreichender Handhabung (3,6) werten wir das test-Qualitätsurteil ab.
- Stabilität: Ab ausreichender Note für Stabilität (3,6) werten wir das test-Qualitätsurteil ab.
- Akku: Ab ausreichender Note für den Akku (3,6) werten wir das test-Qualitätsurteil ab.
Sind die Urteile gleich oder nur wenig schlechter als diese Noten, ergeben sich nur geringe negative Auswirkungen. Je schlechter das Urteil ausfällt, desto stärker wirkt der jeweilige Abwertungseffekt.
Änderungen im Prüfprogramm
Die Stiftung Warentest überarbeitet ihre Prüfungen regelmäßig, um sie an die technische Entwicklung anzupassen. Im Produktfinder sind die Handys darum nach verschiedenen Testprojekten sortiert. Ein solches Projekt umfasst jeweils alle Geräte, die nach demselben Prüfprogramm getestet wurden. Die Noten von Handys aus unterschiedlichen Testprojekten sind nicht direkt miteinander vergleichbar. Die wichtigsten Änderungen:
Vor Juni 2018
Prüfungen: Vor Prüfung der im Juni 2018 veröffentlichten Geräte haben wir den Handytest in einigen Punkten überarbeitet:
- Telefon. Vor 2018 bewerteten wir bei der Netzempfindlichkeit noch nicht, wie stark die Sendeleistung abnimmt, wenn das Gerät an der zuvor ermittelten, empfindlichsten Stelle berührt wird.
- Internet und PC. Vor 2018 bewerteten wir Surfen und E-Mail etwas weniger streng.
- Kamera. Vor 2018 berücksichtigten wir bei Fotos bei normaler Beleuchtung noch nicht die Anmutung von absichtlich unscharfen Hintergründen bei Porträt-Aufnahmen („Bokeh-Effekt“). Bei Video prüften wir noch nicht das Zoomen beim Filmen.
- Handhabung. Die Tests zur Bedienung von Tastatur beziehungsweise Touchscreen stellten wir vor 2018 als eigenes Urteil dar. Seit 2018 fließt diese Prüfung in das Urteil „Menü und Bedienung“ ein. Vor 2018 umfasste das Urteil „Menü und Bedienung“ auch noch keine Tests zur Entsperrung per Gesichtserkennung und zur Rechenleistung und floss darum mit einer geringeren Gewichtung in das Urteil zur Handhabung ein.
- Stabilität. Da vor 2018 bei keinem der geprüften Handys eine Schutzhülle zum Lieferumfang gehörte, führten wir bis dahin Falltests ausschließlich ohne solche Hüllen durch.
Vor April 2016
Abwertungen. Vor April 2016 werteten wir bei ausreichender Sprachqualität oder mangelhaften Fotos bei normaler oder geringer Beleuchtung nicht ab.
Prüfungen. Vor Prüfung der im April 2016 veröffentlichten Geräte haben wir den Handytest in einigen Punkten grundlegend überarbeitet:
- Telefon. Vor April 2016 maßen wir die Sprachqualität nicht mit dem POLQA- (Perceptual Objective Listening Quality Analysis), sondern mit dem älteren PESQ-Verfahren (Perceptual Evaluation of Speech Quality).
- Kamera. Vor 2016 führten wir nur eine subjektive und noch keine zusätzliche automatisierte Bewertung der Fotoqualität bei normaler Beleuchtung durch. Die Bildstabilisierung bei Fotos bei geringer Beleuchtung und bei Videos prüften wir vor April 2016 weniger aufwendig (ohne Schwingerreger). Die Qualität von Selfies der Frontkamera haben wir vor 2016 nicht geprüft.
- Internet und PC. Neben lokalen Backup-Möglichkeiten am PC haben wir bis April 2016 auch die Online-Backup- und Synchronisationsmöglichkeiten per Cloud bewertet.
- Stabilität. Die Bruchfestigkeit wurde vor April 2016 nur mit 50 statt mit 100 Stürzen in der Falltrommel getestet. Die Kratzfestigkeit des Kamerafensters wurde nicht geprüft. Ein Tauchtest für Handys, die laut Anbieter wasserfest sind, war noch nicht Bestandteil des Tests.
- Akku. Die Akkulaufzeit haben wir vor April 2016 nicht mithilfe eines Industrieroboters ermittelt, sondern anhand der Akkukapazität sowie des Stromverbrauchs in unterschiedlichen Betriebszuständen errechnet.
Vor Juni 2014
Abwertungen. Die Auslöseverzögerung wurde vor Juni 2014 milder bewertet und deshalb schon ab der Note „Ausreichend“ abgewertet.
Gruppengewichtung. Vor Juni 2014 flossen die Ergebnisse der Kamera und des Musikspielers jeweils mit 10 Prozent in die Gesamtwertung ein.
Bewertungen. In etlichen Prüfpunkten sind die Bewertungen der technischen Entwicklung entsprechend strenger geworden. So war zum Beispiel die Bewertung der Sprachqualität und Netzempfindlichkeit und des Akkus vor Juni 2014 weniger streng.
Prüfungen. Bei der Kamera wurde vor Juni 2014 noch nicht die Zoomqualität und die Bildstabilisierung geprüft.
Jetzt freischalten
Wie möchten Sie bezahlen?
Preise inkl. MwSt.- kauft alle Testprodukte anonym im Handel ein,
- nimmt Dienstleistungen verdeckt in Anspruch,
- lässt mit wissenschaftlichen Methoden in unabhängigen Instituten testen,
- ist vollständig anzeigenfrei,
- erhält nur rund 6 Prozent ihrer Erträge als öffentlichen Zuschuss.
