Cooperation with Auto Motor und Sport

ADAS benchmark – driver assistance systems from the user’s perspective

Bridging the gap between standardized functionality and real-world system performance

Together with Auto Motor und Sport and the IFM – Institute for Driver Assistance and Connected Mobility, we regularly assess how safe, reliable, and comfortable modern driver assistance systems perform in everyday use—based on robust data and genuine driving impressions.

Explore all results of our field-based test series here and compare the systems directly with one another.

Contents

  1. Which Advanced Driver Assistance Systems (ADAS) were tested in the benchmark.
  2. Why driver assistance systems must be evaluated from the user’s perspective.
  3. How our tests are structured.
  4. What this looks like in practice?
  5. Project partners.

The focus of our tests is on key comfort assistance systems such as adaptive cruise control (ACC), lane keeping assist (LKAS), and parking assist systems (PMA). What matters is not only whether these functions operate in compliance with standards, but how their performance is actually perceived and experienced by users. But why is this perspective so crucial today?

Driver assistance systems fall short of their purpose – why genuine support in everyday driving often remains elusive

Although many functions are technically available, they are often not yet sufficiently mature from a user perspective. They recognize individual driver preferences only to a limited extent, intervene noticeably in driving behavior, and therefore feel unfamiliar or unnatural. At the same time, many users lack technical understanding when interacting with these systems.
A key role is played by the HMI (Human–Machine Interface): it determines whether users understand why the system intervenes, what it can do—and where its limitations lie. If this transparency is missing, assistance remains abstract and trust does not develop.

In the latest episode of the Moove podcast by auto motor und sport, Prof. Bernhard Schick (CEO of MdynamiX and Head of the Institute for Driver Assistance and Connected Mobility at Kempten University of Applied Sciences) discusses the limitations and challenges of modern driver assistance systems.

 

How we evaluate driver assistance systems holistically

The benchmark is based on a methodology that compares the measurable intervention behavior of driver assistance systems with the driver’s experience. It captures how assistance systems accelerate, decelerate, and regulate in real driving conditions—and, at the same time, how these interventions feel: whether they are understandable, build trust, and are perceived as comfortable support.

MXeval analyzes objective measurement data live in the vehicle, while driver assessments are recorded via the MXevalApp.

How we approach objective evaluation – explained using the example of the lane-keeping assistant.

How we capture direct user feedback – subjective evaluation.

Behind the Scenes: Insights into Our Benchmark Tests

What do driver assistance system tests look like beyond charts and result tables? The following insights take you behind the scenes of our benchmark tests and show how our test engineers prepare test drives and examine driver assistance systems under real-world conditions.

Test Fleet

For the ADAS benchmark, vehicle models are specifically selected that are equipped with the relevant driver assistance systems and represent the current state of series development. The aim of the first test series was to establish a robust reference that serves as a foundation for future comparisons.

Measurement Technology

The tests are based on a highly precise measurement chain that synchronously captures vehicle motion, position, distance, and dynamics with centimeter-level accuracy, enabling objective evaluation. (Learn more here about the measurement technology used in the ADAS benchmark.)

Driving Maneuvers

The test scenarios are clearly defined and carried out in real traffic on public rural roads and highways. A key evaluation criterion is the drivers’ subjective perception of safety and comfort.

Who conducts the tests?

The test drives are conducted by experienced test engineers from MdynamiX and the IFM. The evaluation is complemented by the team from auto motor und sport, which contributes its journalistic perspective and the relevance criteria of its readership to the benchmark.

  • Logo der Zeitschrift auto motor und sport auf der Jacke eines Projektmitglieds der gemeinsamen ADAS-Testreihe von MdynamiX, auto motor und sport und dem IFM. In der Hand hält die Person eine Checkliste zur Vorbereitung der bevorstehenden Testfahrt.

    Auftakt der gemeinsamen ADAS-Testreihe von MdynamiX, dem IFM und ams.

  • Gesamtflotte der Fahrzeuge, die dem Benchmark unterzogen werden, vor dem Shelter16, dem Hauptsitz von MdynamiX. Testingenieure von MdynamiX, dem IFM und auto motor und sport stehen um die Fahrzeuge und besprechen die finalen Testabläufe.

    Die Fahrzeugflotte der ersten Testreihe des gemeinsamen ADAS-Benchmarks.

  • ADAS-Benchmark_Auto motor und sport_Autobahn-Testfahrt_MdynamiX

    Die Fahrzeugflotte der ersten Testreihe des gemeinsamen ADAS-Benchmarks.

  • Testingenieur des IFM richtet die Messtechnik in einem Testfahrzeug für den ADAS-Benchmark ein.

    Einrichtung der Messtechnik für die objektive Datenerfassung im ADAS-Benchmark.

  • Testingenieur des IFM kalibriert die Messtechnik im Testfahrzeug am Laptop für den ADAS-Benchmark.

    Einrichtung der Messtechnik für die objektive Datenerfassung im ADAS-Benchmark.

  • Testfahrer bewertet ein gefahrenes Fahrmanöver im ADAS-Benchmark mit der MXevalApp auf einem Tablet, das ihm von einer Mitinsassin überreicht wird.

    Subjektive Bewertung der Manöver direkt nach der Durchführung mit der MXevalApp.

  • Testfahrer bewertet ein gefahrenes Fahrmanöver im ADAS-Benchmark mit der MXevalApp auf einem Tablet, das ihm von einer Mitinsassin überreicht wird.

    Subjektive Bewertung der Manöver direkt nach der Durchführung mit der MXevalApp.

  • Parklücke mit Pylone als Markierung für den Parkassistenten-Test (PMA) im Rahmen des ADAS-Benchmarks von auto motor und sport, dem IFM und MdynamiX.

    Aufbau für den Parkassistenten-Test (PMA).

  • Fahrzeug parkt in eine Parklücke mit Pylonen als Markierung. Getestet wird der Parkassistent (PMA) im Rahmen des ADAS-Benchmarks von auto motor und sport, dem IFM und MdynamiX.

    Aufbau für den Parkassistenten-Test (PMA).

  • Test der adaptiven Abstandstemporegelung (ACC) im Rahmen des ADAS-Benchmarks von auto motor und sport mit MdynamiX auf der Autobahn.

    Test der adaptiven Abstandstemporegelung (ACC) auf der Autobahn.

  • Test des Spurhalteassistent (LKAS) im Rahmen des ADAS-Benchmarks von auto motor und sport mit MdynamiX auf der Autobahn.

    Test des Spurhalteassistent (LKAS) auf der Autobahn.

  • Testfahrer des ADAS-Benchmarks mit auto motor und sport, dem IFM und MdynamiX.

    Unsere Testfahrer – gesamtes Projektteam.

  • Testfahrer beginnt Testfahrt im Rahmen des ADAS-Benchmark mit Auto motor und sport, dem IFM und der MdynamiX.

    Unsere Testfahrer.

  • Testfahrer rüsten Testfahrzeug mit Messtechnik aus für das ADAS-Benchmark mit Auto motor und sport, dem IFM und der MdynamiX.

    Unsere Testfahrer.

  • Testfahrer vor einer Testfahrt im Rahmen des ADAS-Benchmark mit Auto motor und sport, dem IFM und der MdynamiX. Im Vordergrund erkennt man eine D-GPS-Antenne auf dem Dach des Fahrzeugs.

    Unsere Testfahrer.

 
 

auto motor und sport (ams) is one of the most renowned magazines for automotive and motorsport journalism, known for its in-depth vehicle tests and comparisons, critical analyses, and background reports on technology and trends. The brand is published by Motor Presse Stuttgart, which—through its editors-in-chief (including Michael Pfeiffer and Birgit Priemer) and experts such as Alexander Bloch—pursues independent journalism.

Logo der auto motor und sport – Fachzeitschriften für Auto- und Motorsport

The IFM – Institute for Driver Assistance and Connected Mobility (IFM) at Kempten University of Applied Sciences is an interdisciplinary research institution focused on driver assistance systems, automated driving, and connected mobility. Its core areas include the development of methods for assistance systems, simulation, validation of safety and reliability, and mobility research in close cooperation with academia and industry.

Logo des IFM – Instituts für Fahrerassistenz und vernetzte Mobilität an der Hochschule Kempten.

With field-based driving tests, intelligent measurement technology, and a methodology that combines objective vehicle data with subjective driver feedback, we are your partner for automotive benchmarking.

Tristan Schwandke
Head of Sales DACH & Marketing
+49 1515 5345660
tristan.schwandke@mdynamix.de

FAQS – ADAS-BENCHMARK

Logo zur Partnerschaft von auto motor und sport und MdynamiX zu ADAS Benchmarks.