aqua vs. qTest: Kann Enterprise-Software modern sein?

KI

Künstliche Intelligenz (KI) ist eine sich schnell entwickelnde Technologie, sodass wir uns eher mit der Spitzentechnologie als mit der Basistechnologie beschäftigen werden. Hier erfahren Sie, was Sie von einer KI-gestützten Testmanagementlösung erwarten sollten:

Analysieren von Ihrem Arbeitsbereich, um QS-Kontext zu erhalten
Erstellung von Testfällen, Fehler und sogar Anforderungen aus einer einfachen Textbeschreibung
Vervollständigen der Entwürfe von Testfällen
Priorisieren von Tests
Entfernen doppelter Tests und Fehler

KI-gestützte Funktionen sind ein wichtiges Kriterium für die Beurteilung, wie modern ein Testmanagementsystem ist. Entwickler hatten schon vor ChatGPT Zugriff auf das große Sprachmodell von GPT. aqua nutzte dies, um QS-spezifische Anpassungen vorzunehmen, die zu relevanten und projektbezogenen Vorschlägen für die Erstellung, Vervollständigung und Aktualisierung von Testfällen führen. qTest bietet keine KI-gestützten Tests.

Trainiert KI-Copilot mit Ihren Tests automatisch

Keine KI-Fähigkeiten

Generiert komplette Tests mit KI

Keine KI-Fähigkeiten

Vollständige Testentwürfe

Keine KI-Fähigkeiten

Aktualisiert Tests für eine geänderte Anforderung

Keine KI-Fähigkeiten

Tests automatisch priorisieren

Keine KI-Fähigkeiten

Entfernt Duplikate

Keine KI-Fähigkeiten

Trainiert KI-Copilot mit Ihren Tests automatisch

Generiert komplette Tests mit KI

Vollständige Testentwürfe

Aktualisiert Tests für eine geänderte Anforderung

Tests automatisch priorisieren

Entfernt Duplikate

Keine KI-Fähigkeiten

Testmanagement

Das Testmanagement ist der Hauptgrund, warum wir uns mit diesen beiden Tools beschäftigen. Sie sollten verschiedene Aspekte der Handhabung von Testfällen sowie auf Rückverfolgbarkeit ausgerichtete Funktionen berücksichtigen. Dazu gehören:

Erstellen, Ausführen, Freigeben und Verwalten von Testfällen im Arbeitsbereich
Gruppieren von Tests in Testszenarien, Aufteilen in Ordner, Zuweisen von Etiketten
Schnelles Navigieren in der Testsuite, Anwendung von Filtern, Verwendung von individuellen und gemeinsamen Ansichten
Anzeigen der gesamten Geschichte der Ausführung eines Testfalls
Speichern eines vollständigen Protokolls der Änderungen zur Einhaltung der Vorschriften
Visualisierung der Anforderungsabdeckung und der Abhängigkeiten zwischen Anforderungen, Testfällen und Fehlern

Das Testmanagement ist die wesentlichste Funktion, und beide Tools erfüllen diese Aufgabe gut. Die Erstellung und Verwaltung von Tests ist im Allgemeinen intuitiv, funktionsreich und robust. Es gibt jedoch ein paar wichtige Abläufe, die aqua besser kann. Sie können schnell mehrere Elemente bearbeiten und Änderungen rückgängig machen, was viel Zeit spart. Auch die Ansichten von qTest sind nicht besonders benutzerfreundlich: Die Ausgabe ähnelt eher Excel-Datenschnitten als einer modernen TMS-Ansicht.

Testfälle
Test-Szenarien
Ausführungen
Arbeitsabläufe
Verschachtelte Testfälle
Freigabe Planung
Filter
Manipulationssichere Projektprotokollierung
Mit Zeitstempel versehene Geschichte der Objekte zur Einhaltung der Vorschriften

Visuelle Massenbearbeitungen

Nur bearbeiten von Datenabfragen

Stornierung von Objektänderungen

Nicht verfügbar

Visuelle Ansichten

Nur Datenabfragen

Visuelle gemeinsame Ansichten

Nur Abfragen gemeinsamer Daten

Testfälle
Test-Szenarien
Ausführungen
Arbeitsabläufe
Verschachtelte Testfälle
Freigabe Planung
Filter
Manipulationssichere Projektprotokollierung
Mit Zeitstempel versehene Geschichte der Objekte zur Einhaltung der Vorschriften

Visuelle Massenbearbeitungen

Stornierung von Objektänderungen

Visuelle Ansichten

Visuelle gemeinsame Ansichten

Nur bearbeiten von Datenabfragen

Nicht verfügbar

Nur Datenabfragen

Nur Abfragen gemeinsamer Daten

Urteil: aqua gewinnt nach Ansichten und Artikeländerungen

Integrationen

Die meisten Tools basieren auf der Automatisierung durch gängige Tools von Drittanbietern, die QS-Spezialisten seit über einem Jahrzehnt verwenden. Die Anwendererfahrung ist viel besser, wenn Ihre Testmanagementlösung über native Integrationen für branchenführende Tools verfügt. Die Integration von REST-API ist unerlässlich, um nicht von der Kulanz des Anbieters abhängig zu sein.

Automatisierung des eigenen Frameworks oder Integration von Drittanbietern mit Testautomatisierungs-Tools
Native Integrationen von Drittanbietern: Selenium, Jenkins, JMeter, SoapUI, Ranorex
Jira-Integration und/oder Jira-Plugin
Unterstützung von REST API für die Integration beliebiger Tools

Beide Tools sind für die Integration von Automatisierungstools von Drittanbietern konzipiert und bieten keine In-App-Skripterstellung. qTest unterstützt auch das Automatisierungsframework Cucumber, aber die kommerzielle Entwicklung wurde im Februar 2023 von keinem Anderen als qTest’s Konkurrenten SmartBear eingestellt. Was die Integration von Drittanbietern betrifft, hat aqua einen klaren Vorsprung vor qTest. Es entspricht der Jira Echtzeit-Integration und bietet eine native Umgebung mit viel mehr Testautomatisierungslösungen.

Jira-Integration und Echtzeit-Projektsynchronisation
Selenium, Jenkins für die Testautomatisierung
REST-API

UFT, JMeter, SoapUI, Ranorex, Datenbank MSSQL, Datenbank Oracle für Testautomatisierung

Cucumber Testautomatisierungs-Framework (Nur begeisterte Open-Source-Unterstützung)

Fehlerbericht-Tool Capture

Nicht verfügbar

VersionOne, Tricentis Vera, CA Agile Central Rally

Jira-Integration und Echtzeit-Projektsynchronisation
Selenium, Jenkins für die Testautomatisierung
REST-API

UFT, JMeter, SoapUI, Ranorex, Datenbank MSSQL, Datenbank Oracle für Testautomatisierung

Fehlerbericht-Tool Capture

Nicht verfügbar

Cucumber Testautomatisierungs-Framework (Nur begeisterte Open-Source-Unterstützung)

Nicht verfügbar

VersionOne, Tricentis Vera, CA Agile Central Rally

Urteil: aqua gewinnt durch eine größere Testautomatisierungssuite

Preisflexibilität

Die Preise können sehr unterschiedlich sein; Sie werden kleine Unterschiede finden, die keinen Sinn machen, aber auch hohe Gebühren, die völlig gerechtfertigt sind. Hier einige Faktoren, die zu berücksichtigen sind:

Zusätzliche Funktionen über das Testmanagement hinaus
Transparente Preisgestaltung, ohne wesentliche Funktionen hinter teuersten Tarifen zu verbergen
Individuelle Preisgestaltung für Unternehmen
Skalierung von Preis und Volumen entsprechend der Größe Ihres Teams
Keine exorbitanten Einrichtungs- und/oder Wartungsgebühren
Kostenlose Lizenzen für Gäste / Nicht-Tech-Spezialisten / manuelle Prüfer

qTest bietet zwei Wochen lang kostenlosen Zugang ohne jegliche Funktionsbeschränkungen. Es fehlen jedoch kostenlose Lizenzen. Aqua hingegen bietet eine 30-tägige Testphase und unbegrenzte kostenlose Lizenzen für seine Kunden, was es vorteilhafter macht.

Kostenlose Einrichtung

30-tägige Testversion

1-tägige Testversion

Unbegrenzte kostenlose Lizenzen für manuelle Tester

Keine kostenlosen Lizenzen

Kostenlose Einrichtung

30-tägige Testversion

Unbegrenzte kostenlose Lizenzen für manuelle Tester

1-tägige Testversion

Keine kostenlosen Lizenzen

Modelle für die Bereitstellung

Die On-Premise-Bereitstellung ist in vielen Branchen ein Muss, doch Anbieter sagen oft nicht ausdrücklich, ob sie es anbieten oder nicht. Je nach Ihren Sicherheitsrichtlinien und Ihrem Umfang ist auch die Bereitstellung in einer herstellerunabhängigen Cloud eine vorteilhafte Option.

Anbieter Cloud
Externe Cloud: AWS, Azure, etc.
On-Premise

aqua und qTest entwickeln und unterstützen beide das Angebot von On-Premise aktiv. Sie können Ihre Cloud-Instanz auch separat vom Anbieter hosten und so ein gutes Gleichgewicht zwischen Komfort und Sicherheit Ihrer Testmanagement-Software-Instanz herstellen.Es ist erwähnenswert, dass qTest den genauen Standort ihrer privaten Cloud nicht garantiert und ihnen die Entscheidung über dessen Platzierung überlässt. aqua hebt sich hervor, indem es einen beliebigen benutzerdefinierten Standort anbietet und geolokalisiertes Hosting basierend auf Ihren Vorlieben sicherstellt.

On-Premise

GDPR-konforme aqua-gehostete deutsche Cloud

qTest-gehostete Cloud

Garantiertes geolokalisiertes Hosting basierend auf Kundenpräferenz.

Keine Garantie bezüglich des Hosting-Standorts

Isolierte unternehmenseigene Cloud-Lösung (beliebiges Azure Rechenzentrum)

Benutzerdefinierte Cloud

On-Premise

GDPR-konforme aqua-gehostete deutsche Cloud

Garantiertes geolokalisiertes Hosting basierend auf Kundenpräferenz.

Isolierte unternehmenseigene Cloud-Lösung (beliebiges Azure Rechenzentrum)

qTest-gehostete Cloud

Keine Garantie bezüglich des Hosting-Standorts

Benutzerdefinierte Cloud

Urteil: Unentschieden

Dashboards

QS-Dashboards dienen zwei wichtigen Zwecken. Sie helfen dem QS-Team, ihren Fortschritt zu verfolgen, aber sie machen auch andere Teams auf mögliche Engpässe aufmerksam. Zumindest sollten Sie in der Lage sein, alle Daten einzubeziehen und Dashboards mit dem Team zu teilen.

Verwendung aller Daten des Arbeitsbereichs
Erstellung privater und gemeinsamer Dashboards
Auswahl zwischen verschiedenen Arten von Diagrammen
Einrichten von KPI-/Wert-Benachrichtigungen, die als E-Mail-/App-Benachrichtigungen eingehen

Beide Tools verfügen über ausgefeilte Dashboards, die mehr als ausreichend sind, um am Puls der Zeit zu bleiben. aqua bietet jedoch viel mehr Anpassungsmöglichkeiten, vor allem aber KPI-Benachrichtigungen, sodass Sie die Dashboards nicht einmal manuell überprüfen müssen.

Kreis-, Balken-, gestapelte Balken- und Tabellendiagramme

Externe Freigabe des Dashboards

Nicht verfügbar

Alle Daten

9 Dashboard-Typen

KPI-Benachrichtigungen

Keine KPI-Benachrichtigungen

Kreis-, Balken-, gestapelte Balken- und Tabellendiagramme

Externe Freigabe des Dashboards

Alle Daten

KPI-Benachrichtigungen

Nicht verfügbar

9 Dashboard-Typen

Keine KPI-Benachrichtigungen

Urteil: aqua gewinnt durch KPI-Benachrichtigungen und individuelle Anpassung

Berichterstattung

Die Berichterstattung ist sowohl für interne als auch für externe Interessengruppen wichtig. Das Ziel ist es, mit so wenig oder so viel Aufwand wie möglich zu bekommen, was man braucht. Wenn ein Tool sowohl eine Vorlagenbibliothek als auch umfangreiche Anpassungsmöglichkeiten bietet, ist das ein guter Anfang.

Zugriff auf die vom Anbieter zur Verfügung gestellte Vorlagenbibliothek
Benutzerdefinierte Vorlagen erstellen und speichern
Verwendung und Umwandlung beliebiger Daten
Text- und Bildformatierung anwenden
Hinzufügen von externen Daten und Bildmaterial
Verwendung von Skripten und Parametrisierung zur automatischen Aktualisierung von Berichten

Sowohl aqua als auch qTest sind etablierte Tools mit einem großen Anteil an Unternehmenskunden und bieten hervorragende Berichte. Sie können alle Daten aus dem Arbeitsbereich verwenden, sie manuell oder mit Skripten umwandeln, externe Informationen hinzufügen und von Anbietervorlagen zu einer vollständig benutzerdefinierten Lösung übergehen.

Vorlagenbibliothek
Diagramme
Drag-and-drop
Pivot-Tabellen
Parametrisierung
Benutzerdefinierte Berichte
Alle Daten
Externe Daten und Bildmaterial
Text- und Bildformatierung
Skripte

Vorlagenbibliothek
Diagramme
Drag-and-drop
Pivot-Tabellen
Parametrisierung
Benutzerdefinierte Berichte
Alle Daten
Externe Daten und Bildmaterial
Text- und Bildformatierung
Skripte

Urteil: Unentschieden

Was Benutzende sagen

Hier sind ein paar Dinge, die Benutzende an beiden Tools mögen und nicht mögen.

„Ich war überrascht, ein so umfassendes und ausgereiftes Tool für das Testmanagement auf dem deutschen Markt zu finden, ohne dass ich mich vorher ernsthaft damit beschäftigt hatte.“

Jörg Großmann

Leiter der Abteilung Entwicklung bei Bank 11

„qTest hilft bei der Verwaltung von Projekten, der Testplanung, der Verwaltung von Testfällen, der Verfolgung der Ausführung, der Fehlerverwaltung und der Berichterstellung. Es unterstützt die Zusammenarbeit in Echtzeit, sodass die Teammitglieder eines Projekts Testfälle gleichzeitig anzeigen, erstellen und aktualisieren können. Die Anpassungsmöglichkeiten von qTest sind etwas geringer als bei anderen Tools. Manchmal haben wir bei der Handhabung vieler Testfälle, Testläufe und Benutzer Leistungsprobleme.“

Pahuni A.

Software-Ingenieur bei einem mittelständischen Unternehmen

„Die Berichterstattung ist aussagekräftig und bietet eine gute Grundlage für Entscheidungen. Nach dem Gebrauch von aqua erkennen die Mitarbeitenden den Mehrwert sehr schnell.“

Thomas Haeske

Leiter der Abteilung Organisation/IT der Berlin Hyp

„qTest bietet grundlegende Funktionen zur Verwaltung von Testfällen und eine gewisse Jira-Integration. Häufige Produktionsprobleme führen dazu, dass alle unsere Benutzer blockiert sind. Unzureichendes Follow-up bei der Klärung der Ursachen von Ausfällen. Keine klare Möglichkeit, Funktionslücken und Verbesserungswünsche zu melden.“

Ein G2-Prüfer

Krankenhaus und Gesundheitswesen SMB

„Manuelle Testfälle lassen sich mit aqua leicht automatisieren. Die nahtlose Integration mit Testautomatisierungstools hilft dabei.“

Jörn-Hendrick Sörensen

Test Manager bei KBA

„Es ist eine Datenbank zur Verwaltung der Testdaten für Tester in einer großen Organisation und großen Teams. Kleine Testteams und Organisationen können auch andere Methoden zur Verfolgung des Teststatus verwenden.“

Ein G2-Prüfer

IT-Unternehmen

„Ich war überrascht, ein so umfassendes und ausgereiftes Tool für das Testmanagement auf dem deutschen Markt zu finden, ohne dass ich mich vorher ernsthaft damit beschäftigt hatte.“

Jörg Großmann

Leiter der Abteilung Entwicklung bei Bank 11

„Die Berichterstattung ist aussagekräftig und bietet eine gute Grundlage für Entscheidungen. Nach dem Gebrauch von aqua erkennen die Mitarbeitenden den Mehrwert sehr schnell.“

Thomas Haeske

Leiter der Abteilung Organisation/IT der Berlin Hyp

„Manuelle Testfälle lassen sich mit aqua leicht automatisieren. Die nahtlose Integration mit Testautomatisierungstools hilft dabei.“

Jörn-Hendrick Sörensen

Test Manager bei KBA

Pahuni A.

Software-Ingenieur bei einem mittelständischen Unternehmen

Ein G2-Prüfer

Krankenhaus und Gesundheitswesen SMB

Ein G2-Prüfer

IT-Unternehmen

Endgültiges Urteil

aqua und qTest sind beide ausgereifte, aber auch moderne und äußerst leistungsfähige Testmanagement-Lösungen. Sie können als ALMs fungieren, wenn Sie den gesamten Lebenszyklus in einer einzigen Lösung abwickeln möchten. qTest hat keine großen Stärken gegenüber aqua; aqua bietet KI-gestützte Tests, bessere Dashboards und kommt mit kostenlosen Lizenzen zusätzlich zu den günstigeren Vollpreislizenzen.

Wöchentliche Aktualisierungen der Funktionen

3 Feature-Freigaben pro Jahr

Modernste KI-Testfunktionalitäten

Nur reguläre Tests

8 Integrationen zur Testautomatisierung und REST API

2 Integrationen zur Testautomatisierung und REST API

Vollständig anpassbare Dashboards

Nur Dashboard-Vorlagen

KPI-Benachrichtigungen

Nur manuelle Überprüfung von Dashboards

Unbegrenzte kostenlose Lizenzen für manuelle Tester

Keine kostenlosen Lizenzen

Wöchentliche Aktualisierungen der Funktionen

Modernste KI-Testfunktionalitäten

8 Integrationen zur Testautomatisierung und REST API

Vollständig anpassbare Dashboards

KPI-Benachrichtigungen

Unbegrenzte kostenlose Lizenzen für manuelle Tester

3 Feature-Freigaben pro Jahr

Nur reguläre Tests

2 Integrationen zur Testautomatisierung und REST API

Nur Dashboard-Vorlagen

Nur manuelle Überprüfung von Dashboards

Keine kostenlosen Lizenzen

Kann Enterprise-Software modern sein?

Die wichtigsten Unterschiede zwischen aqua und qTest

Wie wir vergleichen

KI

aqua gewinnt (qTest hat keine KI-gestützte Tests)

Testmanagement

Integrationen

Preisflexibilität

Urteil: aqua gewinnt durch niedrigere Preise und kostenlose Lizenzen

Modelle für die Bereitstellung

Dashboards

Berichterstattung

Nutzerverwaltung

ALM

Was Benutzende sagen

Endgültiges Urteil

Gewinner