Qase wurde Ende 2020 auf den Markt gebracht und ist die jüngste Testmanagementlösung, die eine bemerkenswerte Popularität genießt. Sie hatte vom ersten Tag an eine sehr moderne Benutzeroberfläche und eine überraschend ausgereifte UX. Doch was genau fehlt hier, was ein etabliertes TMS hat? Finden Sie es heraus, Abschnitt für Abschnitt, in nur 10 Minuten.
aqua bietet kostenlose KI-unterstützte Tests
aqua bietet On-Premise
Qase fehlt die Berichterstattung
KI ist eine sich schnell entwickelnde Technologie, daher werden wir uns eher mit der Spitzentechnologie als mit der Basistechnologie beschäftigen. Hier erfahren Sie, was Sie von einer KI-gestützten Testmanagementlösung erwarten sollten:
aqua hat bereits vor der Veröffentlichung von ChatGPT damit begonnen, den Algorithmus hinter ChatGPT an die Bedürfnisse der QA anzupassen. Fast ein Jahr später ist es nicht nur möglich neue Tests zu erstellen, sondern diese auch nach der Änderung einer Anforderung zu aktualisieren. Qase hat gerade erst eine frühe Beta-Version auf den Markt gebracht, die den Kontext Ihres Projekts nicht liest und strenge Bandbreitenanforderungen hat.
Das Testmanagement ist der Hauptgrund, warum wir uns mit diesen beiden Tools beschäftigen. Sie sollten verschiedene Aspekte der Handhabung von Testfällen sowie auf Nachvollziehbarkeit ausgerichtete Funktionen berücksichtigen. Dazu gehören:
aqua und Qase bieten beide branchenführende Testmanagementfunktionen. Sie können Tests erstellen, sie gruppieren, gemeinsame Testschritte festlegen und Änderungen an Elementen verfolgen. In Qase fehlen jedoch Ansichten und Workflows, die für Projekte jeder Größenordnung eine große Zeitersparnis darstellen.
Die meisten Tools beruhen auf der Automatisierung durch gängige Tools von Drittanbietern, die QS-Spezialisten seit über einem Jahrzehnt verwenden. Die Erfahrung ist viel besser, wenn Ihre Testmanagementlösung über native Integrationen für branchenführende Tools verfügt. Die Unterstützung von REST-APIs ist ein Muss, wenn Sie bei der Integration nicht von der Gnade des Anbieters abhängig sein wollen.
Qase und aqua verfolgen unterschiedliche Ansätze zur Testautomatisierung. Qase schlägt vor, dass Sie mit Open-Source-Frameworks wie Cucumber, Cypress und Playwright arbeiten, um Tests zu erstellen, die in Ihren Arbeitsbereich gemeldet werden. aqua bietet Integrationen mit führenden Testautomatisierungslösungen wie JMeter, SoapUI und Ranorex an. Bei beiden Anbietern können Sie auch die REST-API verwenden, um jedes beliebige Tool anzubinden.
Die Preise können sehr unterschiedlich sein; Sie werden kleine Unterschiede finden, die keinen Sinn machen, aber auch hohe Gebühren, die völlig gerechtfertigt sind. Hier sind einige Faktoren zu berücksichtigen:
Qase hat eine Reihe von Plänen, die etwas undurchsichtig sind. Die meisten Unternehmen benötigen den Business-Plan, um eine native Testfallüberprüfungsfunktion sowie Zugriffsbeschränkungen zu erhalten. Beide Pläne werden jährlich abgerechnet. Die Preisoptionen von Qase können jedoch nicht mit dem universellen Preis von aqua konkurrieren. Kleinere Teams bedeuten oft viele manuelle Tester, und aqua bietet ihnen kostenlose Lizenzen an. Diese Personen profitieren auch von geeigneten QA-Abläufen und haben nur Zugriff auf relevante Informationen.
Die Bereitstellung vor Ort ist in vielen Branchen ein Muss, doch die Anbieter sagen nicht ausdrücklich, wenn sie dies nicht anbieten. Je nach Ihren Sicherheitsrichtlinien und Ihrem Umfang ist auch die Bereitstellung in einer herstellerunabhängigen Cloud eine vorteilhafte Option.
Qase hat nie Interesse an einer On-Premise-Bereitstellung bekundet und unterstützt sie auch heute noch nicht. Auf der anderen Seite bietet aqua seit dem ersten Tag On-Premise an und verfügt über ein Portfolio von Kunden, die sich auf diese Lösung verlassen. Wenn die Anbieter-Cloud für Sie nicht in Frage kommt, können sowohl aqua als auch Qase Ihre Arbeitsbereiche auf einem isolierten Server hosten.
QA-Dashboards dienen zwei wichtigen Zwecken. Sie helfen dem QS-Team, seine Fortschritte zu verfolgen, machen aber auch andere Teams auf mögliche Engpässe aufmerksam. Zumindest sollten Sie in der Lage sein, alle Daten einzubeziehen und Dashboards mit dem Team zu teilen.
Die Dashboards von Qase sind ausreichend. Sie können eine große Anzahl von Widgets organisieren, die die wichtigsten Metriken visualisieren. aqua geht darüber hinaus, indem es Ihnen erlaubt, alle Daten aus dem Arbeitsbereich anzuzeigen. Es bietet auch KPI-Warnungen, die die Daten auf den Dashboards verfolgen und Sie benachrichtigen, wenn eine Kennzahl unter oder über der Zahl liegt, die Sie für wichtig halten.
Die Berichterstattung ist sowohl für interne als auch für externe Beteiligte wichtig. Ziel ist es, mit so wenig oder so viel Aufwand wie möglich das zu bekommen, was Sie brauchen. Wenn ein Tool sowohl eine Vorlagenbibliothek als auch umfangreiche Anpassungsmöglichkeiten bietet, ist das ein guter Anfang.
Qase verfügt nicht über spezielle Berichte, die über Dashboard-Widgets hinausgehen. Auf der anderen Seite bietet aqua hochgradig angepasste Berichte, die Dashboards, Pivot-Tabellen, durch Skripte automatisch umgewandelte Daten und sogar beliebige andere Texte oder Bilder, die Sie hinzufügen und kombinieren können. Die Berichte können auch problemlos mit externen Parteien geteilt werden.
Eine präzise Benutzerverwaltung ist unerlässlich, wenn Sie an mehreren Projekten arbeiten und/oder mit externen Spezialisten zusammenarbeiten. Außerdem erspart es Ihnen eine Menge Ärger, wenn Sie Crowd-Tests in derselben Testmanagement-Lösung durchführen.
Die Benutzerverwaltung von Qase ist ein wenig unangenehm. Es gibt nur 3 grundlegende Rollen, die sofort einsatzbereit sind. Wenn Sie etwas genaueres wollen, müssen Sie den „Business Plan“ wählen. Es gibt auch keine Berechtigungen pro Benutzer.
Dies ist keine zwingende Voraussetzung, aber Sie sind vielleicht an einer Testmanagementlösung interessiert, die auch den gesamten Produktlebenszyklus abdeckt. Das spart viel Geld, da Sie Lizenzen von weniger Anbietern benötigen, und durch die Synergieeffekte sollten Sie auch einige Stunden sparen.
aqua und Qase sind beides Lösungen, bei denen die Qualitätssicherung im Vordergrund steht und die auch den gesamten Produktlebenszyklus abdecken können. Sie können Jira behalten, wenn Ihre Entwickler dies wünschen, aber neue Projekte und kleine Teams würden es begrüßen, nicht für zusätzliche Tools zu zahlen.
Hier sind einige Dinge, die die Nutzer an beiden Tools mögen und nicht mögen.
„Ich war überrascht, ein so umfassendes und ausgereiftes Tool für das Testmanagement auf dem deutschen Markt zu finden, ohne es vorher ernst genommen zu haben.“
Jörg Großmann
Leiter der Entwicklungsabteilung der Bank 11
„Der Hauptgrund, warum wir Qase nutzen, war die Benutzeroberfläche, die viel komfortabler ist als die der meisten Mitbewerber. Es gibt Raum für Verbesserungen, z. B. bei der Berichterstattung - insbesondere bei der teamübergreifenden Berichterstattung und der Erstellung von ganzheitlichen Ansichten darüber, wie sich alle Projekte im gesamten Unternehmen entwickeln.“
Mikko V.
Unternehmen (>1.000 Mitarbeiter)
„Das Reporting ist aussagekräftig und bietet eine gute Entscheidungsgrundlage. Nachdem die Mitarbeiter aqua genutzt haben, erkennen sie den Mehrwert sehr schnell.“
Thomas Haeske
Leiter des Bereichs Organisation/IT der Berlin Hyp
„Es gibt einen Bereich, in dem Qase meiner Meinung nach verbessert werden könnte: der Prozess des Schreibens von Testschritten für ähnliche Fälle. Die Plattform bietet zwar einige Tools, die dies erleichtern, aber das Schreiben der gleichen Schritte für mehrere Fälle mit ähnlichen Merkmalen kann immer noch ziemlich zeitaufwändig und mühsam sein.“
Luka C.
Kleinunternehmen (<50 Beschäftigte)
„Manuelle Testfälle lassen sich mit aqua leicht automatisieren. Dabei hilft die nahtlose Integration mit Testautomatisierungstools.“
Jörn-Hendrick Sörensen
Prüfleiter bei KBA
„Es gibt einen deutlichen Mangel an Filtern auf Testlauf- und Testfallebene, wie bei 1. Aus Tausenden von Testläufen (ausgelöst durch Automatisierung) nur die Testläufe filtern, die fehlgeschlagene Tests enthalten 2. Herausfiltern von Testfällen, die im Code nicht mehr existieren (wir haben eine alte Funktion veraltet und daher die Tests entfernt)“
Lee W.
Kleinunternehmen (<50 Beschäftigte)
„Ich war überrascht, ein so umfassendes und ausgereiftes Tool für das Testmanagement auf dem deutschen Markt zu finden, ohne es vorher ernst genommen zu haben.“
Jörg Großmann
Leiter der Entwicklungsabteilung der Bank 11
„Das Reporting ist aussagekräftig und bietet eine gute Entscheidungsgrundlage. Nachdem die Mitarbeiter aqua genutzt haben, erkennen sie den Mehrwert sehr schnell.“
Thomas Haeske
Leiter des Bereichs Organisation/IT der Berlin Hyp
„Manuelle Testfälle lassen sich mit aqua leicht automatisieren. Dabei hilft die nahtlose Integration mit Testautomatisierungstools.“
Jörn-Hendrick Sörensen
Prüfleiter bei KBA
„Der Hauptgrund, warum wir Qase nutzen, war die Benutzeroberfläche, die viel komfortabler ist als die der meisten Mitbewerber. Es gibt Raum für Verbesserungen, z. B. bei der Berichterstattung - insbesondere bei der teamübergreifenden Berichterstattung und der Erstellung von ganzheitlichen Ansichten darüber, wie sich alle Projekte im gesamten Unternehmen entwickeln.“
Mikko V.
Unternehmen (>1.000 Mitarbeiter)
„Es gibt einen Bereich, in dem Qase meiner Meinung nach verbessert werden könnte: der Prozess des Schreibens von Testschritten für ähnliche Fälle. Die Plattform bietet zwar einige Tools, die dies erleichtern, aber das Schreiben der gleichen Schritte für mehrere Fälle mit ähnlichen Merkmalen kann immer noch ziemlich zeitaufwändig und mühsam sein.“
Luka C.
Kleinunternehmen (<50 Beschäftigte)
„Es gibt einen deutlichen Mangel an Filtern auf Testlauf- und Testfallebene, wie bei 1. Aus Tausenden von Testläufen (ausgelöst durch Automatisierung) nur die Testläufe filtern, die fehlgeschlagene Tests enthalten 2. Herausfiltern von Testfällen, die im Code nicht mehr existieren (wir haben eine alte Funktion veraltet und daher die Tests entfernt)“
Lee W.
Kleinunternehmen (<50 Beschäftigte)
aqua ist sowohl eine etablierte Lösung für Unternehmen als auch ein Pionier im Bereich KI-Tests. Qase ist ein schneller Aufsteiger auf dem Markt, hat aber kaum KI-Funktionen veröffentlicht und braucht mehr Zeit, um allgemeine Effizienzfunktionen zu liefern. Trotz einer Reihe klarer Funktionsvorteile konkurriert aqua mit Qase und schlägt es oft auch beim Preis.