🦑 januari 2025

The test automation quadrant, or a different way to look at your tests

Bas Dijkstra heeft een alternatief model voor de test automation piramide beschreven. In plaats van de piramide presenteert hij de test automation quadrant. Dit bestaat uit twee assen die vier kwadranten vormen.

De horizontale as beschrijft de hoeveelheid informatie die een test oplevert. Dit hangt samen met het gedeelte van de applicatie die getest wordt (groot voor E2E-testen en klein voor unittesten) en bijvoorbeeld de hoeveelheid risico van dit gedeelte.

De verticale as beschrijft de moeite waarmee een test gemaakt, uitgevoerd en geanalyseerd kan worden.

Dit samen levert een soort kosten-batenanalyse op. Je kunt bestaande geautomatiseerde testen op dit model leggen en kijken hoe efficiënt en informatief ze zijn. Het is dan uiteraard handig om testen meer in het kwadrant rechtsboven te krijgen.

Exploratory Testing - A Definitive Guide

Dit artikel is een mooi overzicht van alle aspecten van exploratief testen.

Exploratief testen is een testaanpak waar je als tester geen test cases van tevoren bedenkt, maar terwijl je test de applicatie verkent en erover leert. Dit laat meer ruimte over voor creativiteit en ervaring. Hierdoor vind je sneller onbekende issues en heb je meer flexibiliteit en kun je in korte tijd een groot stuk van de applicatie testen.

Centraal staan leren over de applicatie en het nadenken en beoordelen van de applicatie terwijl je bezig bent.

Je kunt helemaal vrij door de applicatie gaan, scenario's aanhouden, een strategie bepalen van tevoren en eventueel een time-box aanhouden.

Het is belangrijk om wel goed vast te leggen wat je gedaan hebt, zodat je goede bevindingen kunt aanmaken en documentatie aanlegt. De tester kan ook de uitvoer samen met anderen doen en bepaalde tools zoals screen-recorders gebruiken.

Een goede aanpak voor exploratief testen is om eerst eerdere bevindingen door te nemen, een charter op te stellen met regels voor de sessie, koppels en een time-box te bedenken. Na afloop kun je de sessie analyseren en reviewen.

Voordelen van exploratief testen zijn snelle feedback, het gebruik maken van intuïtie en het onderzoeken van alle hoeken van de applicatie. Door de simpele aanpak geeft het snelle feedback, is het makkelijk aan te passen, goedkoop en past het goed in het werken in sprints.

Nadelen zijn dat het soms lastig is om bevindingen te reproduceren, door gebruik aan structuur kun je onderdelen missen en het is sterk afhankelijk van de vaardigheden van de tester.

Audioboek: Turn the Ship Around!: A True Story of Turning Followers into Leaders

Tip van Menno: Een waargebeurd verhaal over een onderzeeboot kapitein die ineens op een onderzeeboot kapitein moest zijn, waar hij nog nooit had gevaren.

De belangrijkste les: als leidinggevende / beslissingsbevoegde moet je wel keuzes maken, maar dat kun je alleen doen op basis van goede informatie. Als je dus wilt dat je leidinggevende een beslissing neemt, lever hem dan alle belangrijke informatie aan. Of nog beter: Ik stel voor dat we het zus en zo doen, omdat als we iets anders doen dan botsen we tegen een ijsberg. Dan hoeft de leidinggevende alleen nog maar te zeggen, ja dat is goed. Een intrigerend verhaal!

Audioboek: Elon Musk - Walter Isaacson

Tip van Menno: Een fascinerend boek over een fascinerende man. Na afloop weet je zeker dat je nooit voor hem wilt werken. En toch heeft hij goede ideeën en is hij ook geniaal.

De mooiste dingen die ik ervan geleerd heb:

Schrap uit het project zo veel mogelijk dingen waarvan je vermoedt dat die niet nodig zijn. Als je niet minimaal 10% van de geschrapte dingen terug brengt omdat ze toch nodig bleken te zijn, heb je niet genoeg geschrapt. Stel jezelf altijd de vraag of iets echt nodig is, en waarom dan. Zorg dat je weer wie dat besloten heeft en om welke reden. Dus niet alleen iets doen omdat afdeling x dat voorschrijft, onderzoek wie op de afdeling het waarom voorschrijft, en of je het daarmee eens bent.

Storytel of Spotify