Μενού

8 βασικοί δείκτες απόδοσης για κυκλοφορίες ποιότητας (Panaya Test Dynamix Review)

8 key performance indicators

Δοκιμάστε Το Όργανο Μας Για Την Εξάλειψη Των Προβλημάτων

Αυτό το άρθρο εξηγεί 8 βασικούς δείκτες απόδοσης για εκδόσεις ποιότητας με τη βοήθεια της δοκιμαστικής λύσης Panaya Test Dynamix end-to-end:

Δεν είναι μυστικό ότι οι Διαχειριστές Ποιότητας Λογισμικού αντιμετωπίζουν μια αυξανόμενη πίεση για την παροχή λογισμικού υψηλής ποιότητας με ταχύτητα ρεκόρ.

Το ερώτημα που όλοι μας ρωτάμε συχνά είναι - «πώς μετράμε την επιτυχία μας» όσον αφορά την ποιότητα του λογισμικού;

Η ταχύτητα στην αγορά είναι ένας πολύ απλούστερος υπολογισμός, αλλά η μέτρηση της απόδοσής μας στην παροχή λογισμικού υψηλής ποιότητας εξαρτάται από πολλούς παράγοντες όπως η μεθοδολογία του έργου (καταρράκτης, υβριδικό, ευκίνητο), η πολυπλοκότητα του λογισμικού, το επίπεδο τεχνικής εμπλεκόμενο χρέος, ο αριθμός διεπαφών και πολλά άλλα.

Με λίγα λόγια, ο αριθμός των μεταβλητών που παίζει σε ένα αποδεκτό επίπεδο του ελαττώματα υψηλής σοβαρότητας δεν πρέπει να υποτιμάται. Ως εκ τούτου, για να επιβιώσουμε σε αυτήν την αγορά, πρέπει να εξελίσσουμε συνεχώς, τόσο στις απόψεις μας όσο και στις ράβδους μέτρησης.

Αυτός είναι ο λόγος για τον οποίο έχω αναπτύξει αυτήν τη λίστα με τα 8 κορυφαία KPI που πρέπει να προσθέσετε στην Κάρτα αποτελεσμάτων ποιότητας και να ξεκινήσετε την παρακολούθηση για να μετριάσετε τον κίνδυνο έκδοσης, να βελτιώσετε την ποιότητα και να μετρήσετε την επιτυχία σας αμέσως.

Βασικοί Δείκτες Απόδοσης

Τι θα μάθετε:

Βασικοί δείκτες απόδοσης για εκδόσεις ποιότητας

# 1) Αποτελεσματικότητα ανίχνευσης ελαττωμάτων (DDE, ποσοστό ανίχνευσης ελαττωμάτων AKA)

Αυτό είναι ένα μέτρο του δικού σας συνολική δοκιμή παλινδρόμησης αποτελεσματικότητα. Υπολογίζεται ως αναλογία ελαττωμάτων που εντοπίστηκαν πριν και μετά την κυκλοφορία από τους πελάτες σας.

Τα ελαττώματα που εντοπίζονται μετά την απελευθέρωσή σας είναι συνήθως γνωστά ως «Περιστατικά» και έχουν συνδεθεί σε ένα σύστημα υποστήριξης ενώ τα ελαττώματα που εντοπίστηκαν κατά τις φάσεις δοκιμής ( Π.χ. , Μονάδα, Σύστημα, Παλινδρόμηση ή UAT) αναγνωρίζονται πριν από την κυκλοφορία και τεκμηριώνονται με τα εργαλεία όπως Panaya Test Dynamix .

Για να υπολογίσετε σωστά αυτό το KPI, πρέπει πάντα να κατηγοριοποιείτε την έκδοση λογισμικού στην οποία εντοπίστηκε κάθε ελάττωμα, πριν από την κυκλοφορία στο περιβάλλον παραγωγής σας.

Ο τύπος που χρησιμοποιείται συχνά για το DDE:

Αριθμός ελαττωμάτων που εντοπίστηκαν στην έκδοση έκδοσης λογισμικού /

που είναι καλύτερα παράθυρα ή linux

Αριθμός ελαττωμάτων στην έκδοση λογισμικού + ελαττώματα που έχουν αναγνωριστεί από τους τελικούς χρήστες (Π.χ, Περιστατικά)

Ακολουθεί μια απλή απεικόνιση:

Ας υποθέσουμε ότι εντοπίστηκαν 95 ελαττώματα κατά τη διάρκεια του κύκλου δοκιμών παλινδρόμησης στον τελευταίο μηνιαίο SAP Service Pack και καταγράφηκαν 25 ελαττώματα μετά την κυκλοφορία. Το DDE θα υπολογιζόταν ως 95 διαιρούμενο με (95 + 25) = 79%.

Λάβετε υπόψη ότι το DDE πρέπει να παρακολουθείται με ένα γράφημα γραμμών που ξεκινά στο 100% την ημέρα μετά την κυκλοφορία του στην παραγωγή. Και καθώς οι εσωτερικοί τελικοί χρήστες και οι πελάτες σας αρχίζουν να εργάζονται με το πιο πρόσφατο service pack SAP σας, θα καταγράφουν αναπόφευκτα ορισμένα περιστατικά.

Ήμουν η εμπειρία μου ότι μια «φρενίτιδα σίτισης» συμβαίνει μέσα στην πρώτη εβδομάδα 2 ημέρες μετά το χτύπημα ενός Service Pack στο παραγωγικό περιβάλλον. Τότε θα παρατηρήσετε μια γρήγορη πτώση από 100% σε περίπου 95% καθώς καταγράφονται περιστατικά. Εάν η εταιρεία σας χρησιμοποιεί μηνιαίο ρυθμό κυκλοφορίας Service Pack, μετρήστε το DDE για περίοδο 30 ημερών σε κάθε Service Pack.

Από την άλλη πλευρά, εάν η εταιρεία σας εκτελεί μόνο τέσσερις (4) κύριους κύκλους κυκλοφορίας ετησίως, τότε μετρήστε τον για 90 ημέρες για να δείτε πώς μειώνεται κατά τη διάρκεια αυτής της χρονικής περιόδου.

Τι θεωρείται «καλό DDE»;

Μοιάζει πολύ με τις μετρήσεις της αρτηριακής πίεσης που κάθε οργανισμός και άτομο εξελίσσεται με την πάροδο του χρόνου.

Αν και η ιατρική κοινότητα ορίζει ότι η «βέλτιστη» μέτρηση της αρτηριακής πίεσης είναι 120/80 - είναι φυσικό να βλέπουμε αύξηση της συστολικής αρτηριακής πίεσης καθώς γερνάμε. Με το DDE, οι επαγγελματίες του κλάδου και οι ηγέτες της σκέψης είναι γνωστοί ότι λένε ότι το 90% είναι αξιέπαινο στις περισσότερες βιομηχανίες.

Ωστόσο, έχω δει τους οργανισμούς να επιτυγχάνουν> 95% DDE σε σταθερή βάση, αλλάζοντας αριστερά με εργαλεία προσομοίωσης αντίκτυπου αλλαγής όπως Ανάλυση επιπτώσεων της Panaya .

# 2) Ελαττώματα στο σύστημα (SWD)

Έχετε αντιμετωπίσει ποτέ πολλά ελαττώματα που σχετίζονται με τα ίδια αντικείμενα; Σίγουρα, θα έχετε. Είναι ένα κοινό φαινόμενο που αντιμετωπίζουν πολλοί διαχειριστές δοκιμών.

Ξαφνικά, βλέπετε μια τεράστια αύξηση στον αριθμό των σφαλμάτων που αναφέρθηκαν σε έναν κύκλο UAT. Ευτυχώς, στοιχηματίζω ότι είστε του τύπου που παρακολουθεί τα ελαττώματα κάθε 15 λεπτά και χειροκίνητα 'συνδέει' τα αντίγραφα μαζί ή διαβάζει κάθε μία περιγραφή για να διακρίνει τη βασική αιτία, σωστά; Αμφίβολος.

Λοιπόν, ποιες είναι οι επιλογές σας για να διαχειριστείτε το αναπόφευκτο δράμα του «ελαττωματικού πληθωρισμού;»

Το δράμα που ακολουθεί σε αυτήν τη βραδινή ανακεφαλαιωτική κλήση με την ηγεσία στο HQ για «Γιατί μια τόσο ξαφνική αύξηση των ελαττωμάτων σήμερα;» (Παύση…. Βαθιά ανάσα πριν απαντήσω)… “Είμαι στη διαδικασία να συνεργαστώ με τους Functional Leads για να πραγματοποιήσω μια χειροκίνητη ανάλυση των βασικών αιτιών.

Πιστεύουμε όμως ότι πολλά από τα θέματα σχετίζονται με ένα κοινό ζήτημα, αλλά αυτό δεν έχει εντοπιστεί ακόμη », ακούγεται γνωστό;

Η πρότασή μου είναι να αρχίσετε να παρακολουθείτε αυτό που καλεί η Panaya 'Ελαττώματα στο σύστημα' . Η παρακολούθηση αυτού του εγχειριδίου γίνεται για πάντα - πιστέψτε με, το έχω δοκιμάσει πολλές φορές. Είναι επίσης επώδυνο να κάνετε όταν χρησιμοποιείτε εργαλεία ALM παλαιού τύπου όπου το μόνο που μένετε είναι η δυνατότητα σύνδεσης των ελαττωμάτων μεταξύ τους και προσθήκης σχολίου.

Ουάου, αυτό βοήθησε πραγματικά! (αισθανθείτε τον σαρκασμό;). Αλλά αν δεν έχετε επιλογή στα εργαλεία τώρα, τότε θα πρέπει να αφιερώσετε το χρόνο για να παρακολουθείτε σωστά τα ελαττώματα συστήματος για να ξεκαθαρίσετε ξεκάθαρα; γιατί η γραμμή τάσης σφάλματος κινείται προς τα πάνω προς το τέλος ενός κύκλου δοκιμών και όχι προς τα κάτω.

Εάν έχετε την ευκαιρία, ελέγξτε το Panaya Test Dynamix, έχει ενσωματωμένο SWD στον ίδιο τον κινητήρα που υπολογίζει αυτόματα το SWD για εσάς εν κινήσει.

Ελάττωμα σε όλο το σύστημα

Ο Ιστός της Αράχνης - Βρίσκοντας μέσα στο «Risk Cockpit» αυτής της πλατφόρμας, αυτή είναι μια ισχυρή αλλά απλή αναπαράσταση των 6 πρόσθετων βασικών δεικτών απόδοσης που ολοκληρώνουν τα πιο σημαντικά KPI που πρέπει να παρακολουθούν κάθε διαχειριστής ποιότητας, δοκιμών και κυκλοφορίας.

# 3) Ολοκλήρωση απαιτήσεων

Οι υπεύθυνοι QA κατανοούν τον κίνδυνο σε βαθύτερο επίπεδο που μπορεί να πραγματοποιηθεί μόνο με έναν κώδικα ή την ορατότητα σε επίπεδο μεταφοράς τυλιγμένη σε κάθε απαίτηση. Αυτό απαιτεί το σωστό σύνολο εργαλείων.

Το εργαλείο Panaya θα απαντήσει στις ανάγκες των οργανώσεων που διαχειρίζονται το SAP αναζητώντας έξυπνες προτάσεις για δοκιμές μονάδας και ανάλυση κινδύνου με βάση τη δραστηριότητα μεταφοράς.

πώς να δημιουργήσετε testng xml αρχείο στο eclipse

Αυτό το επίπεδο παρακολούθησης είναι διαθέσιμο εντός Panaya Release Dynamix (RDx) .

Ολοκλήρωση απαιτήσεων

# 4) Ολοκλήρωση ανάπτυξης

Ζούμε σε μια εποχή στην οποία οι πελάτες είναι ο Βασιλιάς και αυτό οδηγεί τη στρατηγική ψηφιακού μετασχηματισμού κάθε οργανισμού. Σε αυτήν την ημέρα και εποχή, δεν έχουμε την πολυτέλεια να σιωπήσουμε τη σκέψη μας ή την οργανωτική μας προσέγγιση στη διασφάλιση ποιότητας και παράδοση λογισμικού.

Τα παραδοσιακά μας μοντέλα ALM χθες δεν σχεδιάστηκαν για το μοντέλο συνεχούς παράδοσης του σήμερα. Προκειμένου να καταπολεμήσουν αυτόν τον παλιό τρόπο σκέψης, το QA και οι διαχειριστές δοκιμών πρέπει να ενταχθούν στη δράση ανάπτυξης εφαρμογών, που σημαίνει ότι έχουν παλμό στην παράδοση ιστοριών χρηστών.

Δεν αρκεί να 'καθίσετε και να περιμένετε' για να φτάσει η ιστορία ενός χρήστη στην κατάσταση ολοκλήρωσης. Αντίθετα, πρέπει να παρακολουθούμε την εξέλιξη μιας ιστορίας χρηστών, να παρακολουθούμε καθημερινές συναντήσεις Scrum και να μιλάμε ανοιχτά για τους κινδύνους που εκτυλίσσονται με σημαντικές αλλαγές στην υπό δοκιμή εφαρμογή.

# 5) Κάλυψη προγράμματος δοκιμών

Αυτό είναι ένα από τα αγαπημένα μου KPI για παρακολούθηση, επειδή δεν έχω υποβιβασθεί στην παρακολούθηση του συστήματος, της ενσωμάτωσης, της παλινδρόμησης και της κάλυψης UAT μόνο.

Στο πραγματικό πνεύμα της αλλαγής αριστερά, άρχισα να συμβουλεύομαι για τη σημασία της κάλυψης δοκιμών μονάδας παρακολούθησης. Ακούγεται τρελό, έτσι; Δεν είναι, ειδικά αν έχετε τα κατάλληλα εργαλεία για να κάνετε την εκτέλεση των δοκιμών μονάδας μόνο εύκολη, αλλά διευκολύνει ακόμη και την καταγραφή των πραγματικών αποτελεσμάτων (αποδεικτικά στοιχεία).

Με την ενσωματωμένη δυνατότητα δοκιμαστικής εγγραφής και παιχνιδιού του Panaya Test Dynamix, η συμμετοχή σας στις δοκιμές μονάδας θα ανεβαίνει στα ύψη. Όχι μόνο θα μπορείτε να προβάλλετε με υπερηφάνεια έναν πίνακα απαιτήσεων ιχνηλασιμότητας που να δείχνει κάλυψη από άκρο σε άκρο, αλλά επίσης θα προβάλλετε εύκολα τα πραγματικά αποτελέσματα στο τμήμα ελέγχου σας από τη μονάδα έως τη δοκιμή παλινδρόμησης.

Ιχνηλασιμότητα απαιτήσεων

# 6) Αλλαγή ανάλυσης κινδύνου

Ένας κίνδυνος είναι εγγενής σε κάθε αλλαγή που κάνουμε σε μια υπό δοκιμή εφαρμογή, αλλά δεν γνωρίζουμε πάντα αν δοκιμάζουμε τα σωστά πράγματα.

Πολλοί οργανισμοί έχουν τον δικό τους ορισμό για το τι σημαίνει «κίνδυνος αλλαγής» για αυτούς. Μέσα στο «Risk Cockpit» του Panami’s Release Dynamix (RDx), μπορείτε να κάνετε την εικασία να παρακολουθείτε τις αλλαγές με μια Ανάλυση αντικτύπου για το έργο σας ή την επόμενη κυκλοφορία.

Το RDx υπολογίζει συστηματικά τον κίνδυνο για κάθε απαίτηση και σας ενημερώνει για το πώς αλλάζει καθώς προχωράτε στον κύκλο ζωής παράδοσης.

Αλλαγή ανάλυσης κινδύνου

# 7) Κίνδυνος εκτέλεσης δοκιμής

Είναι πολύ συνηθισμένο για όλους τους οργανισμούς να παρακολουθούν KPI όπως τεστ συγγραφέα, επιτυχημένες δοκιμές, αυτοματοποιημένες δοκιμές και δοκιμές που εκτελέστηκαν, αλλά τι γίνεται με την παρακολούθηση των πραγματικών βημάτων που εκτελούνται σε καθεμία από τις δοκιμές;

Έχετε παρατηρήσει ποτέ ότι πολλά από τα δημοφιλείς πλατφόρμες ALM δεν παρέχετε τις δυνατότητες αναφοράς εκτός του πλαισίου για να παρακολουθείτε την πρόοδο εκτέλεσης δοκιμής «βήμα»; Όταν έχετε πολλά διαφορετικά «hand-offs» που εμφανίζονται σε ένα Κύκλος UAT , είναι λογικό να παρακολουθείτε τον κίνδυνο εκτέλεσης δοκιμών και την κατάσταση, όχι μόνο σε επίπεδο δοκιμής αλλά και σε επίπεδο επιχειρηματικής διαδικασίας.

Το Panaya Test Dynamix το κάνει ακριβώς αυτό, έξω από το κουτί.

κίνδυνος εκτέλεσης δοκιμής

# 8) Εκτέλεση ελαττωμάτων

Η ανίχνευση ελαττωμάτων έχει εγγενώς αρνητική σημασία.

Εκτός από την παρακολούθηση ενεργών ελαττωμάτων, ελαττωμάτων που διορθώνονται καθημερινά, και σοβαρών ελαττωμάτων, προτείνουμε επίσης την παρακολούθηση της επίλυσης των ελαττωμάτων, καθώς σχετίζονται με τις απαιτήσεις κάλυψης.

Πολλοί οργανισμοί δεν λαμβάνουν γνώση των απαιτήσεων για την επίλυση ελαττωμάτων.

Γιατί αυτή η λύση για δοκιμές;

Με μια ανιχνευσιμότητα από άκρο σε άκρο ενσωματωμένη τόσο στο Release Dynamix όσο και στο Panaya Test Dynamix, ο οργανισμός σας μπορεί να παρακολουθεί τη ροή εργασίας της ανάλυσης ελαττωμάτων από την αρχή έως το τέλος στο επίπεδο απαιτήσεων.

Αυτό είναι ιδιαίτερα χρήσιμο για την κυκλοφορία, την ποιότητα και τους διαχειριστές δοκιμών που αναζητούν μια πανοραμική θέα ενός έργου ή ενός κύκλου απελευθέρωσης.

Η Panaya επιταχύνει τη διαδικασία δοκιμών για τεχνικούς χρήστες πληροφορικής και επιχειρήσεων, μειώνοντας έτσι τη συνολική προσπάθεια δοκιμών κατά 30-50%:

  • Διευθυντές: Ειδοποιήσεις σε πραγματικό χρόνο για δοκιμές και ελαττώματα και αποτροπή σημείων συμφόρησης.
  • Χρήστες επιχειρήσεων: Αυτοματοποιημένη τεκμηρίωση δοκιμαστικών στοιχείων και ελαττωμάτων.
  • Λειτουργικοί αναλυτές: Αυτοματοποίηση επαναλαμβανόμενων δραστηριοτήτων δοκιμών.
  • Επαγγελματίες ελεγκτές: Βελτιώνει απρόσκοπτα τη δέσμευση επιχειρηματικών γνώσεων.
  • Επίλυση ελαττωμάτων: Μειώνει εμπρός και πίσω με τους δοκιμαστές.

Τι άλλο πρέπει να γνωρίζετε για αυτήν τη λύση

# 1) Το Panaya Test Dynamix είναι μια λύση SaaS που σημαίνει ότι αποκτάτε απρόσκοπτη ενσωμάτωση, συχνές και ανώδυνες αναβαθμίσεις, καθώς και παρακολούθηση εργαλείων αυτοματισμού επί τόπου.

κορυφαίες 10 εφαρμογές κατασκοπείας για Android

# 2) Ενσωματωμένα εργαλεία συνεργασίας απλοποιήστε τους κύκλους δοκιμών με ενσωματωμένες ειδοποιήσεις και εργαλεία επικοινωνίας.

Η αυτόματη παράδοση των βημάτων δοκιμής στον επόμενο χρήστη εξαλείφει τον χρόνο αδράνειας, ανακουφίζει από τα σημεία συμφόρησης του φόρτου εργασίας και εξασφαλίζει τη βέλτιστη ροή εργασίας.

# 3) Έξυπνη διαχείριση ελαττωμάτων επιτρέπει στους χρήστες να παρακολουθούν κεντρικά τα ελαττώματα, την επίλυσή τους και τις επιχειρηματικές διαδικασίες που επηρεάζονται από αυτούς.

Όταν εντοπιστεί κάποιο ελάττωμα, εντοπίζει αυτόματα όλες τις άλλες δοκιμές που επηρεάζονται από αυτό και αποκλείει ή στέλνει ειδοποιήσεις στους δοκιμαστές έως ότου επιλυθεί το κύριο ελάττωμα. Το επιλυμένο ελάττωμα κλείνει αυτόματα, εξαλείφοντας την καθυστέρηση του ελαττώματος.

# 4) Με μια προσέγγιση επιχειρηματικών διαδικασιών στο UAT και το SIT, εμπειρογνώμονες διαλειτουργικών και γεωγραφικά διασκορπισμένων θεμάτων επικυρώνουν κύκλους UAT βάσει των πραγματικών επιχειρηματικών διαδικασιών (συσκευασμένες εφαρμογές).

# 5) Συνδέσεις αυτοματισμού δοκιμής παρέχει μια πλήρη ενσωμάτωση του Panaya Test Dynamix με τα υπάρχοντα εργαλεία αυτοματισμού για αποτελεσματικούς κύκλους παλινδρόμησης σε ελάχιστο χρόνο και προσπάθεια με ολιστικές δυνατότητες παρακολούθησης και παρακολούθησης.

# 6) Αυτοματοποίηση δοκιμαστικών στοιχείων αυτοματοποιεί τις μη αυτόματες δοκιμές που διαχειρίζονται παραδοσιακά σε Excel και Word

Εξοικονόμηση χρόνου καταγράφοντας εύκολα κάθε εκτέλεση δοκιμής - συμπεριλαμβανομένων των δοκιμαστικών αποδεικτικών στοιχείων και ενός αρχείου βημάτων για την αναπαραγωγή δοκιμών, ενώ ταυτόχρονα μειώνεται η κίνηση μεταξύ προγραμματιστών και υπεύθυνων δοκιμών. Η τεκμηρίωση είναι έτοιμο για έλεγχο , διασφαλίζει τη συμμόρφωση με όλα τα εσωτερικά και εξωτερικά πρότυπα ποιότητας.

# 7) Αυτόνομη δοκιμήΣΜ για SAP επιτρέπει τη δημιουργία και τη συντήρηση θήκης μηδενικής αφής, οπότε δεν χρειάζεται πλέον να αντιμετωπίζετε τους πόνους που σχετίζονται με τη δέσμευση επιχειρηματικών γνώσεων και τη διαδικασία δημιουργίας και συντήρησης σεναρίων με μη αυτόματη επεξεργασία.

Τα σενάρια είναι προσαρμόσιμα ενώ η μηχανική μάθηση προσφέρει επικύρωση και προτάσεις βάσει ανάλυσης πλήθους.

# 8) Αυτοματοποιημένη δέσμευση επιχειρηματικών γνώσεων - Omega δημιουργεί αυτόματα πραγματικές περιπτώσεις δοκιμών βασισμένες σε δραστηριότητες Business User που καταγράφονται απρόσκοπτα στην παραγωγή χρησιμοποιώντας αλγόριθμους μηχανικής μάθησης (SAP).

συμπέρασμα

Οι Διαχειριστές Ποιότητας Λογισμικού και όλοι οι σχετικοί ενδιαφερόμενοι μπορούν να ανταποκριθούν στα KPI δοκιμών τους για να οδηγήσουν σε περισσότερη καινοτομία, μειώνοντας παράλληλα τις προσπάθειες κατά 30-50%, χωρίς συμβιβασμούς στο πεδίο εφαρμογής ή στην ποιότητα χρησιμοποιώντας το Panaya.

Τυποποιεί τη διαδικασία δοκιμών και μετρά την επιτυχία καθώς όλοι οι ενδιαφερόμενοι υιοθετούν την ίδια μεθοδολογία δοκιμών για να αποκτήσουν ορατότητα σε πραγματικό χρόνο σε όλους τους κύκλους δοκιμών, συμπεριλαμβανομένου του UAT μεγάλης κλίμακας.

Για περισσότερες πληροφορίες, μπορείτε να εξερευνήσετε Panaya Test Dynamix .

Ενημερώστε μας για τις σκέψεις / ερωτήσεις σας στα παρακάτω σχόλια.

Συνιστώμενη ανάγνωση

^