M3.06. Προετοιμασία αξιολόγησης της διαδικασίας mentoring

4. Ανάπτυξη ερωτήσεων αξιολόγησης, πλαισίου μέτρησης και σχεδίου αξιολόγησης

4.1. Δυο διαφορετικοί τρόποι σχεδιασμού ερωτήσεων αξιολόγησης για το πρόγραμμα mentoring

Αυτή είναι μια μέθοδος που βοηθά στη διατύπωση ερωτήσεων αξιολόγησης. Κοιτάξτε το λογικό μοντέλο και ξεκινήστε με τα ακόλουθα πέντε στοιχεία:

  • Ποιος/α - Ποια ήταν η στρατηγική πρωτοβουλία σας ή το πρόγραμμα που προοριζόταν να ωφεληθεί;
  • Τι –Τι είδους προσπάθεια θα πρέπει να γίνει; Τι είδους πλαίσιο χρησιμοποιήθηκε για την υλοποίηση της προσπάθειας και πώς θα μπορούσε να επηρεάσει την εφαρμογή και τα αποτελέσματά της;
  • Πότε - Πότε έγιναν οι δραστηριότητες; Πότε άρχισαν να εμφανίζονται οι επιθυμητές αλλαγές;
  • Γιατί - Γιατί η προσπάθεια είναι σημαντική για τον οργανισμό ή την κοινότητά σας; Γιατί μπορεί να είναι σημαντική για τους ανθρώπους άλλων οργανισμών ή κοινοτήτων;
  • Πώς - Πώς μπορεί η προσπάθεια να επηρεάσει τις επιθυμητές αλλαγές ή να επιφέρει τα επιθυμητά αποτελέσματα;

Αυτά είναι παραδείγματα ερωτήσεων αξιολόγησης που μπορείτε να χρησιμοποιήσετε ως δείγμα.

Μια άλλη μέθοδος για τη διατύπωση ερωτήσεων αξιολόγησης είναι να εξετάσετε διαφορετικές πτυχές της στρατηγικής, της πρωτοβουλίας ή του προγράμματος σας και να δημιουργήσετε ερωτήσεις σχετικά με κάθε μία από αυτές τις πτυχές.

Χρησιμοποιώντας το λογικό μοντέλο και γνωρίζοντας τις ερωτήσεις που θέλετε να απαντήσετε, μπορείτε να αναπτύξετε ένα πλαίσιο μέτρησης, ως εργαλείο σχεδιασμού αξιολόγησης. Η ανάπτυξη ενός πλαισίου μέτρησης θα σας επιτρέψει να καθορίσετε τον τρόπο αξιολόγησης της προόδου όσον αφορά στην επίτευξη αποτελεσμάτων και την απάντηση στις ερωτήσεις αξιολόγησης.

Με ένα πλαίσιο μέτρησης για την προσπάθειά σας, έχετε μια σαφή εικόνα του τρόπου διεξαγωγής της αξιολόγησής σας. Το πλαίσιο μέτρησης παρέχει μια άλλη ευκαιρία στους ενδιαφερόμενους να καθορίσουν περαιτέρω τα αποτελέσματα. Έτσι μπορείτε να εξετάσετε τι σημαίνει το αποτέλεσμα με πιο συγκεκριμένους όρους.

Βασικά στοιχεία του πλαισίου μέτρησης

Επτά βασικά στοιχεία αποτελούν το πλαίσιο μέτρησης:

  • Τα αποτελέσματα είναι άμεσα προϊόντα των δραστηριοτήτων και μπορεί να περιλαμβάνουν τύπους, επίπεδα και στόχους των υπηρεσιών που θα παρασχεθούν από τη στρατηγική, την πρωτοβουλία ή το πρόγραμμα.
  • Τα αποτελέσματα είναι οι άμεσες, ενδιάμεσες και μακροπρόθεσμες αλλαγές ή οφέλη που πρέπει να τεκμηριώσετε. Αυτά τα αποτελέσματα θα πρέπει να είναι τα ίδια που προσδιορίζονται στο λογικό μοντέλο.
  • Οι δείκτες είναι σημεία της προόδου ως προς την αλλαγή που ελπίζετε να κάνετε με τη στρατηγική, την πρωτοβουλία ή το πρόγραμμά σας.
  • Τα μέτρα αλλαγής είναι αξίες - ποσοτικές και ποιοτικές - που μπορούν να χρησιμοποιηθούν για να εκτιμηθεί εάν έχει σημειωθεί πρόοδος.
  • Οι μέθοδοι συλλογής δεδομένων είναι οι στρατηγικές για τη συλλογή δεδομένων. Αυτό θα μπορούσε να περιλαμβάνει ποσοτικές μεθόδους, όπως διεξαγωγή ερευνών ή ανάλυση υφιστάμενων δεδομένων ή ποιοτικές μεθόδους, όπως διεξαγωγή συνεντεύξεων ή ανάλυση εγγράφων.
  • Οι πηγές δεδομένων είναι οι τοποθεσίες από τις οποίες (π.χ. εθνική βάση δεδομένων, έρευνα προγράμματος) ή άτομα από τα οποία (π.χ. συμμετέχοντες στο πρόγραμμα) θα λάβετε δεδομένα.
  • Η συχνότητα συλλογής δεδομένων είναι πόσο συχνά σκοπεύετε να συλλέξετε δεδομένα.

Πώς να χρησιμοποιήσετε ένα πλαίσιο μέτρησης
Μόλις προσδιορίσετε τα αποτελέσματα και τις άμεσες, ενδιάμεσες και μακροπρόθεσμες συνέπειες, μπορείτε να απαριθμήσετε κάθε αποτέλεσμα και συνέπεια στο πλαίσιο μέτρησης στην πρώτη στήλη. Μετά την καταγραφή όλων, μπορείτε να δημιουργήσετε ένα σαφές σχέδιο για την αξιολόγηση της προόδου προς το συγκεκριμένο αποτέλεσμα ή έκβαση. Αυτό συνεπάγεται τη μετάβαση στις σειρές του πλαισίου μέτρησης από αριστερά προς τα δεξιά για τον προσδιορισμό δεικτών, μέτρων αλλαγής, μεθόδων συλλογής δεδομένων, πηγών δεδομένων και συχνότητας συλλογής δεδομένων για κάθε αποτέλεσμα. Λάβετε υπόψη ότι καθώς ολοκληρώνετε το πλαίσιο μέτρησης, ορισμένα στοιχεία ενδέχεται να περιέχουν επικαλυπτόμενες απαντήσεις. Για παράδειγμα, η πηγή δεδομένων για δύο αποτελέσματα μπορεί να είναι η ίδια.

Κατά την ανάπτυξη των ερωτημάτων αξιολόγησης, πρέπει να εξεταστούν οι ακόλουθες τέσσερις κατηγορίες για τη μέτρηση προγραμμάτων καθοδήγησης.

  • Διαδικασίες σχέσης
  • Διαδικασίες προγράμματος
  • Αποτελέσματα σχέσεων
  • Αποτελέσματα προγράμματος

Ο παρακάτω πίνακας παρουσιάζει τις περιοχές αξιολόγησης για τις κατηγορίες αυτές.

Κατηγορία Αξιολόγηση
Διαδικασίες σχέσης Τι συμβαίνει στη σχέση; Για παράδειγμα: πόσο συχνά συναντά ο μέντορας τον/ην καθοδηγούμενο/η; Έχουν αναπτύξει επαρκή εμπιστοσύνη; Υπάρχει σαφής αίσθηση κατεύθυνσης στη σχέση; Μήπως ο μέντορας ή ο/η καθοδηγούμενος/η έχουν ανησυχίες σχετικά με τη δική τους συμβολή ή τη συνεισφορά του άλλου ατόμου στη σχέση;
Διαδικασίες προγράμματος Για παράδειγμα, πόσοι άνθρωποι παρακολούθησαν την εκπαίδευση; Πόσο αποτελεσματική ήταν η εκπαίδευση; Σε ορισμένες περιπτώσεις, οι διαδικασίες του προγράμματος θα περιλαμβάνουν και τα δεδομένα που προέρχονται από την προσθήκη μετρήσεων από μεμονωμένες σχέσεις, για να αποκτήσουν μια ευρεία εικόνα της κατάστασης;
Αποτελέσματα σχέσεων Έχουν ο μέντορας και ο καθοδηγούμενος/η εκπληρώσει τους στόχους που έχουν θέσει; Ενδέχεται να χρειαστούν ορισμένες προσαρμογές εάν οι συνθήκες αλλάξουν, επομένως και οι στόχοι θα πρέπει να αλλάξουν ελαφρώς.
Αποτελέσματα προγράμματος Έχει το πρόγραμμα, για παράδειγμα, αυξήσει την διατήρηση του βασικού προσωπικού ή βελτίωσε τις ικανότητες των καθοδηγούμενων;