| Περίληψη: | Στο ένατο κεφάλαιο θα περιγράψουμε αναλυτικά τους τρόπους αποτίμησης της αποτελεσματικότητας (μετρική ακρίβειας, ανάκλησης κ.λπ.) των αλγορίθμων συστάσεων. Πιο συγκεκριμένα, στην εισαγωγή θα αναλύσουμε τα χαρακτηριστικά της off-line και της online αξιολόγησης. Ειδικά για την off-line αξιολόγηση, θα εξειδικεύσουμε τoν διαχωρισμό των δεδομένων σε εκπαίδευσης και ελέγχου. Επιπρόσθετα, θα μελετήσουμε τις μετρικές Mean Absolute Error και Root Mean Absolute Error για την πρόβλεψη των βαθμολογιών των χρηστών επί των στοιχείων. Επίσης, θα παρουσιάσουμε, με τη χρήση παραδειγμάτων, τις μετρικές Confusion Matrix, Precision, Recall, Normalized Discounted Cumulative Gain και Receiver Operating Characteristic Curve (ROC curve), οι οποίες ειδικεύονται στην αποτίμηση της αποτελεσματικότητας της λίστας προτεινόμενων στοιχείων. Τέλος, θα εξετάσουμε και μετρικές πέραν της απόλυτης ακριβείας (beyond accuracy metrics), όπως τη μετρική της επεξηγησιμότητας (explainability) και τη μετρική της πρωτοτυπίας (novelty) των στοιχείων της λίστας συστάσεων. Με την πρώτη αξιολογούμε κατά πόσο ένα προτεινόμενο στοιχείο μπορεί να επεξηγηθεί επαρκώς στον υπό εξέταση χρήστη, ενώ με τη δεύτερη αξιολογούμε το κατά πόσο το στοιχείο που προτείνεται είναι πρωτότυπο (novel) ως προς τα ενδιαφέροντα του χρήστη βάσει πάντα των πρότερων αλληλεπιδράσεών του με το σύστημα συστάσεων.
|
|---|
