Αγαπητοί φίλοι του Forge,
πρόσφατα λάβαμε κάποια σχόλια σχετικά με τις Α/Β δοκιμές και με τον τρόπο που τις πραγματοποιούμε. Συγκεκριμένα σχόλια σχετικά με τις Α/Β δοκιμές για το Forge Plus και την αναβάθμιση των Ημερήσιων Προκλήσεων. Έτσι, σκεφτήκαμε ότι θα ήταν χρήσιμο για εσάς να έχετε περισσότερες πληροφορίες σχετικά με το πως πραγματοποιούμε αυτές τις δοκιμές και γιατί αυτές αποτελούν αναπόσπαστο κομμάτι του Forge of Empires.
Ας ξεκινήσουμε με ένα ορισμό μιας Α/Β Δοκιμής. Η A/B Δοκιμή είναι μια βιομηχανική δοκιμή που χρησιμοποιείται συχνά από προγραμματιστές για την παρακολούθηση της αντίδρασης του παίκτη σε ένα χαρακτηριστικό. Με τέτοιες δοκιμές, δύο ή περισσότερες ομάδες επιλέγονται τυχαία. Αποτελούνται από μια δοκιμαστική ομάδα (ομάδα «Α»), η οποία θα έχει πρόσβαση σε ένα χαρακτηριστικό, και μια ομάδα δοκιμής (ομάδα «Β»), η οποία δεν έχει. Μέσω αυτής της σύγκρισης, οι προγραμματιστές μπορούν να παρακολουθούν απευθείας την αλλαγή στη συμπεριφορά των παικτών και να αξιολογούν τον αντίκτυπο της δοκιμασμένης λειτουργίας. Αυτό το κάνουμε μέσω τόσο ποσοτικής όσο και ποιοτικής ανατροφοδότησης. Και πρέπει να λάβουμε υπόψη και τα δύο, αλλά προσπαθήστε να έχετε κατά νου ότι τα σχόλια του φόρουμ είναι μόνο ένα μέρος πολλών περιοχών από τις οποίες λαμβάνουμε σχόλια.
Ας πάρουμε για παράδειγμα την πρόσφατη αναβάθμιση των Ημερήσιων Προκλήσεων. Λαμβάνοντας υπόψη και τις δύο ομάδες, μπορούμε να συγκρίνουμε πολλές πτυχές (συμπεριλαμβανομένης της ημερήσιας συμμετοχής, της διατήρησης συμμετοχής του χρήστη με το χαρακτηριστικό, την ηλικία των ανθρώπων που συμμετέχουν κλπ). Αυτό μας βοηθάει στον να διαπιστώσουμε αν αυτή η αλλαγή είναι ωφέλιμη κι ελκυστική στους παίκτες μας ως νέα προσφορά. Αν τα αποτελέσματα δε μας δείξουν θετική τάση, μπορούμε να ψάξουμε πιο βαθιά και να ελέγξουμε αν υπήρχε κάποιο πρόβλημα. Στο τέλος, μπορούμε να επέμβουμε και είτε να προσαρμόσουμε το χαρακτηριστικό ή να το αφαιρέσουμε εντελώς.
Για αυτό το λόγο οι δοκιμές A/B είναι σημαντικές για εμάς. Μας επιτρέπουν να έχουμε πρόσβαση σε πιο ουσιαστικά δεδομένα με βάση ένα ζωντανό περιβάλλον δοκιμών. Με αυτά τα δεδομένα, μπορούμε να βελτιώσουμε τις δυνατότητές μας και να εντοπίσουμε πιθανά προβλήματα.
Επιπλέον, η κυκλοφορία μιας νέας δυνατότητας σε μια μικρότερη ομάδα χρηστών μάς επιτρέπει να παρακολουθούμε πιο αποτελεσματικά τα σχόλια και να αποτρέπουμε την πιθανή έκρηξη απογοήτευσης που θα μπορούσε να συμβεί εάν κυκλοφορούσαμε άμεσα λειτουργίες σε ολόκληρο τον πληθυσμό του παιχνιδιού.
Το Forge of Empires είναι, φυσικά, ένα μεγάλο παιχνίδι. Υποστηρίζετε από εκατοντάδες χιλιάδες παικτών σε πολλούς Κόσμους. Αλλά αυτό επίσης σημαίνει ότι πολλά μπορεί να πάνε λάθος. Οι δοκιμές Α/Β είναι απολύτως απαραίτητες εάν θέλουμε να μειώσουμε τον πιθανό κίνδυνο της αποκάλυψης μιας νέας λειτουργίας σε ένα τόσο μεγάλο κοινό. Οι συνέπειες της κυκλοφορίας μιας μη δοκιμασμένης λειτουργίας μπορεί να προκαλέσει αρνητικές αλληλεπιδράσεις με το παιχνίδι - τόσο για εμάς όσο και για εσάς.
Είναι επίσης σημαντικό να τονίσουμε ότι οι δοκιμές Α/Β δεν είναι επιλεκτικές. Κανένας παίκτης δεν θα διατηρήσει οποιοδήποτε είδος μακροπρόθεσμου πλεονεκτήματος ή θα προεπιλεγεί για την ομάδα δοκιμής. Θα έχετε παρατηρήσει ότι υπάρχουν ορισμένα χαρακτηριστικά που δεν μπορούμε να δοκιμάσουμε A/B επειδή τα πλεονεκτήματα θα ήταν πολύ μεγάλα για να είναι δίκαια και θέλουμε να διατηρήσουμε τη δικαιοσύνη στο παιχνίδι. Η επιλογή για τις δοκιμές είναι καθαρά τυχαία και η δικαιοσύνη δεν είναι ο μόνος λόγος για αυτό. Είναι επίσης επειδή ένα τυχαιοποιημένο στοιχείο είναι αναπόσπαστο στοιχείο της ποιότητας των αποτελεσμάτων της δοκιμής.
Ελπίζουμε αυτό να διευκρινίζει γιατί οι δοκιμές Α/Β είναι το κλειδί για τη στρατηγική ανάπτυξης μας και θα παραμείνει μέρος των μελλοντικών ενημερώσεων.
Με εκτίμηση,
Η Ομάδατου Forge.