Σημεία ανάφλεξης στη δημοσκόπηση

Από τους Claudia Deane, Courtney Kennedy, Scott Keeter και Kyley McGeeney


Ενημερώθηκε στις 24 Οκτωβρίου 2016

Μπορούν να αξιολογηθούν οι δημοσκοπήσεις; Αυτή η ερώτηση είναι στο μυαλό όλων που φαίνεται ότι ακολουθούν την εκστρατεία του 2016, αν και είναι σχεδόν μοναδικό σε αυτόν τον εκλογικό κύκλο. Η απάντηση είναι περίπλοκη, χάρη στις μυριάδες προκλήσεις που αντιμετωπίζει η ψηφοφορία και το γεγονός ότι οι δημοσκόποι αντέδρασαν σε αυτές τις προκλήσεις με διαφορετικούς τρόπους.

Ορισμένες δημοσκοπήσεις διεξάγονται κυριολεκτικά όλη τη νύχτα με δείγματα ευκολίας και υποβάλλονται σε μικρή ή καθόλου προσαρμογή. Άλλοι τοποθετούνται επίπονα για μέρες ή ακόμα και εβδομάδες με στιβαρά σχέδια και μπορεί να προσαρμοστούν χρησιμοποιώντας προηγμένες τεχνικές. Αυτές οι δραματικές διαφορές, που έχουν αποδειχθεί ότι επηρεάζουν την ακρίβεια, είναι συχνά αδιαφανείς για τους καταναλωτές ειδήσεων. Αυτό που ακολουθεί είναι μια μεγάλη εικόνα της κατάστασης της ψηφοφορίας, που οργανώνεται γύρω από ορισμένα βασικά σημεία ανάφλεξης με συνδέσμους σε αναφορές και έρευνα για όσους θέλουν να κατανοήσουν καλύτερα το πεδίο.

Το γρήγορο ξεθώριασμα του σταθερού τηλεφώνου

Τα σταθερά τηλέφωνα χρησίμευαν ως συνεργάτες της έρευνας έρευνας για πολλά χρόνια. Βρέθηκε σχεδόν σε κάθε σπίτι, αγκυροβολημένο σε μια γεωγραφική τοποθεσία και παρέχει μια σιωπηρή υπόσχεση ότι ένας ερωτώμενος ήταν κάπου σχετικά ιδιωτικός, κυριάρχησαν στο τοπίο της έρευνας για τέσσερις δεκαετίες.


Η πρόκληση:Τα σταθερά τηλέφωνα αποτελούν τον τρόπο του δεινοσαύρου, τα οποία αντικαθίστανται γρήγορα από κινητά τηλέφωνα. Σύμφωνα με το Εθνικό Κέντρο Στατιστικών Υγείας, το οποίο παρακολουθεί τη χρήση τους, λιγότεροι από ένας στους δέκα Αμερικανούς ενήλικες ήταν ασύρματοι πριν από 10 χρόνια. Το 2015, σχεδόν οι μισοί ήταν.



Αυτό σημαίνει ότι εάν μια δημοσκόπηση καλεί μόνο αριθμούς σταθερού, θα αποκλείει συστηματικά τον μισό πληθυσμό - και απέχει πολύ από ένα τυχαίο μισό. Οι κυβερνητικές εκτιμήσεις δείχνουν ότι οι Αμερικανοί που έχουν κινητό αλλά όχι σταθερό είναι δυσανάλογα νέοι και μη λευκοί, μεταξύ άλλων διαφορών.


Σε γενικές γραμμές, οι τηλεφωνικοί σταθμοδότες αντέδρασαν σε αυτήν την εξέλιξη με έναν από τους τρεις τρόπους: τηλεφωνώντας κινητά τηλέφωνα εκτός από σταθερά. συμπληρώνοντας σταθερά δείγματα με δείγματα συμμετοχής που διεξάγονται στο Διαδίκτυο · ή συνεχίζοντας να υποστηρίζουμε ότι όλα είναι καλά. (Δείτε την πρωτοβουλία του Michigan Democratic 2016 για το πώς μπορεί να αποδειχθεί αυτή η τελευταία επιλογή.) Οι οργανισμοί που καλούν τόσο σταθερά όσο και κινητά τηλέφωνα χρησιμοποιούν συνήθως ζωντανές συνεντεύξεις, ενώ αυτοί που αναμιγνύουν σταθερά και διαδικτυακά δείγματα τείνουν να χρησιμοποιούν αυτόματες τηλεφωνικές έρευνες γνωστές ως διαδραστική φωνητική απόκριση (IVR) .

Η έρευνα:Ενώ η ανεξάρτητη έρευνα σχετικά με τα υβριδικά σχέδια «σταθερού IVR + internet» είναι σπάνια, υπάρχει ένα μεγάλο εύρος γνώσεων σχετικά με ζωντανές δημοσκοπήσεις ερωτηθέντων που καλούν αριθμούς σταθερού και κινητού τηλεφώνου. Τα αποτελέσματα είναι ενθαρρυντικά. Σε αντίθεση με τους ισχυρισμούς ότι η πτώση των σταθερών γραμμών έχει δημοσκοπήσεις «στην άκρη της καταστροφής», υπάρχουν σταθερές ενδείξεις ότι οι καλοσχεδιασμένες τηλεφωνικές δημοσκοπήσεις είναι εξίσου ακριβείς, αν όχι περισσότερο, σήμερα από ό, τι ήταν μια γενιά πριν.


Μια νέα μελέτη καταδεικνύει ότι καθώς οι δημοσκόποι καλούν αναλογικά περισσότερα κινητά τηλέφωνα και λιγότερα σταθερά τηλέφωνα, η ποιότητα των δεδομένων έχει βελτιωθεί. Και η τελευταία εργασία του Pew Research Center για αυτό το θέμα δείχνει ότι οι έρευνες της κοινής γνώμης για ενήλικες των ΗΠΑ θα μπορούσαν να πάνε 100% στο κινητό και να μην παρατηρήσουν μείωση της ποιότητας των δεδομένων. Αυτό απέχει πολύ από το κινητό να είναι ο θάνατος της έρευνας έρευνας! Και όσον αφορά τον θρήνο ότι οι συνεντεύξεις με κινητό τηλέφωνο κοστίζουν περισσότερο από το σταθερό, η έρευνα έχει διερευνήσει τρόπους για να αυξήσει την αποτελεσματικότητα της συνέντευξης σε κινητά τηλέφωνα.

Η άνοδος των smartphone

Αυτές τις μέρες, είναι συνηθισμένο να βλέπουμε άτομα κολλημένα στα smartphone τους. Τι κάνουν λοιπόν οι ερευνητές της έρευνας για να επωφεληθούν από αυτήν την ισχυρή τεχνολογία;

Η πρόκληση:Τα smartphone προσφέρουν πολλούς τρόπους για να προσκαλέσετε ή να υπενθυμίσετε στα άτομα να συμμετάσχουν σε μια έρευνα, καθώς και έναν τρόπο συλλογής πραγματικών απαντήσεων στην έρευνα. Ωστόσο, δεν διαθέτουν όλοι smartphone (μόνο το 68% των ενηλίκων των ΗΠΑ), πράγμα που σημαίνει ότι πρέπει να χρησιμοποιούνται σε συνδυασμό με άλλες μεθόδους επικοινωνίας και συλλογής δεδομένων για να διασφαλιστεί ότι όλοι μπορούν να συμμετάσχουν σε μια έρευνα. Και ακόμη και όταν μπορούν να χρησιμοποιηθούν δεν είναι χωρίς περιορισμούς. Υπάρχουν εμπόδια όπως μικρές οθόνες και τεχνικές δυσκολίες.

Η έρευνα:Έχουν διεξαχθεί πολλές μελέτες που εξετάζουν τις βέλτιστες πρακτικές για τη χρήση smartphone για έρευνα έρευνας. Ορισμένα επικεντρώνονται στον τρόπο σχεδιασμού των ερευνών ιστού που θα ολοκληρωθούν σε μια κινητή συσκευή, κάτι που είναι σημαντικό δεδομένου ότι το 43% των επιτροπών ιστού στο American Trends Panel ολοκληρώνουν τις έρευνές τους σε ένα smartphone. Το Pew Research Center δημοσίευσε μια σύνοψη ορισμένων από αυτά τα τελευταία χρόνια που αναφέρονται συγκεκριμένα σε ορισμένους από τους περιορισμούς των κινητών συσκευών και πώς να τα ξεπεράσουμε.


Το Κέντρο έχει επίσης πειραματιστεί ότι οι ερωτηθέντες χρησιμοποιούν μια εφαρμογή smartphone για να ολοκληρώσουν μια διαδικτυακή έρευνα. Ήταν εδώ που οι τεχνικές δυσκολίες αποδείχθηκαν οι πιο προβληματικές, αλλά στο τέλος τα δεδομένα της εφαρμογής διατηρούσαν τα δικά τους σε σύγκριση με τα δεδομένα από μια έρευνα προγράμματος περιήγησης ιστού. Το Κέντρο δημοσίευσε επίσης μια έκθεση που εξετάζει ένα πείραμα που χρησιμοποιεί μηνύματα κειμένου για να στείλει προσκλήσεις και υπενθυμίσεις σε έρευνες. Ακαδημαϊκοί ερευνητές έχουν επίσης πειραματιστεί με μηνύματα κειμένου ως μέθοδος επικοινωνίας για έρευνες (δείτε ένα από αυτά τα δύο κομμάτια για παράδειγμα). Μια άλλη ομάδα εξέτασε τη χρήση μηνυμάτων κειμένου για σκοπούς συλλογής δεδομένων, ενώ ακόμη άλλες συνέκριναν το αποτέλεσμα της χρήσης μηνυμάτων κειμένου για επαφή σε σχέση με τη χρήση τους για συλλογή δεδομένων. Η έρευνα σε αυτόν τον τομέα συνεχίζει να εξελίσσεται, αλλά είναι σαφές ότι η ισχύς του smartphone έχει τη δυνατότητα να αξιοποιηθεί προς όφελος της έρευνας έρευνας.

Εξακολουθείτε να έχετε τον ίδιο αριθμό κινητού τηλεφώνου που κάνατε το 2006;

Μία από τις σημαντικότερες διαφορές μεταξύ κινητών τηλεφώνων και σταθερών γραμμών είναι ότι όταν μετακινούνται οι άνθρωποι, μπορούν να πάρουν μαζί τους τους αριθμούς κινητών τηλεφώνων. Με πολλούς τρόπους, αυτή είναι μια ευκολία. Αλλά μπορεί να είναι ένας τεράστιος πονοκέφαλος για τους δημοσκόπους που προσπαθούν να ερευνήσουν σε πολιτεία ή τοπικό επίπεδο.

Η πρόκληση:Οι ερευνητές τηλεφώνων που χρησιμοποιούν τυχαία ψηφία κλήσης (RDD) αντλούν συνήθως ένα δείγμα αριθμών τηλεφώνου από τη γεωγραφική περιοχή που εξετάζεται. Για παράδειγμα, εάν ψηφίζουν στο Οχάιο, αντλούν τυχαία δείγματα σταθερών γραμμών του Οχάιο και αριθμών κινητών τηλεφώνων του Οχάιο. Εάν οι άνθρωποι που ζουν εκεί έχουν αριθμό κινητού τηλεφώνου από διαφορετική πολιτεία, δεν θα συμπεριληφθούν σε αυτό το δείγμα. Ομοίως, άτομα με αριθμούς που σχετίζονται με το Οχάιο αλλά ζουν αλλούθανα κληθεί, οδηγώντας σε σπατάλη προσπάθεια εκ μέρους της δημοσκόπησης. Η εξαίρεση μιας ομάδας ατόμων, όπως εκείνων που έφτασαν πρόσφατα σε μια πολιτεία, ειδικά ενός ατόμου που έχει αποδειχθεί ότι είναι δημογραφικά διακριτός, έχει τη δυνατότητα να προκαλέσει προκαταλήψεις εκτιμήσεων της έρευνας.

Πόσο μεγάλο πρόβλημα είναι οι αριθμοί κινητών τηλεφώνων εκτός περιοχής για δημοσκόπηση; Η απάντηση εξαρτάται εξ ολοκλήρου από το γεωγραφικό πληθυσμό που προσπαθούν να στοχεύσουν. Για τις εθνικές δημοσκοπήσεις, δεν είναι πρόβλημα. Με κλήση σε εθνικό επίπεδο, οι δημοσκόπηση φτάνουν έναν πληθυσμό-στόχο των ΗΠΑ ενήλικες ανεξάρτητα από τυχόν αναντιστοιχία μεταξύ πόλεων και πολιτειών. Αν θέλουν τότε να αναφέρουν τα ευρήματα της έρευνας βάσει γεωγραφίας, οι ερευνητές μπορούν να χρησιμοποιούν την αυτοαναφερόμενη τοποθεσία των ερωτηθέντων και όχι την τοποθεσία που σχετίζεται με το κινητό τους. Ωστόσο, για τους δημοσκοπήτριες που πραγματοποιούν έρευνες σε πολιτειακό ή τοπικό επίπεδο, ειδικά σε περιοχές όπου το ποσοστό αναντιστοιχίας είναι υψηλό, οι αριθμοί κινητών τηλεφώνων εκτός περιοχής αποτελούν σοβαρή ανησυχία. Αυτό συμβαίνει επειδή η αυτοαναφερόμενη τοποθεσία δεν είναι διαθέσιμη κατά την επιλογή του δείγματος αριθμών προς κλήση.

Η έρευνα:Μια νέα μελέτη του Pew Research Center αναφέρει ότι το 10% των ενηλίκων των ΗΠΑ έχουν αριθμό κινητού τηλεφώνου που δεν ταιριάζει με την κατάσταση στην οποία ζουν πραγματικά. Για τους αστικούς κατοίκους, περίπου το 41% ​​έχει έναν αριθμό που δεν ταιριάζει με τοπόληεκεί όπου μένουν. Η τάση είναι πιο έντονη στην Ουάσινγκτον, όπου το 55% των κατοίκων με κινητό τηλέφωνο έχουν αριθμό εκτός της περιοχής. Σε ορισμένα μέρη της χώρας, αντιθέτως, αυτό είναι σχεδόν μη εκδοθέν. Στο Μίτσιγκαν, για παράδειγμα, μόλις το 5% των ενηλίκων με κινητά τηλέφωνα έχουν αριθμό εκτός κράτους. Ενώ ορισμένες τεχνικές λύσεις βρίσκονται σε εξέλιξη, προς το παρόν δεν υπάρχει σίγουρος τρόπος για να συλλάβετε άτομα με αριθμούς εκτός πολιτείας ή εκτός περιοχής σε υποεθνικές τηλεφωνικές δημοσκοπήσεις ενηλίκων.

Μερικοί ασκούμενοι, ειδικά οι κομματικοί δημοσκοπήτριες, παρακάμπτουν αυτό το πρόβλημα με δειγματοληψία από ένα αρχείο ψηφοφόρων αντί να χρησιμοποιούν RDD. Τα αρχεία ψηφοφόρων περιέχουν οποιονδήποτε αριθμό τηλεφώνου που αναγράφουν τα άτομα κατά την εγγραφή τους για ψήφο. Σε ορισμένες περιπτώσεις, αυτός είναι ένας αριθμός κινητού τηλεφώνου που κρατούσαν τα άτομα κατά τη διάρκεια μιας μετακίνησης. Οι ασκούμενοι που κολλάνε με το RDD, αντιθέτως, συνήθως απλώς αγνοούν το πρόβλημα και ελπίζουν ότι δεν θα οδηγήσει σε προκατάληψη ή θα συμπληρώσουν την έρευνά τους με αριθμούς κινητών τηλεφώνων που είναι γνωστό ότι έχουν διεύθυνση χρέωσης στην πολιτεία ή την πόλη.

Εκλογικές δημοσκοπήσεις

Σε μια εκλογική χρονιά, είναι αδύνατο να αγνοήσουμε το πιο εξέχον μέλος της οικογένειας των εκλογών: «ιπποδρομία», που ονομάζεται έτσι επειδή η κύρια χρήση του είναι να καθορίσει ποιος υποψήφιος είναι μπροστά σε μια συγκεκριμένη κούρσα σε μια συγκεκριμένη χρονική στιγμή. Όπως ήταν αλήθεια σε προηγούμενους κύκλους, η ψηφοφορία χρησιμοποιήθηκε φέτος για να προσδιοριστεί ποιοι υποψήφιοι θα εμφανίζονταν στη σκηνή στις συζητήσεις, καθώς και για να προβλέψουν το αποτέλεσμα των προκριματικών του κρατικού κόμματος και φυσικά να προβλέψουν το τελικό βραβείο, τις γενικές εκλογές. Η ιπποδρομία είναι επιρρεπής στα περισσότερα από τα ζητήματα που περιγράφονται σε αυτήν την έκθεση, αλλά έχει επίσης μια πρόσθετη πρόκληση που είναι μοναδική για το σκοπό της: το κυνήγι για τον αόριστο «πιθανό ψηφοφόρο».

Η πρόκληση:Αυτό που ακούγεται προφανές είναι στην πραγματικότητα διαβόητα δύσκολο. Για να μάθετε ποιος υποψήφιος θα κερδίσει, πρέπει να μιλήσετε μόνο στους εγγεγραμμένους ψηφοφόρους που θα πάρουν πραγματικά το χρόνο να ψηφίσουν. Και με τη συμμετοχή στις γενικές εκλογές να κυμαίνεται περίπου το 60% του ενήλικου πληθυσμού, αυτό σημαίνει ότι πρέπει να διαλέξετε πολλούς ανθρώπους. Προσθέστε σε αυτό το γεγονός ότι το να παραδεχτείτε ότι δεν σκοπεύουν να ψηφίσουν κάνει μερικούς ερωτηθέντες να αισθάνονται αρκετά άσχημα που επιδίδονται σε μια μικρή ευσεβής απάντηση και έχετε ένα πραγματικό πρόβλημα. Η πρόκληση της πρόβλεψης του αριθμού των ατόμων που θα ψηφίσουν και των ατόμων που θα προσθέσει ένα επιπλέον επίπεδο πιθανών σφαλμάτων στις εκλογικές εκλογές.

Η έρευνα:Για την επίλυση αυτού του προβλήματος, οι ερευνητές έχουν αναπτύξει μια σειρά από πιθανά «μοντέλα πιθανών ψηφοφόρων» που μπορούν να υποβάλουν αίτηση στην έρευνά τους για να προσπαθήσουν να εντοπίσουν εκείνους τους ανθρώπους που πραγματικά θα εμφανιστούν την Ημέρα των Εκλογών. Αυτά τα μοντέλα μπορεί, για παράδειγμα, να ρωτήσουν τους ερωτηθέντες πόσο σκέφτηκαν για τις εκλογές, αν ψηφίζουν τακτικά και αν γνωρίζουν πού πηγαίνουν οι άνθρωποι στην περιοχή τους για να ψηφίσουν.

Μια ενδιαφέρουσα ανατροπή είναι ότι η σύγχρονη εποχή πρόσβασης σε πραγματικά «αρχεία ψηφοφόρων» - λίστες που καταρτίζονται από κράτη και συγκεντρώνονται από εμπορικούς πωλητές που δηλώνουν ποια άτομα πραγματικά ψήφισαν σε ποιες εκλογές - σημαίνει ότι οι ερευνητές δεν χρειάζεται πλέον να βασίζονται αποκλειστικά στη δική σας λέξη αν θα ψηφίσετε. Μπορούν επίσης να ελέγξουν τη συμπεριφορά του παρελθόντος. Πρόσφατη έρευνα από το Pew Research Center διαπιστώνει ότι τα μοντέλα που περιλαμβάνουν πληροφορίες σχετικά με την προηγούμενη συμπεριφορά των ψηφοφόρων ξεπερνούν τα άλλα.

Άλλοι ερευνητές έχουν έρθει στο πρόβλημα από διαφορετική οπτική γωνία. Αντί να προσπαθούν να τελειοποιήσουν ένα πιθανό μοντέλο ψηφοφόρων, εστιάζουν αντ 'αυτού στο πεδίο μεγάλων δειγμάτων και σταθμίζουν τα σε πολύ λεπτομερή μοντέλα του εκλογικού σώματος. Συγκεκριμένα, ορισμένοι ερευνητές είχαν επιτυχία χρησιμοποιώντας προηγμένες στατιστικές τεχνικές, οι οποίες έχουν πιασάρικα ακρωνύμια όπως MrP (πολυεπίπεδη παλινδρόμηση και μετα-στρωματοποίηση) και BART (δέντρα παλινδρόμησης πρόσθετων Bayesian). Αυτές οι τεχνικές μπορούν να χρησιμοποιηθούν για την αξιοποίηση πληροφοριών σχετικά με το προφίλ των ψηφοφόρων στις προηγούμενες εκλογές για την προσαρμογή των δεδομένων των ψηφοφοριών για τις προσεχείς εκλογές.

Οι ερευνητές που εφαρμόζουν αυτές τις μεθόδους ενδιαφέρονται λιγότερο για την αποστολή ενός εθνικά αντιπροσωπευτικού δείγματος και περισσότερο ενδιαφέρονται για την παραγωγή πολύ μοντέλων εκτιμήσεων που αντικατοπτρίζουν όλες τις διαθέσιμες πληροφορίες σχετικά με το εκλογικό σώμα. Παραδέχονται ότι τα δείγματά τους μπορεί να είναι τρομερά προκατειλημμένα, αλλά υποστηρίζουν ότι αυτό μπορεί να ξεπεραστεί μέσω της στατιστικής μοντελοποίησης. Οι καταναλωτές που ενδιαφέρονται για την αιχμή της ψηφοφορίας θα ήταν καλό να παρακολουθήσουν εταιρείες που δοκιμάζουν αυτούς τους τύπους προσεγγίσεων.

Ποσοστά απόκρισης

Τα ποσοστά απόκρισης μετρούν το πόσο καλά κάνουν οι δημοσκόποι να προσεγγίσουν τους ανθρώπους που σκοπεύουν να προσεγγίσουν. Αντικατοπτρίζουν γενικά δύο διαφορετικά αλλά σχετικά φαινόμενα: τον βαθμό στον οποίο οι ερευνητές μπορούν να επικοινωνήσουν με τον ερωτηθέντα του δείγματος και τον βαθμό στον οποίο μπορούν να πείσουν τον ερωτώμενο να κάνει τη συνέντευξη.

Η πρόκληση:Τα ποσοστά απόκρισης, που κάποτε θεωρούνταν ως πρωταρχικός δείκτης της ποιότητας μιας έρευνας, μειώθηκαν για δεκαετίες. Είναι μονοψήφια για πολλές δημόσιες δημοσκοπήσεις που διεξάγονται από μη κερδοσκοπικούς ή εμπορικούς οργανισμούς. Αν και αυτό σίγουρα δεν φαίνεται καλό, η απάντηση είναι μόνο πρόβλημα για τα αποτελέσματα της δημοσκόπησης, εάν οι άνθρωποι που δεν μιλούν με δημοσκοπήσεις είναι σαφώς διαφορετικοί από τους ανθρώπους που το κάνουν. Το Pew Research Center πραγματοποίησε την πρώτη του σημαντική μελέτη σχετικά με τον αντίκτυπο της έρευνας που δεν ανταποκρίθηκε το 1997, όταν το ποσοστό τηλεφωνικής απόκρισης του Κέντρου ήταν 36%. Όταν ενημερώσαμε τη μελέτη το 2012, το μέσο ποσοστό απόκρισης ήταν μόλις 9%.

Η έρευνα:Τα μειωμένα ποσοστά ανταπόκρισης υπήρξαν σταθεροί για τους δημοσκόπους, οι οποίοι παρακολουθούν την άμπωσή τους σαν γεράκια. Ενώ λίγοι θα ισχυρίστηκαν ότι τα μονοψήφια ποσοστά είναι κάτι που μπορεί να καυχηθεί, η μέχρι τώρα έρευνα - συμπεριλαμβανομένου του 15ετούς κομματιού που καταρτίστηκε από τον David Dutwin του SSRS παρακάτω - δεν έχει δείξει ότι η μείωση των ποσοστών απόκρισης οδηγεί σε αύξηση των ποσοστών σφάλματος. Από την άλλη πλευρά, ένας από τους λίγους τύπους προκατάληψης που δεν έχουν απόκριση που έχει παρατηρηθεί με συνέπεια από τους ερευνητές είναι το γεγονός ότι όσοι συμμετέχουν σε έρευνες είναι επίσης πιο πιθανό να συμμετάσχουν σε αστικές δραστηριότητες - είναι πιο πιθανό να είναι 'συμμετέχοντες', άλλα λόγια. Οι δικοί μας Scott Keeter και Drew DeSilver έχουν ολοκληρώσει τις προκλήσεις της ψηφοφορίας όταν λιγότερα άτομα είναι διαθέσιμα για δημοσκόπηση, που καλύπτει αυτό το ζήτημα και άλλα.

Διαδικτυακές δημοσκοπήσεις

Οι διαδικτυακές έρευνες έχουν γίνει βασικό στοιχείο του τοπίου της έρευνας. Ενεργοποιημένοι από την άνοδο και την εμβέλεια του Διαδικτύου, επιτρέπουν στους ερευνητές να προσλαμβάνουν μεγάλο αριθμό Αμερικανών σε μια έρευνα γρήγορα και με χαμηλό κόστος.

Ενώ ορισμένες δημοσκοπήσεις προσλαμβάνονται εκτός σύνδεσης και βασίζονται σε δείγματα πιθανότητας (δείτε το πάνελ American Trends), το μερίδιο του λιονταριού - και το επίκεντρο αυτής της ενότητας - είναι δημοσκοπήσεις μη πιθανότητας. Πρόκειται για δημοσκοπήσεις για τις οποίες οι ερωτηθέντες δεν επιλέγονται τυχαία, με γνωστή πιθανότητα επιλογής, από γνωστό πληθυσμό. Αντίθετα, αυτά είναι κυρίως δείγματα ευκολίας, με άτομα που προσλαμβάνονται μέσω τεχνικών όπως διαδικτυακές διαφημίσεις banner. Ορισμένες από αυτές τις διαδικτυακές δημοσκοπήσεις γίνονται με ομάδες - ομάδες ατόμων που έχουν συμφωνήσει να απαντήσουν σε μια συνεχιζόμενη σειρά ερευνών από την ίδια εταιρεία ή οργανισμό, ενώ άλλες είναι εφάπαξ δημοσκοπήσεις που διεξήχθησαν με άτομα που παρεμποδίστηκαν κατά τη διάρκεια κάποιας άλλης διαδικτυακής δραστηριότητας όπως προσπάθεια πρόσβασης σε έναν ιστότοπο, έλεγχος λογαριασμού κοινωνικών μέσων ή χρήση μηχανής αναζήτησης.

Η πρόκληση:Οι περισσότερες διαδικτυακές δημοσκοπήσεις δεν ξεκινούν με τυχαίο δείγμα, επομένως οι ερευνητές πρέπει να βασίζονται σε μεγάλο βαθμό στις δημογραφικές ποσοστώσεις, σταθμίσεις ή άλλες τεχνικές μοντελοποίησης για να παράγουν τις εκτιμήσεις τους. Σε γενικές γραμμές, αυτό απαιτεί από την δημοσκόπηση να προσαρμοστεί για όλους τους σχετικούς τρόπους με τους οποίους το διαδικτυακό δείγμα τους είναι διαφορετικό από τον πληθυσμό των ΗΠΑ.

Φυσικά, ακόμη και οι καλοσχεδιασμένες τηλεφωνικές δημοσκοπήσεις RDD απαιτούν στάθμιση. Μέχρι σήμερα, ωστόσο, οι περισσότερες έρευνες έχουν δείξει ότι οι δημοσκοπήσεις τείνουν να έχουν περισσότερα σφάλματα από τις δημοσκοπήσεις RDD και, συνεπώς, απαιτούν περισσότερη μοντελοποίηση.

Η έρευνα:Το 2016, οι διαδικτυακές έρευνες μη πιθανότητας παίζουν σημαντικό ρόλο στο σύμπαν της έρευνας και εδώ στο Κέντρο είμαστε πρόθυμοι να κατανοήσουμε καλύτερα τα πλεονεκτήματα και τις αδυναμίες τους. Μια πρόσφατη μελέτη της ομάδας μεθόδων μας εξέτασε εννέα διαδικτυακές έρευνες που διεξήχθησαν από οκτώ διαφορετικούς προμηθευτές και διαπίστωσε ότι τα αποτελέσματά τους διέφεραν σε μεγάλο βαθμό. Τα αποτελέσματα από τον κορυφαίο ερμηνευτή φαίνονται σχετικά καλά σε σύγκριση με τις υψηλής ποιότητας έρευνες συγκριτικής αξιολόγησης που χρηματοδοτούνται από την κυβέρνηση. Άλλοι έπαιξαν λιγότερο καλά. Ένα βασικό εύρημα ήταν ότι πρέπει να δίδεται ιδιαίτερη προσοχή κατά τη χρήση διαδικτυακών δημοσκοπήσεων για την εξέταση δεδομένων μεταξύ βασικών φυλετικών και εθνοτικών ομάδων, καθώς οι εκτιμήσεις για τους μαύρους και τους Ισπανόφωνους με βάση τις διαδικτυακές πηγές που δοκιμάστηκαν ήταν ιδιαίτερα ανακριβείς.

Όσον αφορά την τρέχουσα προσέγγιση του Κέντρου, ο διευθυντής της έρευνας ερευνών πρόσφατα εξήγησε σε ένα διαδικτυακό ερωτηματολόγιο ότι «σχεδιάζουμε περισσότερη δουλειά σε αυτό το θέμα, αλλά προς το παρόν παραμένει πειραματικό. Χρησιμοποιούμε ακόμη την τυχαία κλήση τηλεφώνου ως τον κύριο σχεδιασμό μας, αν και χρησιμοποιούμε δείγματα μη πιθανότητας για δοκιμή ερωτηματολογίων και για ορισμένες εξειδικευμένες μελέτες ».

Η κορυφαία εμπορική ένωση ερευνητών, η American Association for Public Opinion Research (AAPOR), εξέδωσε επίσης μια εις βάθος έκθεση σχετικά με την έρευνα για μη πιθανότητες το 2013.

«Ετικέτες διατροφής» για δημοσκοπήσεις

Οι διαφορές στον τρόπο διεξαγωγής των δημοσκοπήσεων μπορεί να είναι τεράστιες. Ωστόσο, στον μέσο καταναλωτή ειδήσεων, τέτοιες διαφορές είναι σχεδόν πάντα αδιαφανείς. Οι δημοσκοπήσεις αντιμετωπίζονται ως εμπόρευμα. Σήμερα, οι παρατηρητές δημοσκοπήσεων μπορούν να χαθούν όσο οι αγοραστές παντοπωλείων προτού καταστεί υποχρεωτική η επισήμανση της διατροφής το 1990. Ορισμένοι δημοσκόπηση παρέχουν εκτενείς πληροφορίες στους ιστότοπούς τους σχετικά με τον τρόπο διεξαγωγής της εργασίας τους, αλλά πολλοί δεν το κάνουν.

Το πρόβλημα:Η τυπική αναφορά - το οποίο είναι συνήθως απλώς το μέγεθος δείγματος και το περιθώριο σφάλματος μιας δημοσκόπησης - καλύπτει σημαντικές διαφορές μεταξύ των δημοσκοπήσεων στον τρόπο συλλογής και στατιστικής προσαρμογής τους. Σε ορισμένες περιπτώσεις, οι διαφορές που αγνοούνται εξηγούν γιατί ορισμένες δημοσκοπήσεις είναι πιο ακριβείς από άλλες. Οι δημοσιογράφοι χρειάζονται κάποιο τρόπο διαφοροποίησης των δημοσκοπήσεων που είναι αξιόπιστες - ή τουλάχιστον ανοιχτές σχετικά με τη μεθοδολογία τους - από τις δημοσκοπήσεις που δεν είναι.

Η έρευνα:Εισαγάγετε την Πρωτοβουλία Διαφάνειας - τη μεγάλη ώθηση της κοινοβουλευτικής ψηφοφορίας για να ενθαρρύνετε τους ψηφοφόρους να είναι ανοιχτοί σχετικά με τον τρόπο διεξαγωγής των δημοσκοπήσεων. Αυτή η πρωτοβουλία, η οποία δεσμεύεται από οργανισμούς δημοσκόπησης να αποκαλύψει ορισμένες βασικές λεπτομέρειες σχετικά με τις μεθόδους τους, ξεκίνησε από την AAPOR το 2014 και έχει σήμερα περισσότερα από 75 μέλη, συμπεριλαμβανομένου του Pew Research Center.

Η πρωτοβουλία δεν κρίνει την ποιότητα ή την αυστηρότητα των μεθόδων που αποκαλύπτονται. Απλώς αναγνωρίζει την προθυμία των μελών να δημοσιοποιήσουν τις διαδικασίες τους. Καθώς οι παραγωγοί τροφίμων αναφέρουν πράγματα όπως θερμίδες και νάτριο, οι ρυπαίνοντες που ανήκουν στην Πρωτοβουλία Διαφάνειας απαιτείται να αναφέρουν τον τρόπο με τον οποίο επιλέχθηκε το δείγμα τους, το πλαίσιο από το οποίο σχεδιάστηκε αν υπήρχε και πληροφορίες σχετικά με τη ρύθμιση της στάθμισης, μεταξύ άλλων λεπτομερειών. Ανήκει στο Εθνικό Συμβούλιο Δημοσίων Δημοσκοπήσεων (NCPP) και η κατάθεση δεδομένων έρευνας στο Roper Center for Public Opinion Research είναι παρόμοια, αν και ίσως λιγότερο περίπλοκα, δείκτες ότι μια εκλογική εταιρεία δεσμεύεται να προωθήσει υψηλά πρότυπα στην ψηφοφορία.

Αλλά κάνει καλό; Για τους δημοσιογράφους δεδομένων και άλλους δημοσιογράφους που αναζητούν έναν τρόπο να γνωρίζουν εάν πρέπει να εμπιστευτούν μια δημοσκόπηση, η απάντηση είναι ναι. Σύμφωνα με το FiveThirtyEight's Nate Silver, «Η συμμετοχή στην πρωτοβουλία AAPOR Transparency Initiative, το NCPP ή το αρχείο Roper Center εξακολουθεί να αποτελεί ισχυρή πρόβλεψη της ακρίβειας των ψηφοφοριών». Για τους παρατηρητές δημοσκοπήσεων που θέλουν να μάθουν τι πήγαν σε αυτήν τη δημοσκόπηση που μόλις κατανάλωσαν, είναι ένα βήμα προς τη σωστή κατεύθυνση.

Η έρευνα της έρευνας συναντά μεγάλα δεδομένα

Υπάρχουν τώρα περισσότεροι τρόποι από ποτέ για να μάθουμε τι σκέφτονται, εκτιμούν και κάνουν οι μεγάλοι αριθμοί Αμερικανών. Αυτό οφείλεται στο γεγονός ότι η ψηφιακή επανάσταση κατέστησε δυνατό να δούμε τι κάνουν μέσω της παρακολούθησης της διαδικτυακής συμπεριφοράς. διαβάστε τη γνώμη τους στο Facebook, το Twitter και τα ιστολόγια. και καθορίστε τι εκτιμούν από πού περνούν το χρόνο τους στο διαδίκτυο και τι αγοράζουν.

Η πρόκληση:Αυτό το είδος «μεγάλων δεδομένων» βρίσκεται συχνά σε εμπορικά ή ιδιωτικά χέρια, δεν είναι διαθέσιμο για τους ερευνητές. Δημιουργήθηκε συχνά για σκοπούς διαφορετικούς από την έρευνα και, επομένως, δεν έχει σχεδιαστεί για να απαντά στις ερωτήσεις που θέλουν να υποβάλουν οι μελετητές. Και τις περισσότερες φορές δεν είναι πλήρως αντιπροσωπευτικός των πληθυσμών που ενδιαφέρουν. (Για παράδειγμα: δεν είναι όλοι στο Twitter.)

Σύμφωνα με τον Robert Groves, πρώην διευθυντή του Γραφείου Απογραφής και μέλος του διοικητικού συμβουλίου του Πανεπιστημίου Georgetown και μέλος του διοικητικού συμβουλίου του Pew Research Center, οι ερευνητές της έρευνας εργάζονται για 10 χρόνια σκληρής δουλειάς καθώς προσπαθούν να αντιμετωπίσουν την πρόκληση να φέρουν αυτά τα μεγάλα δεδομένα στο πεδίο της κοινής γνώμης. Στο ιστολόγιό του, ο Groves σημειώνει: «Οι μέρες που μια μοναδική πηγή δεδομένων αξίζει την πλήρη εμπιστοσύνη μας περιορίζονται σε πολλές κοινωνικές και οικονομικές μετρήσεις. Το μέλλον θα κερδηθεί από εκείνους που είναι βαθιά προσαρμοσμένοι στις ιδιότητες σφάλματος των δεδομένων που αναμιγνύονται ».

Η έρευνα:Η AAPOR εκπόνησε πρόσφατα μια ολοκληρωμένη έκθεση για το πώς οι ερευνητές της έρευνας προσπαθούν να κάνουν χρήση μεγάλων δεδομένων. Το Pew Research Center ξεκίνησε τα Data Labs το φθινόπωρο του 2015 για να αρχίσει να πειραματίζεται με νέες πηγές δεδομένων και νέες τεχνικές ανάλυσης, όπως μηχανική εκμάθηση, επεξεργασία φυσικής γλώσσας και απόξεση ιστού, προκειμένου να συμπληρωθούν οι πιο παραδοσιακές γραμμές εργασίας μας στην έρευνα και τη δημογραφική έρευνα. Παρακολουθήστε αυτόν τον χώρο για αποτελέσματα τους επόμενους μήνες.