La recherche de la chose que vous mesurez produira votre résultat
Par Plain Reckoner · 474 mots · à propos 2 min · Mise à jour
Si vous construisez votre liste d'entreprises en cherchant "X taux mensuels", vous les avez choisis BECAUSE ils publient des tarifs , et votre réponse est presque certain avant de commencer . Dessiner le même échantillon de OpenStreetMap , une carte qui ne sait rien sur les prix , a donné 66.7%.
- Comment elle a été mesurée
- Nous avons construit la liste à partir d'OpenStreetMap, filtré seulement sur l'entreprise ayant un site Web du tout, puis récupéré chaque entreprise'Nous n'avons jamais utilisé de site de comparaison ou de répertoire.
- Dernière vérification
Écoute ça. Jouer lire à partir de cette page, rien ajouté
Regardez-le. 28s · narré · les mêmes chiffres que ci-dessus
Nous avions besoin de savoir quelle part d'une sorte de petite entreprise publie ses prix en ligne. La méthode évidente est de rechercher les prix et de voir ce qui revient.
Cette méthode ne peut pas donner de réponse. Recherche "Arizona RV park tarifs mensuels" retour des parcs parce que La liste que vous mesurez a été choisie par la même chose que vous essayez de mesurer, et la réponse sera proche 100% Quelle que soit la vérité.
La liste de choses que vous tirez de votre échantillon a un nom — il s'appelle le Base de prélèvement — et c'est la façon dont il se passe le plus souvent mal.
Dessiner une liste qui ne peut pas connaître la réponse
Nous avons plutôt utilisé OpenStreetMap, la carte publique que tout le monde peut éditer. Nous lui avons demandé pour les campings qui avaient un site Web enregistré, sur trois rectangles de la carte — dans les termes propres de la carte, tourism=caravan_site transportant une website tag, sur trois cases. La carte ne connaît rien aux prix, qui est exactement la propriété qui en fait une liste équitable de tirer de — être dans elle dépend de quelqu'un qui a cartographié l'entreprise, pas de ce que l'entreprise publie.
Ensuite, chaque site Web de chaque entreprise a été récupéré directement.
Résultat : 28 des 42 marqué, 66.7%. Compter chaque site que nous n'avons pas pu atteindre comme un échec donne encore 54.9%. - Il est clair à moitié, et c'est ce qui le rend utilisable — le verdict ne dépend pas de la façon dont vous traitez ceux qui nous ont bloqués.
Le nombre qui comptait était le deuxième.
Des entreprises de l'édition n'importe lequel prix, 96.6% publié le mensuel. Sur les quatorze éditions sans prix mensuel, treize n'ont rien publié.
Il s'agit d'une conclusion différente de celle du titre, et plus utile : il n'y a pas de groupe significatif qui publie certains prix et cache celui-ci. Les entreprises affichent une liste de prix ou elles ne le font pas.
Où d'autre ces morsures
Toute question concernant le formulaire "quelle part de X faire Y" est exposé, et l'échec ne se manifeste pas dans le résultat. Il ressemble à des données. Il a une taille d'échantillon et un pourcentage et une marge d'erreur, et cela ne signifie rien.
Le conseil est simple : demander ce qui a décidé si quelque chose est entré dans votre échantillon. Si la réponse implique la chose que vous mesurez, recommencez.
Nous avons plus tard trouvé une mesure plus importante de la même question par un itinéraire différent — les listes d'annuaires d'une association professionnelle — 42.8% de 278 Il mesure quelque chose de légèrement différent, puisque ces listes sont remplies par les entreprises elles-mêmes plutôt que de lire leurs sites, de sorte qu'il ne renverse pas les nôtres. 54.9%, et la lecture honnête est que 66.7% est la fin optimiste d'une 43-67% groupe.
Suivi comme SAMPLING-FRAME-BIAS, RV-HIT-RATE. Si un nombre ici semble faux, Dites-nous et nous allons vérifier la source.