Buscar lo que usted está midiendo fabricará su resultado
Por Plain Reckoner · 474 palabras · sobre 2 min · Actualizado
Si construyes tu lista de negocios buscando "X tasas mensuales", usted los ha elegido BECAUSE que publican tarifas, y su respuesta está cerca de cerca de cerca antes de comenzar. Dibujo la misma muestra de OpenStreetMap — un mapa que no sabe nada de precios — dio 66.7%.
- Cómo se midió
- Construimos la lista de OpenStreetMap, filtrada sólo en el negocio que tiene un sitio web en absoluto, luego trajimos cada negocio's propio sitio directamente. Nunca usamos un sitio de comparación o un directorio.
- Última comprobación.
Escucha esto. Jugar leído en esta página, nada añadido
Cuidado con la trama 28s · narrado · las mismas figuras que arriba
Necesitamos saber qué parte de una especie de pequeña empresa publica sus precios en línea. El método obvio es buscar los precios y ver lo que regresa.
Ese método no puede producir una respuesta. Búsqueda "Precios mensuales del parque de Arizona RV" devuelve parques porque... publican tarifas. La lista que estás midiendo ha sido elegida por lo mismo que estás tratando de medir, y la respuesta saldrá cerca 100% sea cual sea la verdad.
La lista de cosas que sacas de tu muestra tiene un nombre, se llama marco de muestreo - y esta es la manera más a menudo va mal.
Dibujo una lista que no puede conocer la respuesta
En cambio, utilizamos OpenStreetMap, el mapa público que cualquiera puede editar. Le pedimos campings que tenían un sitio web grabado, en tres rectángulos del mapa, en los propios términos del mapa, tourism=caravan_site portar un website tag, más de tres cajas. El mapa no sabe nada de precios, que es exactamente la propiedad que hace que sea una lista justa de sacar de - estar en ella depende de que alguien que haya mapeado el negocio, no de lo que el negocio publica.
Luego, el propio sitio web de cada empresa fue recogido directamente.
Resultado: 28 of of 42 marcado, 66.7%. Contando cada sitio que no podíamos alcanzar como un fracaso todavía da 54.9%. Se aclara la mitad de cualquier manera, y eso es lo que lo hace usable - el veredicto no depende de cómo tratar a los que nos bloquean.
El número que importaba era el segundo
De las empresas que publican cualquiera precio, 96.6% publicado el mensualDe los catorce no publicados precio mensual, trece no publicaron nada en absoluto.
Ese es un hallazgo diferente del titular, y uno más útil: no hay un grupo significativo que publique algunos precios y esconda este. Las empresas publican una lista de precios o no lo hacen.
Donde más esto pica.
Cualquier pregunta de la forma "qué parte de X hacer Y" está expuesto, y el fracaso no aparece en el resultado. Parece que los datos. Tiene un tamaño de muestra y un porcentaje y un margen de error, y no significa nada.
La noticia es simple: Pregunte qué decidió si algo entró en su muestra. Si la respuesta implica lo que estás midiendo, comienza de nuevo.
Una limitación honesta. Más tarde encontramos una medida más grande de la misma pregunta por una ruta diferente — los propios listados de directorios de una asociación comercial — dando 42.8% desde 278 de ellos. Mide algo ligeramente diferente, ya que esos listados están llenos por los propios negocios en lugar de leer sus sitios, por lo que no revoca nuestro. Pero señala de la misma manera que nuestro recuento más duro de 54.9%, y la lectura honesta es que 66.7% es el final optimista de un 43-67% Banda.
Rastreado como SAMPLING-FRAME-BIAS, RV-HIT-RATE. Si un número aquí se ve mal, Dinos y lo revisaremos contra la fuente.