Mala investigación: una comparación de las velocidades de lectura de iPad, Kindle y libros

Nos encanta un estudio de usabilidad tanto como la siguiente persona. Pero nos encantan los estudios elegantes y bien diseñados que señalan con razón sus propias limitaciones y que se imprimen en revistas revisadas por pares, sobre todo. Tenemos menos amor por los estudios que actúan como propaganda o por los investigadores que extraen conclusiones que no están respaldadas por sus propios datos.

Se pueden encontrar malas investigaciones en cualquier lugar, incluso por consultores que se ganan la vida investigando sobre usabilidad. Gente bien intencionada como Jakob Nielsen por ejemplo. Recientemente publicó un estudio en su sitio web sobre la usabilidad del Kindle, el iPad, una PC y un libro para leer una obra de ficción corta.

Después de notar que no hubo diferencia estadística entre leer en el Kindle o iPad, y luego señalar que los datos no alcanzaron significación estadística para el iPad versus un libro, los autores de este informe aún declaran que "Libros más rápidos que tabletas".

Bueno, sí, eso es cierto a primera vista. Pero el objetivo de la investigación y el análisis estadístico en primer lugar es ir más allá de lo que parece para ser verdad y ver si la diferencia es significativa o no.Después de todo, los datos pueden parecer que significan algo, pero si las estadísticas no los respaldan, la apariencia de significado es solo una ilusión. Uno que no se debe enfatizar en los subtítulos, ya que es engañoso.

De hecho, los datos de este estudio en particular encontraron que solo leer en el Kindle era estadísticamente diferente a leer un libro. Pero esa es una conclusión mucho menos atractiva que la más amplia, "Libros más rápidos que tabletas".

En este estudio no se ofrecieron explicaciones alternativas para los resultados, una omisión evidente. La explicación alternativa más obvia para los resultados encontrados es simplemente que la gente tiene una gran familiaridad y experiencia con la lectura de la palabra impresa en un libro, ¡muchas veces el valor de décadas! Por otro lado, el tiempo y la experiencia dedicados a leer desde un dispositivo más nuevo, ya sea un Kindle, un iPad o incluso una PC, ha sido extremadamente limitado. En cualquier caso, la gente no lleva décadas leyendo libros desde uno de estos dispositivos. Entonces, podría ser simplemente una cuestión de familiaridad: los libros son formas fáciles y familiares de ingerir material de lectura. El Kindle y el iPad no lo están (todavía).

Esta explicación alternativa también explica la diferencia entre los resultados de los datos del Kindle y el iPad (el Kindle fue estadísticamente significativamente más lento que un libro, mientras que el iPad no). El iPad utiliza una pantalla con la que la mayoría de la gente ya está familiarizada, y la experiencia de uso de Apple en este tipo de dispositivos portátiles es bien reconocida. El Kindle, por otro lado, utiliza una tecnología de pantalla que pocas personas han encontrado. Y aunque es mucho más útil en situaciones cotidianas (como leer al aire libre o no preocuparse por tener que recargarlo todos los días), el Kindle es simplemente un dispositivo menos familiar que utiliza tecnología desconocida.

Las limitaciones del estudio incluyen su diseño y grupo de temas. Si bien 24 sujetos pueden darnos suficiente poder para el análisis estadístico, los estilos de lectura de las personas son lo suficientemente diferentes como para que un experimento más grande nos dé resultados más sólidos y concluyentes. Pedirle a una persona que lea la misma historia de 17 minutos cuatro veces seguidas también parece menos que ideal. Si bien el orden de los dispositivos en los que leyeron fue aleatorio, no puedo evitar pensar en lo aburrido y monótono que sería leer la misma historia una y otra vez, 4 veces seguidas.

Ofrecer diferentes tipos de material de lectura, tanto de ficción como de no ficción, también descartaría cualquier posible efecto de que el tipo de contenido que se utiliza como medida no afecte inadvertidamente la velocidad de lectura. Hemingway, el autor utilizado en la investigación actual, es un gran autor, pero no diría que sea del agrado o gusto de todos. El material de lectura que le interesa poco también puede afectar los tiempos de lectura.

Lo que este estudio demostró fue que los diferentes dispositivos de computación de mesa para leer una obra de ficción corta no impactan significativamente los tiempos de lectura para aquellos que no están familiarizados específicamente con los dispositivos (excepto en el Kindle, donde el tiempo de lectura fue significativamente más lento). No es sorprendente que el iPad, el Kindle y el libro tuvieran puntajes similares de satisfacción del usuario, lo que demuestra que los dispositivos no tienen problemas de usabilidad significativos que resten valor a la satisfacción del usuario final al usarlos.

!-- GDPR -->