OKCupid: Manipulemos las coincidencias en nombre de la "investigación"

Imaginemos que, una vez, se inscribió en un servicio de citas en línea que pensó que le brindaría las mejores coincidencias posibles según la información que le proporcionó.

Imaginemos también que el tipo que dirigía el sitio decidió jugar un juego. Decidió: "Oye, ¿no sería divertido mostrarle a la gente lo contrario de lo que normalmente les mostramos como sus mejores coincidencias y ver qué pasa?" Lo hará bajo la apariencia de un "experimento" para que todo suene legítimo.

Quizás este tipo no entienda mucho sobre la ética humana. O tal vez simplemente no le importa.

Lamentablemente, no tiene que imaginarse este escenario. Porque si eres usuario de OKCupid, un sitio de citas en línea, es posible que hayas participado involuntariamente en un estudio de investigación que su cofundador, Christian Rudder, decidió realizar a principios de este año.

Si es usuario de OKCupid, lo siento por usted. La empresa con la que se inscribió aparentemente está dirigida por un matemático, Christian Rudder, que tiene poca formación como investigador o científico, pero se siente perfectamente bien realizando experimentos de ciencias sociales con sus usuarios. Esta es una ecuación, en mi opinión, para el desastre ...

La controversia estalló durante el verano después de las revelaciones de que Facebook también estaba experimentando con sus usuarios sin su consentimiento explícito:

Rudder pensó que Facebook obtuvo un trato injusto en la cobertura de noticias porque todas las empresas de Internet realizan experimentos a pequeña y gran escala para ayudar a perfeccionar sus productos o dar sentido a sus datos. Entre otras cosas, su publicación reveló que OKCupid a veces invirtió sus porcentajes de coincidencia, mostrando altas calificaciones a las personas que se suponía que no eran compatibles, lo que implica lo contrario. OKCupid luego midió si esas coincidencias eran menos productivas (es decir, conducían a menos mensajes) que los algoritmos tradicionales.

O como El guardián escribió:

Para probar su teoría, el sitio le mintió a una parte de los usuarios sobre qué tan fuertemente coincidían con otros usuarios, y observó cuántos mensajes individuales condujeron a una conversación completa. Efectivamente, descubrieron que dos usuarios que en realidad tenían una coincidencia del 90% pero se les dijo que tenían una coincidencia del 30% tenían menos probabilidades de seguir hablando que dos usuarios que en realidad tenían una coincidencia del 30% pero se les dijo que tenían un 90% partido.

¡¿Qué?!? Entonces, el sitio web de citas en línea que pensaba que iba a hacer todo lo posible para emparejarlo con lo que pensaba que eran sus mejores parejas a veces decidió jugar con usted. En lugar de mostrarte las mejores coincidencias, a veces te mostraba las peores coincidencias con las que podrías emparejarte. Solo para ver qué harías.

Si fuera cliente de OKCupid, esto es lo que haría: cancelar mi cuenta con esa empresa de inmediato. Dile a todos mis amigos en las redes sociales que se mantengan alejados de OKCupid, una compañía que aparentemente se preocupa tan poco por la ética de la investigación humana, que se siente perfectamente a gusto mintiendo a sus propios clientes.

Está bien realizar experimentos de usabilidad A / B para probar cómo funcionan los diferentes diseños de su sitio web.

No está bien realizar experimentos en los que mienta directamente a sus clientes sobre el servicio principal que está brindando, en este caso, un algoritmo de coincidencia. ¿En qué universo se consideraría eso ético?

Hay dos cosas muy distintas. Cualquier investigador sabe esto:

Pero si bien la publicación del blog de OkCupid aparentemente fue un esfuerzo por desmitificar el proceso de experimentar con los usuarios, para muchos, simplemente subrayó el fracaso de la industria de la tecnología para "entender por qué algunas pruebas son éticas y otras no", en palabras del sociólogo Nathan Jurgenson. .

A pesar del comportamiento afable de OkCupid, la firma es propiedad del conglomerado IAC, una corporación multinacional con una capitalización de mercado de $ 5 mil millones. "La gente de tecnología equipara habitualmente manipulación emocional y cambio de logo", continuó Jurgenson. "[Usted] necesita una junta de ética para distinguir lo que requiere la participación, el informe, etc."

No se ofenda, pero este es exactamente el tipo de comportamiento poco ético que esperaría de un estudiante universitario que se especializó en matemáticas. En mi opinión, Rudder no es un científico ni un investigador, ni siquiera tiene una maestría y mucho menos un doctorado. Aparentemente piensa que publicar sus "ideas" de Excel en un blog es equivalente a publicar un artículo de revista revisado por pares (del cual no pude encontrar ninguno que haya publicado).

Sé que es divertido y moderno empezar a llamarse "científico de datos" la primera vez que ingresa algunos datos en una hoja de cálculo de Excel y nota una correlación entre algunos números. Pero llamarse a sí mismo por un nombre y tener el mismo conjunto de habilidades y educación que un científico de datos real son dos cosas muy diferentes. En mi opinión, Rudder no es ningún tipo de científico, solo un muy buen showman y comercializador.

¿Por qué deberían importar las credenciales de Rudder? Porque es en la escuela de posgrado donde aprendes sobre las pruebas con sujetos humanos. Es en la escuela de posgrado donde aprendes sobre ética. Y es en la escuela de posgrado que la gente generalmente aprende a usar programas de estadísticas reales para encontrar tendencias de datos.

¿Hicieron la investigación para compartirla con otros investigadores, como hacen la mayoría de los científicos reales, en una revista científica? No Lo hicieron de manera que aparentemente tendrían material para otra publicación de blog. Así es, su vida de citas en línea fue manipulada para que pudieran entretener a otras personas en un blog.

IAC, la empresa matriz de OKCupid, debería avergonzarse del comportamiento de este tipo. Instantáneamente me haría no confiar en ninguna de las propiedades que ejecuta IAC, como About.com o Ask.com.

Pero, de nuevo, obtienes lo que pagas. Clientes de OKCupid - a gratis sitio de citas en línea: no debería sorprenderse de que la empresa aparentemente no tenga ningún problema en mentirte y manipular los resultados coincidentes que te muestra.

Mereces mas. Aporta unos cuantos dólares para convertirte en miembro de un sitio de citas online dirigido por profesionales que no realizan experimentos con seres humanos contigo solo por diversión.

!-- GDPR -->