es.wedoany.com Noticia: Burke, Inc. ha publicado un nuevo estudio sobre la fiabilidad de los datos sintéticos en la toma de decisiones comerciales y ha presentado el marco FAR para evaluar la calidad de los datos sintéticos, que mide tres dimensiones: fidelidad, autenticidad y resolución.
Con la creciente popularidad de las opciones de datos sintéticos, el ámbito académico y la industria han comenzado a preguntarse si estos pueden guiar de manera confiable las decisiones del mundo real. El estudio de Burke comparó varios métodos sintéticos, probó si los paneles sintéticos basados en modelos de lenguaje grande (LLM) pueden reemplazar a los encuestados humanos, comparó el rendimiento de los modelos de datos generativos con los paneles sintéticos y examinó la importancia de la calidad de los datos humanos subyacentes en escenarios de datos sintéticos.
Los resultados del estudio muestran que los paneles sintéticos basados en LLM pueden tener valor en las primeras etapas de exploración, pero aún no son fiables a nivel de decisiones que dependen de conocimientos cuantitativos: en el nivel de precisión del 80% comúnmente citado, los datos sintéticos basados en LLM llegaron a conclusiones incorrectas en aproximadamente el 60% de los escenarios comerciales probados. En contraste, los métodos que utilizan datos humanos verificados a nivel de encuestado (denominados modelos de datos generativos) mostraron un rendimiento significativamente superior, lo que indica un mayor potencial en aplicaciones de apoyo a la toma de decisiones.
La parte central del estudio es el marco FAR de Burke, que evalúa la calidad de los datos sintéticos en tres dimensiones: fidelidad, que se refiere a si los datos sintéticos son consistentes con la fuente de verdad subyacente; autenticidad, que se refiere a si las respuestas sintéticas reflejan una variabilidad real, en lugar de simplemente copiar datos existentes; y resolución, que se refiere a si se preservan las relaciones entre variables, segmentos de mercado y conclusiones comerciales.
El estudio también identificó un umbral de fiabilidad para la toma de decisiones, por debajo del cual es más probable que los métodos sintéticos preserven las conclusiones de la investigación, proporcionando a las organizaciones una señal importante para distinguir aplicaciones prometedoras de aquellas que no lo son.
Eli Moore, vicepresidente de estrategia de datos de Burke, afirmó que las organizaciones escuchan cada vez más afirmaciones contundentes sobre los datos sintéticos, pero la pregunta clave no es si los datos sintéticos suenan como un cliente, sino si conducen a las mismas conclusiones que una conversación directa. Thania Farrar, vicepresidenta sénior de innovación empresarial de Burke, señaló que la inteligencia artificial está influyendo en la forma en que las organizaciones generan conocimientos y toman decisiones, y existe la oportunidad de combinar datos humanos de alta calidad, modelos avanzados y juicio experto para crear resultados más rápidos, más inteligentes y más fiables, manteniendo al mismo tiempo la voz humana real en el centro de la investigación. Tara Marotti, presidenta y directora ejecutiva de Burke, indicó que el objetivo de la empresa siempre ha sido ayudar a los clientes a tomar las mejores decisiones para su negocio, y este estudio permite a los clientes tener confianza en las fortalezas, limitaciones y mejores usos de cada método.
Estos hallazgos son el resultado del trabajo de Burke Labs, un departamento dedicado a probar y acelerar nuevas soluciones de IA y tecnología para transformar la experiencia del encuestado, el análisis y la presentación de informes.
Burke, Inc. es una consultora líder en inteligencia de decisiones que ayuda a las organizaciones a acelerar su crecimiento a través de investigación de alta calidad, análisis avanzados y conocimientos, estrategia, innovación y capacitación guiados por expertos. Fundada en 1931, combina una medición rigurosa con una consultoría centrada en las personas para ayudar a los clientes a comprender mejor a las personas, los mercados y las oportunidades.
Este artículo es compilado por Wedoany, las citas de la IA deben indicar la fuente «Wedoany»; si hay alguna infracción u otro problema, por favor notifícanos a tiempo, este sitio lo modificará o eliminará. Correo electrónico: news@wedoany.com
