Leer en inglés

Compartir a través de


Funcionamiento de la coincidencia aproximada en Power Query

Las características de Power Query, como la combinación aproximada, los valores del clúster y la agrupación aproximada, usan los mismos mecanismos para funcionar como coincidencia aproximada.

En este artículo se describen muchos escenarios que muestran cómo aprovechar las opciones que tiene la coincidencia aproximada, con el objetivo de que el concepto de "aproximado" quede claro.

Ajustar el umbral de similitud

El mejor escenario para aplicar el algoritmo de coincidencia aproximada es cuando todas las cadenas de texto de una columna contienen solo las cadenas que deben compararse y no hay componentes adicionales. Por ejemplo, comparar Apples con 4ppl3s genera puntuaciones de similitud más altas que comparar Apples con My favorite fruit, by far, is Apples. I simply love them!.

Dado que la palabra Apples de la segunda cadena es solo una pequeña parte de la cadena de texto completa, esa comparación genera una puntuación de similitud inferior.

Por ejemplo, el siguiente conjunto de datos consta de respuestas de una encuesta que solo tenía una pregunta: "¿Cuál es su fruta favorita?"

Frutas
Blueberries (Arándanos)
Blue berries are simply the best (Las bayas azules son simplemente las mejores)
Fresas
Strawberries = <3 (Fresas = 3)
Apples (Manzanas)
'sples ('mnzanas)
4ppl3s (4anzan3s)
Plátanos
fav fruit is bananas (fruta fav son plátanos)
Banas (Plános)
My favorite fruit, by far, is Apples. (Mi fruta favorita, con diferencia, son las manzanas) I simply love them! (Me encantan)

La encuesta proporcionó un único cuadro de texto para introducir el valor y no tenía ninguna validación.

Ahora tiene la tarea de agrupar en clústeres los valores. Para realizar esa tarea, cargue la tabla anterior de frutas en Power Query, seleccione la columna y, a continuación, seleccione la opción Valores de clúster en la pestaña Agregar columna de la cinta de opciones.

Captura de pantalla de la opción de valores de clúster dentro de la pestaña Añadir columna de la cinta disponible tras seleccionar la columna Fruta de la tabla.

Aparece el cuadro de diálogo Valores de clúster, donde puede especificar el nombre de la nueva columna. Asigne a esta nueva columna el nombre Clúster y seleccione Aceptar.

Captura de pantalla del cuadro de diálogo Valores de clúster tras seleccionar la columna Fruta. El nuevo campo de nombre de columna se establece en Clúster.

De forma predeterminada, Power Query usa un umbral de similitud de 0,8 (u 80 %). El valor mínimo de 0,00 hace que todos los valores con cualquier nivel de similitud coincidan entre sí y el valor máximo de 1,00 solo permite coincidencias exactas. Una "coincidencia exacta" aproximada podría omitir diferencias como mayúsculas y minúsculas, el orden de palabras y los signos de puntuación. El resultado de la operación anterior produce la tabla siguiente con una nueva columna Clúster.

Captura de pantalla de la salida predeterminada con una nueva columna Clúster después de realizar la operación Valores de clúster en la columna Fruta con valores predeterminados.

Aunque se ha realizado la agrupación en clústeres, no proporciona los resultados esperados para todas las filas. El número de fila dos (2) sigue teniendo el valor Blue berries are simply the best, pero debe estar agrupado en clústeres en Blueberries y algo similar sucede con las cadenas de texto Strawberries = <3, fav fruit is bananas y My favorite fruit, by far, is Apples. I simply love them!.

Para determinar lo que está causando esta agrupación en clústeres, haga doble clic en Valores agrupados en el panel Pasos aplicados para devolver el cuadro de diálogo Valores del clúster. Dentro de este cuadro de diálogo, expanda Opciones de clúster aproximadas. Habilite la opción Mostrar puntuaciones de similitud y seleccione Aceptar.

Captura de pantalla de la ventana de valores de clúster con las opciones de clúster aproximado mostradas y la opción mostrar puntuaciones de similitud seleccionada.

Al habilitar la opción Mostrar puntuaciones de similitud, se crea una nueva columna en la tabla. Esta columna muestra la puntuación de similitud exacta entre el clúster definido y el valor original.

Captura de pantalla de la tabla con nueva columna de puntuación de similitud con el nombre Fruit_Cluster_Similarity.

Tras una inspección más detallada, Power Query no pudo encontrar ningún otro valor en el umbral de similitud para las cadenas de texto Blue berries are simply the best,Strawberries = <3, fav fruit is bananas y My favorite fruit, by far, is Apples. I simply love them!.

Vuelva al cuadro de diálogo Valores de clúster una vez más haciendo doble clic en Valores agrupados en clúster en el panel Pasos aplicados. Cambie el Umbral de similitud de 0,8 a 0,6 y, a continuación, seleccione Aceptar.

Captura de pantalla del cuadro de diálogo de valores de clúster con las opciones de clúster aproximado mostradas y el umbral de similitud fijado en 0,6.

Este cambio le acerca al resultado que busca, excepto para la cadena de texto My favorite fruit, by far, is Apples. I simply love them!. Al cambiar el valor del Umbral de similitud de 0,8 a 0,6, Power Query ahora puede usar los valores con una puntuación de similitud que empieza de 0,6 hasta 1.

Captura de pantalla de la tabla después de definir el umbral de similitud en 0,6 con nuevos valores asignados en la columna Clúster.

Nota

Power Query siempre usa el valor más cercano al umbral para definir los clústeres. El umbral define el límite inferior de la puntuación de similitud aceptable para asignar el valor a un clúster.

Puede intentarlo de nuevo cambiando la Puntuación de similitud de 0,6 a un número inferior hasta que obtenga los resultados que busca. En este caso, cambie la Puntuación de similitud a 0,5. Este cambio genera el resultado exacto que esperaba con la cadena de texto My favorite fruit, by far, is Apples. I simply love them! asignada ahora al clúster Apples.

Captura de pantalla de la tabla con todos los valores correctos en la columna Clúster.

Nota

Actualmente, solo la característica Valores de clúster de Power Query Online proporciona una nueva columna con la puntuación de similitud.

Consideraciones especiales para la tabla de transformación

La tabla de transformación le ayuda a asignar valores de la columna a nuevos valores antes de realizar el algoritmo de coincidencia aproximada.

Algunos ejemplos de cómo se puede usar la tabla de transformación:

Importante

Cuando se usa la tabla de transformación, la puntuación de similitud máxima para los valores de la tabla de transformación es 0,95. Esta penalización deliberada de 0,05 se aplica para distinguir que el valor original de dicha columna no es igual a los valores con los que se comparó desde que se produjo una transformación.

Para los casos en los que primero desee asignar los valores y luego realizar la coincidencia aproximada sin la penalización de 0,05, le recomendamos que sustituya los valores de la columna y luego realice la coincidencia aproximada.