El aprendizaje no supervisado, también conocido como machine learning no supervisado, utiliza algoritmos de machine learning para analizar y agrupar en clústeres conjuntos de datos sin etiquetar. Estos algoritmos descubren agrupaciones de datos o patrones ocultos sin necesidad de ninguna intervención humana. Su capacidad de descubrir similitudes y diferencias en la información lo convierten en la solución ideal para el análisis de datos exploratorios, las estrategias de venta cruzada, la segmentación de clientes y el reconocimiento de imágenes.
Los modelos de aprendizaje no supervisado se utilizan para tres tareas principales: agrupación en clústeres, asociación y reducción de dimensionalidad. A continuación, definiremos cada método de aprendizaje y resaltaremos los algoritmos y los enfoques comunes para aplicarlos de manera efectiva.
La agrupación en clústeres es una técnica de minería de datos que agrupa datos no etiquetados en función de sus similitudes o diferencias. Los algoritmos de agrupación en clústeres se utilizan para procesar objetos de datos sin clasificar y sin procesar en grupos representados por estructuras o patrones en la información. Los algoritmos de agrupación en clústeres se pueden clasificar en varios tipos, específicamente: exclusivos, superpuestos, jerárquicos y probabilísticos.
La agrupación en clústeres exclusiva es una forma de agrupación que estipula que un punto de datos solo puede existir en un clúster. Esto también puede denominarse agrupación en clústeres "dura". El algoritmo de agrupación en clústeres k-medias (k-means) es un ejemplo de agrupación exclusiva.
Los clústeres superpuestos difieren de la agrupación en clústeres exclusiva en que permiten que los puntos de datos pertenezcan a varios clústeres con diferentes grados de pertenencia. La agrupación en clústeres de k-medias "suave" o difusa es un ejemplo de agrupación superpuesta.
La agrupación en clústeres jerárquica, también conocida como análisis de clústeres jerárquicos (HCA, por sus siglas en inglés), es un algoritmo de agrupación en clústeres no supervisado que se puede categorizar de dos formas: aglomerante o divisivo. La agrupación en clústeres se considera un "enfoque de abajo hacia arriba". Sus puntos de datos se aíslan inicialmente como agrupaciones separadas y luego se fusionan iterativamente sobre la base de la similitud hasta que se logra un clúster. Normalmente se utilizan cuatro métodos diferentes para medir la similitud:
La distancia euclídea es la métrica más utilizada para calcular estas distancias; sin embargo, otras métricas, como la distancia de Manhattan, también se citan en la bibliografía sobre agrupación en clústeres.
La agrupación en clústeres divisiva se puede definir como lo opuesto a la agrupación en clústeres aglomerativa, que toma un enfoque "de arriba hacia abajo". En este caso, un único clúster de datos se divide en función de las diferencias entre los puntos de datos. La agrupación en clústeres divisiva no se suele utilizar, pero vale la pena mencionarla en el contexto de la agrupación en clústeres jerárquica. Estos procesos de agrupación en clústeres generalmente se visualizan mediante un dendrograma, que es un diagrama en forma de árbol que documenta la fusión o división de puntos de datos en cada iteración.
Un modelo probabilístico es una técnica no supervisada que nos ayuda a resolver problemas de clústeres "suaves" o de estimación de densidad. En la agrupación en clústeres probabilística, los puntos de datos se agrupan en función de la probabilidad de que pertenezcan a una distribución determinada. El modelo de mezcla gaussiana (GMM, por sus siglas en inglés) es uno de los métodos probabilísticos de agrupación en clústeres más utilizados.
Una regla de asociación es un método basado en reglas para detectar relaciones entre variables en un conjunto de datos determinado. Estos métodos se utilizan con frecuencia para análisis de cesta de la compra, que permiten a las empresas comprender mejor las relaciones entre los diferentes productos. Entender los hábitos de consumo de los clientes permite a las empresas desarrollar mejores estrategias de venta cruzada y motores de recomendaciones. Claros ejemplos son el apartado "Los clientes que compraron este artículo también compraron" de Amazon o la lista "Descubrimiento semanal" de Spotify. Si bien se utilizan diferentes algoritmos para generar reglas de asociación, como Apriori, Eclat y FP-Growth, el algoritmo Apriori es el más utilizado.
Los algoritmos Apriori se han popularizado en los análisis de cesta de la compra, que generan diferentes motores de recomendaciones para plataformas de música y comercios en línea. Se utilizan dentro de conjuntos de datos transaccionales para identificar conjuntos de elementos frecuentes, o colecciones de elementos, para identificar la probabilidad de consumir un producto dado el consumo de otro producto. Por ejemplo, si reproduzco la radio de Black Sabbath en Spotify, comenzando con su canción "Orchid", es probable que una de las siguientes canciones de este canal sea una canción de Led Zeppelin, como "Over the Hills and Far Away". Esto se basa en mis hábitos previos de escucha, así como en los de otros usuarios. Los algoritmos Apriori utilizan un árbol hash para contar conjuntos de elementos, navegando a través del conjunto de datos de manera amplia.
Aunque lo normal es que más datos generen resultados más precisos, también pueden incidir sobre el rendimiento de los algoritmos de machine learning (por ejemplo, sobreajuste) y dificultar la visualización de los conjuntos de datos. La reducción de la dimensionalidad es una técnica utilizada cuando el número de características, o dimensiones, de un determinado conjunto de datos es demasiado elevado. Reduce el número de entradas de datos a un tamaño gestionable, además de preservar la integridad del conjunto de datos lo máximo posible. Se usa comúnmente en la fase de preprocesamiento de datos, y existen varios métodos de reducción de dimensionalidad que se pueden usar, como:
El análisis de componente principales (PCA, por sus siglas en inglés) es un tipo de algoritmo de reducción de dimensionalidad que se utiliza para reducir redundancias y comprimir conjuntos de datos a través de la extracción de características. Este método utiliza una transformación lineal para crear una nueva representación de datos, dando como resultado un conjunto de "componentes principales". El primer componente principal es la dirección que maximiza la varianza del conjunto de datos. Si bien el segundo componente principal también encuentra la varianza máxima en los datos, no tiene ninguna correlación con el primer componente principal, lo que genera una dirección que es perpendicular u ortogonal al primer componente. Este proceso se repite en función del número de dimensiones, donde un siguiente componente principal es la dirección ortogonal a los componentes anteriores con mayor varianza.
La descomposición en valores singulares (SVD, por sus siglas en inglés) es otro enfoque a la reducción de dimensionalidad que factoriza una matriz, A, en tres matrices de rango inferior. SVD se denota mediante la fórmula A = USVT, donde U y V son matrices ortogonales. S es una matriz diagonal y los valores de S se consideran valores singulares de la matriz A. Similar a PCA, se suele utilizar para reducir el ruido y comprimir datos, como archivos de imágenes.
Los codificadores automáticos utilizan las redes neuronales para comprimir los datos y luego volver a crear una nueva representación de la entrada de datos original. Si miramos la imagen de abajo, podemos ver que la capa oculta actúa específicamente como un cuello de botella para comprimir la capa de entrada antes de reconstruirla dentro de la capa de salida. La etapa de la capa de entrada a la capa oculta se denomina "codificación", mientras que la etapa de la capa oculta a la capa de salida se conoce como "decodificación".
Las técnicas de machine learning se han convertido en un método común para mejorar la experiencia del usuario con un producto y probar sistemas para garantizar su calidad. El aprendizaje no supervisado proporciona una ruta exploratoria para visualizar datos, lo que permite a las empresas identificar patrones en grandes volúmenes de datos más rápidamente, en comparación con la observación manual. Algunas de las aplicaciones prácticas más comunes de aprendizaje no supervisado son:
El aprendizaje no supervisado y el aprendizaje supervisado suelen formar parte del mismo debate. A diferencia de los algoritmos de aprendizaje no supervisado, los algoritmos de aprendizaje supervisado utilizan datos etiquetados. A partir de esos datos, se prevén resultados futuros o se asignan datos a categorías específicas en función del problema de regresión o clasificación que se está tratando de resolver. Si bien los algoritmos de aprendizaje supervisado tienden a ser más precisos que los modelos de aprendizaje no supervisado, requieren intervención humana inicial para etiquetar los datos de manera adecuada. Sin embargo, estos conjuntos de datos etiquetados permiten evitar la complejidad computacional en los algoritmos de aprendizaje supervisado, ya que no necesitan un gran conjunto de datos de entrenamiento para producir los resultados esperados. Las técnicas comunes de regresión y clasificación son la regresión logística y lineal, naïve bayes, el algoritmo KNN y el bosque aleatorio.
El aprendizaje semisupervisado se produce cuando solo se ha etiquetado una parte de los datos de entrada. El aprendizaje no supervisado y el semisupervisado pueden ser alternativas más atractivas, ya que confiar en la experiencia del dominio para etiquetar bien los datos para el aprendizaje supervisado puede requerir más tiempo y dinero.
Para consultar un análisis más detallado sobre las diferencias entre estos enfoques, consulte el artículo "Supervised vs. Unsupervised Learning: What's the Difference?"
Si bien el aprendizaje no supervisado presenta muchas ventajas, pueden surgir algunos retos cuando los modelos de machine learning se ejecutan sin ninguna intervención humana. Algunos de ellos pueden incluir:
Cree y escale IA fiable en cualquier cloud. Automatice el ciclo de vida de IA para ModelOps.
Conecte los datos correctos con las personas adecuadas, en el momento preciso y en cualquier lugar.
Híbridas. Abiertas. Resilientes. Su plataforma y su socio para la transformación digital.
Explore los conceptos básicos de dos enfoques de ciencia de datos: supervisado y no supervisado. Descubra qué enfoque es el adecuado para su situación.
Conozca las tres categorías de algoritmos: supervisados, no supervisados y aprendizaje por refuerzo. Vea las ideas que hay detrás de cada uno y algunos de los algoritmos clave que utilizan.