Curso de Matemáticas para IA · Lección 51 de 180
Las matrices de proyección transforman conjuntos de datos completos
Construye una matriz de proyección sobre una recta, aplícala a cada fila de un conjunto de datos y verifica la geometría con comprobaciones de simetría e idempotencia en NumPy.
Una proyección puede explicar una observación con una sola dirección. Para un flujo de IA, la pregunta más útil es qué ocurre cuando la observación es un conjunto de datos: ¿puede una misma regla lineal pequeña transformar todas las filas de manera coherente?
Sí. Una matriz de proyección aplica la misma operación de punto más cercano a cada muestra. Conserva la componente en la dirección elegida y elimina la componente ortogonal, de modo que una nube de puntos se convierte en una representación de una sola dirección, mientras cada salida conserva el número original de coordenadas.
Al terminar esta lección podrás construir una matriz de proyección sobre una recta, aplicarla a un conjunto de datos almacenado por filas y comprobar las dos identidades que hacen que sea una proyección: simetría e idempotencia.
Objetivo de aprendizaje: Construir y comprobar una matriz de proyección sencilla.
Esta lección parte de la Lección 035: Las matrices representan aplicaciones lineales, donde las matrices se convirtieron en reglas reutilizables, y de la Lección 050: La proyección encuentra el punto más cercano, donde se proyectó un vector sobre una recta. La Sección 3.8 del libro oficial Mathematics for Machine Learning desarrolla la construcción de la matriz de proyección. El conjunto de datos, los cálculos, la visualización, la implementación en NumPy y las evaluaciones de aquí son originales.
Convertir la proyección de una recta en una matriz
Sea un vector de dirección no nulo, y sea la recta que define y que pasa por el origen. Para una observación vectorial en columna , la lección anterior daba
El escalar es un producto punto. Reescribe el lado derecho para que aparezca como factor final:
Esta reorganización deja ver una regla lineal reutilizable.
La matriz tiene dos consecuencias geométricas inmediatas. Primero,
por lo que es simétrica. Segundo, una vez que un vector ha llegado a la recta, volver a proyectarlo no hace nada:
Esto se llama idempotencia. Para ver por qué se cumple, sea . Entonces
La simetría describe la geometría en ángulo recto; la idempotencia describe el hecho de que la salida ya está asentada sobre la recta objetivo. Ninguna de las dos propiedades dice que sea invertible. Una proyección sobre una sola dirección normalmente descarta las otras direcciones.
Aplicar la misma regla a un conjunto de datos almacenado por filas
Los datos de IA suelen almacenarse con una muestra por fila. Sea
donde es el número de muestras y es el número de características. Como es simétrica, multiplicar por la derecha aplica la proyección de vectores columna a la traspuesta de cada fila:
Cada fila de sigue teniendo longitud , pero todas las filas están sobre la recta unidimensional . Los datos todavía no se han reducido a una coordenada. La matriz de coeficientes
guarda una coordenada por muestra, y la reconstrucción es . Conservar resulta práctico cuando el código posterior espera el ancho original de características; conservar resulta práctico cuando el objetivo es una representación compacta de un solo número.
Una nube de cuatro muestras, transformada de dos maneras
Usa la dirección
El producto exterior y la matriz de proyección son
Toma cuatro observaciones con dos características como filas:
Geometría: cada fila se mueve a U
- Observación original
- Observación proyectada
- Recta objetivo U
Matriz: una regla para todas las filas
Con las muestras almacenadas por filas, multiplica X por P a la derecha.
Y = X @ P
| Muestra | Original xᵢ | Coeficiente zᵢ | Proyectado yᵢ | Residuo xᵢ − yᵢ |
|---|---|---|---|---|
| x₁ | (3, 1) | 1.4 | (2.8, 1.4) | (0.2, −0.4) |
| x₂ | (1, 3) | 1 | (2, 1) | (−1, 2) |
| x₃ | (−2, −1) | −1 | (−2, −1) | (0, 0) |
| x₄ | (0, 4) | 0.8 | (1.6, 0.8) | (−1.6, 3.2) |
El gráfico de puntos muestra la geometría; la tabla conserva los valores sin depender del color, la escala ni de una vista interactiva.
La visualización revela una distinción útil. La matriz es una regla para cada entrada, no una tabla de consulta para estos cuatro puntos. Cualquier fila nueva en el mismo espacio de características puede multiplicarse por la misma , y los puntos que ya están sobre permanecen sin cambios.
Comprobar la matriz con NumPy
outer de NumPy calcula el producto exterior de dos vectores, que construye el numerador . Su función matmul realiza productos matriciales; el operador @ es su abreviatura para arrays. Por tanto, podemos escribir la transformación almacenada por filas como X @ P y usar linalg.norm con axis=1 para medir la longitud del residuo de cada fila.
allclose comprueba la igualdad numérica dentro de las tolerancias elegidas. Las comprobaciones siguientes no sustituyen al álgebra: detectan un error de implementación y, al mismo tiempo, reconocen que la aritmética de coma flotante puede dejar un resto diminuto en lugar de cero literal.
import numpy as np
b = np.array([2.0, 1.0])
X = np.array(
[
[3.0, 1.0],
[1.0, 3.0],
[-2.0, -1.0],
[0.0, 4.0],
]
)
P = np.outer(b, b) / np.dot(b, b)
Y = X @ P
residuals = X - Y
residual_lengths = np.linalg.norm(residuals, axis=1)
tolerance = 1e-12
symmetric = np.allclose(P.T, P, rtol=0.0, atol=tolerance)
idempotent = np.allclose(P @ P, P, rtol=0.0, atol=tolerance)
already_projected = np.allclose(Y @ P, Y, rtol=0.0, atol=tolerance)
print(P)
print(Y)
print(residual_lengths)
print(symmetric, idempotent, already_projected)
Salida verificada:
[[0.8 0.4]
[0.4 0.2]]
[[ 2.8 1.4]
[ 2. 1. ]
[-2. -1. ]
[ 1.6 0.8]]
[0.4472136 2.23606798 0. 3.57770876]
True True True
Los tres resultados booleanos responden a preguntas distintas. symmetric comprueba la identidad de traspuesta de la matriz, idempotent comprueba , y already_projected comprueba que todo el conjunto de datos transformado permanece fijo al aplicarlo por segunda vez. Las longitudes de los residuos muestran que un punto puede estar sobre la recta objetivo con error cero, mientras que otro puede conservar una componente ortogonal considerable.
Lo que conserva la matriz y lo que no puede conservar
Para cualquier vector , la salida se encuentra sobre . El coeficiente es la parte de que puede explicar la recta elegida, mientras que es perpendicular a . Por tanto, la proyección es un modelo unidimensional de una observación de dimensión .
Esta es la forma básica de la reducción de dimensionalidad: elige un espacio de características de menor dimensión, conserva el punto más cercano en ese espacio y mide el error de reconstrucción que queda. En un flujo de embeddings o de características, una dirección podría representar un patrón aprendido y podría conservar su intensidad. La matriz de proyección puede aplicar esa misma regla de representación a un lote, pero la elección de la dirección sigue determinando qué información se conserva. Un residuo pequeño significa «cerca según esta recta euclídea», no «el significado de la muestra se ha capturado por completo».
Casos límite y trampas de disposición
Una dirección cero no es una recta. Si , entonces y la fórmula divide por cero. Una función de producción debe rechazar esa entrada en lugar de producir valores nan o llamar silenciosamente dirección al vector cero.
Una recta desplazada necesita centrado. La matriz anterior proyecta sobre una recta que pasa por el origen. Para una recta afín , proyecta primero y después suma :
Aplicar directamente a usaría la recta equivocada. Para un conjunto de datos completo, resta de cada fila antes de la multiplicación matricial y vuelve a sumarlo después.
No dejes que la orientación del almacenamiento elija las matemáticas por ti. Para una matriz por filas usa ; para una matriz por columnas usa . Un conjunto de datos traspuesto puede hacer que una multiplicación incorrecta parezca plausible y, al mismo tiempo, intercambiar «número de muestras» y «número de características». Comprueba las dimensiones antes de interpretar la salida.
La proyección de un solo vector de la Lección 050 se convierte en una operación por lotes sin cambiar su geometría. La Lección 052 usará la misma idea del punto más cercano para un subespacio generado por varias columnas, donde la matriz de proyección puede conservar más de una dirección aprendida.
Comprueba tu comprensión
Pregunta 1
Para b = (1, 2), construye la matriz de proyección P = bbᵀ/(bᵀb) e indica su forma.
Mostrar la solución paso a paso
Primero calcula el denominador:
Después forma el producto exterior, colocando en el factor izquierdo y en el factor superior:
Por tanto,
Como tiene dos coordenadas, es una matriz .
Pregunta 2
Usando b = (2, 1) y x = (1, 3), calcula el coeficiente de proyección y el punto proyectado.
Mostrar la solución paso a paso
Calcula el producto punto y la longitud al cuadrado:
El coeficiente es . Multiplícalo por la dirección:
El resultado está sobre porque es un múltiplo escalar de .
Pregunta 3
Un conjunto de datos X tiene cuatro filas y dos columnas de características. Para proyectarlo por filas sobre P, ¿debe usarse X @ P o P @ X? Explica las dimensiones.
Mostrar la solución paso a paso
La forma de es , y una matriz de proyección para características bidimensionales tiene forma . El producto
está definido y conserva una fila de salida por muestra. Por tanto, la operación por filas es X @ P. El producto intentaría multiplicar una matriz por una matriz ; las dimensiones internas y no coinciden. Si las muestras estuvieran almacenadas como columnas en una matriz , entonces actuaría por la izquierda.
Pregunta 4
Verifica la idempotencia de P = [[0.8, 0.4], [0.4, 0.2]] calculando P². ¿Qué significa el resultado para un conjunto de datos proyectado?
Mostrar la solución paso a paso
Multiplica la matriz por sí misma:
Por tanto, . Una segunda pasada deja sin cambios cada fila proyectada; no continúa reduciendo el conjunto de datos.
Pregunta 5
¿Por qué la matriz de proyección sobre una recta es simétrica y cómo se relaciona eso con el residuo?
Mostrar la solución paso a paso
La matriz es
El denominador es un escalar, y trasponer el numerador invierte el orden de los factores:
Por eso . Geométricamente, la proyección utiliza el producto interno euclídeo habitual, así que la diferencia tiene producto punto cero con . La simetría es la señal algebraica de esa proyección ortogonal en ángulo recto; por sí sola no implica que se conserve cada vector.
Pregunta 6
Un ingeniero dice: «Como P tiene dos filas y dos columnas, conserva dos direcciones independientes». Corrige la afirmación para una dirección b bidimensional no nula.
Mostrar la solución paso a paso
La forma de una matriz no es su número de direcciones independientes. Ambas columnas de son múltiplos escalares de , así que sus columnas solo generan la recta unidimensional . Se elimina cualquier componente ortogonal a . Por tanto, una matriz de proyección puede tener rango uno: conserva una dirección mientras usa dos coordenadas para almacenar cada punto de salida.
Pregunta 7
¿Qué debe hacer una implementación en NumPy cuando b = [0.0, 0.0] y por qué añadir un denominador diminuto no es una solución fiel?
Mostrar la solución paso a paso
El vector cero no define una recta y su denominador es . La implementación debe rechazarlo explícitamente, por ejemplo comprobando que la norma al cuadrado sea mayor que cero, y explicar que la entrada no es válida. Añadir un número diminuto arbitrario al denominador fabricaría una matriz muy grande o inestable para una tarea geométrica no definida. Un regularizador numérico puede ser apropiado para otro problema definido explícitamente, pero no convierte el vector cero en una dirección.
Pregunta 8
Para una recta afín c + tb, ¿por qué no se puede aplicar directamente a x la matriz P de la recta que pasa por el origen? Da la operación corregida por filas para el conjunto de datos.
Mostrar la solución paso a paso
La matriz asigna los puntos a una recta que pasa por el origen. Una recta afín tiene el desplazamiento , así que el vector relevante es , no . Para cada fila de un conjunto de datos, centra primero, proyecta y después recupera el desplazamiento:
donde es una columna de unos con entradas. La resta y la suma se hacen por filas. Aplicar sin centrar proyectaría sobre la recta paralela que pasa por cero y respondería a una pregunta distinta.