Página nueva
📌 Normas Generales
🚫 No subir imágenes ni archivos, solo enlaces. Puedes usar Imgur para subir imágenes. (Eliminar esta sección luego de leerla)
En esta wiki se documenta el procesamiento de imágenes con un enfoque en el código. Se incluyen explicaciones detalladas, fragmentos de código y enlaces a recursos externos.
📂 Recursos Clave
📎 Aquí puedes encontrar enlaces importantes relacionados con el tema:
👥 Integrantes:
- 👤 Andrea Parra
- 👤 Jorge Andrey
📑 Material de apoyo:
- 📊 Diapositivas: Ver presentaciones
- 📜 Paper: Ver artículos académicos
- 💻 Código externo: Repositorio de código
🎯 Objetivos
📢 En esta sección se definen los objetivos de la sesión:
✅ ¿Por qué es importante este tema?
✅ ¿Qué se espera lograr durante la sesión?
📊 Resultados Esperados
📍 Esta sección describe de manera general lo que se espera obtener al final de la sesión:
🔹 Mayor comprensión del tema tratado.
🔹 Identificación de conceptos clave.
🔹 Recopilación de información relevante para futuras implementaciones.
⚙️ Metodología
Veamos el pseudocódigo de muón.
ALgo que modemos notar, es que su pseudocódigo es muy similar a como sería el SDG con aceleración. Es decir
Require: Learning rate η, momentum μ
1: Inicializar parámetros θ₀
2: Inicializar velocidad v₀ ← 0
3: for t = 1, … do
4: Calcular gradiente Gₜ ← ∇θ ℒₜ(θₜ₋₁)
5: Actualizar velocidad vₜ ← μ vₜ₋₁ + Gₜ
6: Actualizar parámetros θₜ ← θₜ₋₁ - η vₜ
7: end for
8: return θₜ
Como podemos ver, muon agrega un término nuevo, $$O_t$$Oₜ, que se calcula con leel método $\textrm{NewtonSchelz5}$
$$Este \sum_3método $$tiene como objetivo encontrar una matriz ortogonal que representa los valores. Hay muchas maneras de hacer esto, pero el método más común de hacerlo, es mediante la descomposición SVD, pero es costoso computacionalmente.
[\sum]
📚 Referencias
📖 Esta sección recopila enlaces a recursos relevantes sobre procesamiento de imágenes:
[2]: A. Nasef, M. Marjanović-Jakovljević, and A. Njeguš, “Stochastic gradient descent analysis for the evaluation of a speaker recognition,” Analog Integrated Circuits and Signal Processing, vol. 90, no. 2. Springer Science and Business Media LLC, pp. 389–397, Dec. 31, 2016. doi: 10.1007/s10470-016-0918-7.
🔹 📄 Muon Optimizer
🔹 📘 Guía de NumPy
🔹 📄 Artículo sobre procesamiento de imágenes