Las REDES TRANSFORMER ¡EXPLICADAS!

  Рет қаралды 18,706

Codificando Bits

Codificando Bits

Күн бұрын

Пікірлер: 98
@codificandobits
@codificandobits 3 жыл бұрын
🔥🔥Academia Online: codificandobits.com 🔥🔥 🔥🔥Asesorías y formación personalizada: codificandobits.com/servicios 🔥🔥
@israelpradof
@israelpradof 3 күн бұрын
Una duda, de dónde sale la matriz Valores? Keys y Queríes las explicas pero Values no, esa como se calcula? Gracias
@ki_what
@ki_what 4 жыл бұрын
🤔 Necesito más bloques atencionales para seguirte el paso. Muy buen trabajo 👍🏻
@codificandobits
@codificandobits 4 жыл бұрын
😂😂😂
@danielnatsu
@danielnatsu 2 жыл бұрын
Estoy volviendo a ver este video después de dos años porque quería refrescar un poco el tema de Transformers debido a ChatGPT y veo con asombro que vos siempre estás muy bien informado. Hablando de OpenAI y concretamente de GPT3 hace 2 años!! Este canal y el conocimiento que impartes es de gran valor.
@JosePerez-bi7xn
@JosePerez-bi7xn Жыл бұрын
Estamos en la misma 😅
@softlucionsfreesoft2064
@softlucionsfreesoft2064 4 жыл бұрын
Esto ya es otro nivel, gracias por el vídeo.
@codificandobits
@codificandobits 4 жыл бұрын
😉😉 gracias por tu comentario. Un saludo!
@jeannsyo
@jeannsyo 3 жыл бұрын
genial me gusta mucho tu contenido; eres cono dot csv de america latina
@acecomia7723
@acecomia7723 4 жыл бұрын
esperaba mucho este video :), gracias por tomarte tu tiempo enserio
@codificandobits
@codificandobits 4 жыл бұрын
Qué bueno que te haya gustado. Realmente estas redes transformer tienen un potencial gigantesco. Ya vienen más videos sobre el tema. Un saludo!
@juanlestani1943
@juanlestani1943 10 ай бұрын
Excelente explicación y gran claridad conceptual en la exposición
@TheGunner
@TheGunner 4 жыл бұрын
Excelente contenido Miguel sigo todos los videos son super claros y precisos muchas gracias
@codificandobits
@codificandobits 4 жыл бұрын
Gracias por tu comentario Carlos, qué bueno que te guste el material del canal. Saludos!
@thefarfarout
@thefarfarout 4 жыл бұрын
Impecable video, mil gracias. La explicación con gráficos es de mucha utilidad!
@juanmanuelcirotorres6155
@juanmanuelcirotorres6155 4 жыл бұрын
Es increible que no conociera este canal, sos un crack
@codificandobits
@codificandobits 4 жыл бұрын
Gracias por tu comentario Juan Manuel. Esto me anima a seguir publicando contenido de buena calidad. Un saludo!
@dulcecarolinaalvarezsantia3093
@dulcecarolinaalvarezsantia3093 10 ай бұрын
Ojalá que tu canal crezca mucho, eres buenísimo. Muchas gracias por hacer accesible el conocimiento. Grande
@aquienleimporta9096
@aquienleimporta9096 2 жыл бұрын
Muy buen video. Solo un detalle y es que según el artículo el deco toma el query y no el value de la capa anterior. Pero sin duda uno de los mejores videos
@danielnatsu
@danielnatsu 4 жыл бұрын
Hola Miguel, es un video genial! Muchas gracias por tomar el tiempo para elaborarlo y compartir el conocimiento
@codificandobits
@codificandobits 4 жыл бұрын
Hola Daniel, qué bueno que te haya gustado. Vienen más sobre el tema en camino!
@datexland
@datexland 4 жыл бұрын
Gracias por compartir tu conocimiento Miguel, Crack como siempre 👍
@codificandobits
@codificandobits 4 жыл бұрын
Gracias a ti Alexander por seguir el canal. Saludos!
@datexland
@datexland 4 жыл бұрын
@@codificandobits Miguel viene alguno acerca de como entrenar con detectron2 detección de objetos????
@codificandobits
@codificandobits 4 жыл бұрын
@@datexland Viene, no será el próximo, pero en 2-3 videos viene!
@datexland
@datexland 4 жыл бұрын
@@codificandobits genial...
@CQP280inv
@CQP280inv 4 жыл бұрын
Quedamos atentos a la aplicación en código. gracias por el video
@codificandobits
@codificandobits 4 жыл бұрын
Claro que sí Cristian. Viene una primera aplicación (código + tutorial) en el próximo video. Un saludo!
@telmasaravia1751
@telmasaravia1751 5 ай бұрын
chale cjjajjajajaj llegué 4 años tarde xDD, ya me suscribi, ahora si más atenta a tu canal
@freddylopez7755
@freddylopez7755 4 жыл бұрын
Majestuosa explicación en español!! Felicidades!! Ansioso por el próximo video!!
@codificandobits
@codificandobits 4 жыл бұрын
Gracias por tu comentario Freddy. Un saludo!
@josemanuelmanesridaura8874
@josemanuelmanesridaura8874 4 жыл бұрын
Gracias por Compartir. FANTÁSTICAS Tús Explicaciones.
@codificandobits
@codificandobits 4 жыл бұрын
Gracias José por ser un fiel seguidor del canal. Un saludo!
@josemanuelmanesridaura8874
@josemanuelmanesridaura8874 4 жыл бұрын
@@codificandobits No No No... jejeje GRACIAS a Ti, por ENSEÑARNOS, lo que NO se APRENDE en "NINGÚN SITIO"... Nosotros Somos, como unas "Animas en Pena", que vamos BUSCANDO la LUZ. Y esa LUZ... eres Tú. Que la Virgen te Proteja. Muchísimas Gracias.
@pablogiri812
@pablogiri812 4 жыл бұрын
Hola profesor, muchas gracias por compartir su conocimiento!!!!
@codificandobits
@codificandobits 4 жыл бұрын
😉
@yulairecord2668
@yulairecord2668 4 жыл бұрын
Gracias excelente explicación. Que bueno eres.
@codificandobits
@codificandobits 4 жыл бұрын
Gracias a ti por el comentario. Un saludo!
@progra_kun4331
@progra_kun4331 4 жыл бұрын
Gran video espero los demas sobre como implementarlas gracias desde Venezuela
@codificandobits
@codificandobits 4 жыл бұрын
Hola Abraham. Sí, vienen más videos de implementación. Un saludo!
@felipeolivos8934
@felipeolivos8934 4 жыл бұрын
que genial tu canal, por favor sigue así!
@codificandobits
@codificandobits 4 жыл бұрын
Hola Felipe, gracias por tu comentario... Un saludo!
@Adictoal95
@Adictoal95 4 жыл бұрын
Genial! Te mereces muchas más visitas!
@codificandobits
@codificandobits 4 жыл бұрын
Poco a poco van llegando Gerardo. Un saludo!
@alfonsosarmientomeneses4680
@alfonsosarmientomeneses4680 Ай бұрын
Sería bueno que analizarlas qué da lugar al siguiente nivel de diseño de la red, porque así solo nos quedamos en una mecánica ya prefabricada.
@aldebaran1473
@aldebaran1473 2 жыл бұрын
Excelente explicación, el modelo de red de chatGPT. Está bueno entender el funcionamiento si bien Keras te simplifica todo.
@waltercontacto8732
@waltercontacto8732 4 жыл бұрын
Muy buen video. Estaría bueno ver un paso a paso.
@codificandobits
@codificandobits 4 жыл бұрын
Hola Walter. Sí, en los próximos videos veremos cómo programar este tipo de redes. Un saludo!
@patojp3363
@patojp3363 4 жыл бұрын
Muy buen video. Estaría genial que nos de la posibilidad de enseñarnos con código, para que los novatos tengamos una base para nuestros proyectos. Como hiciste con el código para la predicción de la bolsa. Seguí asi hermano. Personas como vos ayudan a crecer. Te mando un abrazo
@codificandobits
@codificandobits 4 жыл бұрын
Hola, gracias por tu comentario y por las sugerencias. Las voy a tener en cuenta. Espero pronto publicar más videos tipo tutorial, y viene en camino también un curso online. Un saludo!
@elvisleon9695
@elvisleon9695 2 жыл бұрын
A que se refiere cuando dice que se suma el embeding con los vectores posicionales? 🤔🤔
@deividbotina961
@deividbotina961 4 жыл бұрын
Muy interesante el concepto de las redes transformer. ¿Ya hay plantillas para implementarlas en Keras?
@codificandobits
@codificandobits 4 жыл бұрын
Hola Deivid. Sí, hay librerías en Tensorflow, Keras y Pytorch. Ya vienen video tutoriales sobre ese tema. Un saludo!
@plaimi2618
@plaimi2618 3 жыл бұрын
Muy bueno. podrias hacer un ejemplito utilizando google collab ? muchas gracias
@ElectroCoderEC
@ElectroCoderEC 2 жыл бұрын
Muy buenos videos. Saludos desde Ecuador. Con que programa editas los videos?
@codificandobits
@codificandobits 2 жыл бұрын
Gracias por tu comentario Sebastián! Para la edición uso ScreenFlow (en Mac). Un saludo!
@pablogiri812
@pablogiri812 4 жыл бұрын
Excelente trabajo Miguel, es impresionante esta revolución.¡ Tenes que dar curso en Udemy !
@codificandobits
@codificandobits 4 жыл бұрын
¿Udemy? ¿Será? 🤔🤔 Un saludo Pablo!
@BHWL100
@BHWL100 4 жыл бұрын
Muchas gracias por el video! Fue genial y bastante lúcido! Una cosita no más, en el bloque atencional yo aprendí q la salida del codificador va como Key y Value, y el dato proveniente del bloque anterior del decodificador va como Query, cómo será? Perdone si me estoy equivocando
@codificandobits
@codificandobits 4 жыл бұрын
Hola y gracias por tu comentario. En realidad la salida del bloque atencional es un poco más compleja: es el resultado de tomar la salida "softmax" de queries y keys, y combinarla luego con values. Esto lo encuentras más en detalle aproximadamente en el minuto 7:43 del video. Un saludo!
@danielbaena4691
@danielbaena4691 4 жыл бұрын
Muchas gracias por la explicación. Una duda que me surge es cuando explicas el bloque atencional. Cuando dices "Los tokens se llevan silmultáneamente a tres pequeñas redes neuronales ENTRENADAS para calcular los vectores queries, keys y valyes". Mi pregunta es, ¿esas redes dónde se entrenan o de dónde sale ese vector? Muchas gracias por tu respuesta.
@moisesdiaz9852
@moisesdiaz9852 3 жыл бұрын
Esa seria mi queja del video
@juansanchezgomez
@juansanchezgomez Жыл бұрын
No acabo de entender el funcionamiento de la red neuronal (la de color verde) tanto en el módulo del codificador como del decodificador. ¿Cuál es su función exactamente?. Muchas gracias y enhorabuena por el excelente vídeo.
@juanmanuelcirotorres6155
@juanmanuelcirotorres6155 4 жыл бұрын
Miguel explicas de una manera brutal, cuando vas seguir la serie?
@codificandobits
@codificandobits 4 жыл бұрын
Hola Juan Manuel. Los demás videos de la serie ya fueron publicados en 2020. Pero en 2021 vienen más! Un saludo!
@juanmanuelcirotorres6155
@juanmanuelcirotorres6155 4 жыл бұрын
@@codificandobits Quedo supremamente pendiente a cualquier contenido nuevo, seria muy vacano mirar arquitecturas mas avanzadas de transformers como ELECTRA, T5, Pegasus, etc; o de pronto hablar un poco de modelos generativos (GAN, VAE, etc), sos un crack
@mauriciojimenez1123
@mauriciojimenez1123 3 жыл бұрын
Muchas gracias por el video, me fue de mucha utilidad. Una pregunta, este tipo de redes solo funcionan para natural language processing? O también podrían utilizarse para trabajar con series de tiempo? Predicciones de la bolsa, por ejemplo. O para series de tiempo mejor seguir utilizando LSTM?
@codificandobits
@codificandobits 3 жыл бұрын
Hola Mauricio, qué buena pregunta. En principio fueron creadas para el Natural Language Processing, pero en teoría pueden funcionar para cualquier tipo de secuencia: series de tiempo, secuencias de video, generación de música, etc. Un saludo!
@mauriciojimenez1123
@mauriciojimenez1123 3 жыл бұрын
Gracias!
@eliasperez6748
@eliasperez6748 4 жыл бұрын
Buenas tardes, este tipo de redes serviría para pronósticos en el mercado accionario?
@codificandobits
@codificandobits 4 жыл бұрын
Elías me has dado una gran idea!, tomo nota para hacer un video sobre el tema. Aunque no he visto esta aplicación, en principio creo que sí serviría, pues el mercado accionario es también un tipo de secuencia, y estas redes transformer están diseñadas precisamente para analizar datos con esas características. Un saludo!
@redbumlandia
@redbumlandia 2 ай бұрын
Excelente información , deberías hacer una actualización ahora en 2024
@xatario
@xatario 4 жыл бұрын
Recomendacion, vean el video hasta que entiendan cada proceso, sera muy util a futuro
@codificandobits
@codificandobits 4 жыл бұрын
Buena recomendación. De hecho eso me ocurrió cuando leí el paper, tuve que hacerlo varias veces hasta entender el detalle de cada bloque de la red transformer. Un saludo!
@adamojordanfigueroa5296
@adamojordanfigueroa5296 4 жыл бұрын
uff man que buena expliccón y animacion !
@codificandobits
@codificandobits 4 жыл бұрын
Qué bueno que te haya gustado. Un saludo!
@alfonsosarmientomeneses4680
@alfonsosarmientomeneses4680 Ай бұрын
El proceso es rústico y mecánico pero la velocidad de procesamiento lo hace ver inteligente. Posiblemente nuestro cerebro sea más lento pero realmente mucho más inteligente.
@IAVIC
@IAVIC 4 жыл бұрын
Estaría genial que pusieras enlaces para descargar el código fuente
@codificandobits
@codificandobits 4 жыл бұрын
Hola, para este video aún no hay código fuente. Sin embargo en los próximos videos veremos diferentes ejemplos de implementación en Python, y allí dejaré el código fuente. Un saludo!
@jameshopkins3541
@jameshopkins3541 Жыл бұрын
T JDST POR DECI TEMA
@Henrry0
@Henrry0 2 жыл бұрын
Hola, cuales son los algoritmos que intervienen en los transformers.?
@codificandobits
@codificandobits 2 жыл бұрын
Hola Ramón. ¿A qué te refieres con algoritmos? Más que algoritmos la red transformer es una arquitectura donde se combinan diferentes bloques de procesamiento (como embedding de entrada, codificación posicional, bloques atencionales, etc.) para que el modelo aprenda a "entender" el contenido de las secuencias que está procesando.
@Henrry0
@Henrry0 2 жыл бұрын
@@codificandobits buenas tarde y gracias por responder mi pregunta. Lo que pasa que tengo alguna tarea de inteligencia artificial y quisiera saber si ofrece asesoría personalizada. De ser cierto me deja un contacto.
@codificandobits
@codificandobits 2 жыл бұрын
@@Henrry0 Claro que sí, me puedes enviar un mensaje directamente a www.codificandobits.com/consultoria/ comentándome todos los detalles. Un saludo!
@JosePerez-bi7xn
@JosePerez-bi7xn Жыл бұрын
Me interesa entender los mecánismos de atención de estas redes neuronales planeo crear yo mi mecanismo de atención
@camitrading4938
@camitrading4938 Жыл бұрын
BRUTALLLLLLLLLLLLLLLLLLLLLL
@deeper_soundfy5528
@deeper_soundfy5528 2 жыл бұрын
No entendi una goma... Pero la pucha, que interesante es todo esto
@angeljesusquispearroyo9058
@angeljesusquispearroyo9058 8 ай бұрын
Estas quemadisimo mano, muy buen video
@hantondark8876
@hantondark8876 4 жыл бұрын
Hola amigos, estoy haciendo un bot con redes neuronales que pueda aprender de texto, estoy usando transformers pero tengo ciertas complicaciones, no se si alguien qusiiera ayudarme ? saludos
@codificandobits
@codificandobits 4 жыл бұрын
Hola, ¿y qué tipo de transformer estás usando en particular? ¿Alguna librería en especial? Más adelante vendrá un video sobre ese tema. Un saludo!
@hantondark8876
@hantondark8876 4 жыл бұрын
@@codificandobits compañero podria enviarme un msje a mi correo para explicarle mejor ? bajo0123@gmail.com saludos
@alfonsosarmientomeneses4680
@alfonsosarmientomeneses4680 Ай бұрын
Explicalo con un ejemplo.
@johanvalero2928
@johanvalero2928 4 жыл бұрын
Ah.... Mi cabeza va a explotar!!!
@codificandobits
@codificandobits 4 жыл бұрын
Atención, atención, atención... 😉
@CarolinaDaza
@CarolinaDaza 2 жыл бұрын
Lo de traducir código todavía no lo hace tan bien, igual sera cuestión de tiempo.
@progra_kun4331
@progra_kun4331 4 жыл бұрын
Gran video espero los demas sobre como implementarlas gracias desde Venezuela
@codificandobits
@codificandobits 4 жыл бұрын
Hola. No sé si ya viste los demás videos de la serie, con ejemplos de implementación (traducción inglés-español, análisis de sentimientos y BERT). Un saludo!
@progra_kun4331
@progra_kun4331 4 жыл бұрын
@@codificandobits aun no pero lo hare
MACHINE TRANSLATION con Redes Transformer en PYTHON (Tutorial)
50:42
Codificando Bits
Рет қаралды 11 М.
¿Qué son las REDES CONVOLUCIONALES?
12:21
Codificando Bits
Рет қаралды 24 М.
UFC 287 : Перейра VS Адесанья 2
6:02
Setanta Sports UFC
Рет қаралды 486 М.
Sigma girl VS Sigma Error girl 2  #shorts #sigma
0:27
Jin and Hattie
Рет қаралды 124 МЛН
¿Qué son los EMBEDDINGS? | Grandes Modelos de Lenguaje
10:09
Codificando Bits
Рет қаралды 9 М.
¿Qué son los TOKENS? | Grandes Modelos de Lenguaje
13:51
Codificando Bits
Рет қаралды 4,8 М.
What are Transformer Neural Networks?
16:44
Ari Seff
Рет қаралды 165 М.
Transformers - Attention is all you need - Parte 1
21:46
Pepe Cantoral, Ph.D.
Рет қаралды 3,1 М.
GENERACIÓN DE TEXTO con Redes Recurrentes en Python (Tutorial)
11:28
Codificando Bits
Рет қаралды 15 М.
UFC 287 : Перейра VS Адесанья 2
6:02
Setanta Sports UFC
Рет қаралды 486 М.