Tutorial: GOOGLE COLAB e Inteligencia Artificial

🔥🔥Academia Online🔥🔥: cursos.codific...
🔥🔥Asesorías y formación personalizada🔥🔥: www.codificand...
En este tutorial veremos todos los detalles de Google Colab, la plataforma web de Google que permite ejecutar código Python en la nube poniendo a nuestra disposición máquinas virtuales con alta capacidad de cómputo, lo que facilita el desarrollo de modelos de Machine y Deep Learning incluso si no contamos con equipos de escritorio lo suficientemente potentes.
Descarga el código fuente en: www.codificand...
🔴 ** VISITA WWW.CODIFICANDOBITS.COM **
En el sitio web encontrarán artículos y podrán descargar material útil para el desarrollo de aplicaciones de Machine Learning y Ciencia de Datos. También podrán ponerse en contacto conmigo si están interesados en servicios de formación, charlas o asesorías... Y muy pronto podrán acceder a los cursos online que estoy preparando.
🔴 ** DEMÁS VIDEOS DE LA SERIE **
🎥 Introducción a TensorFlow 2.0: • Introducción a TENSORF...
🎥 Redes Neuronales, Convolucionales y Recurrentes con Tensorflow 2.0 y Keras (Tutorial): • Tutorial TENSORFLOW 2....
🔴 ** ÚNETE A CODIFICANDO BITS Y SÍGUEME EN MIS REDES SOCIALES **
✅ Sitio web: www.codificand...
✅ Suscríbete: www.youtube.co...
✅ Facebook: / codificandobits
✅ Instagram: / codificandobits
✅ Twitter: / codificandobits
🔴 ** ACERCA DE MÍ **
Soy Miguel Sotaquirá, el creador de Codificando Bits. Tengo formación como Ingeniero Electrónico, y un Doctorado en Bioingeniería, y desde el año 2017 me he convertido en un apasionado por el Machine Learning y el Data Science, y en la actualidad me dedico por completo a divulgar contenido y a brindar asesoría a personas y empresas sobre estos temas.
🔴 ** ACERCA DE CODIFICANDO BITS **
El objetivo de Codificando Bits es inspirar y difundir el conocimiento en las áreas de Machine Learning y Data Science.
#machinelearning #python

[@codificandobits]

🔥🔥Academia Online🔥🔥: cursos.codificandobits.com/ 🔥🔥Asesorías y formación personalizada🔥🔥: www.codificandobits.com/servicios/

[@jrvega79]

Muy clara la explicación

[@danielnatsu]

Hola Miguel. He estado viendo tus videos y me deja sorprendido lo bien que logras explicar estos temas, la sencillez con la que enseñas, así como la excelente calidad con la que los elaboras. Me has aclarado muchas dudas dado que soy principiante. Te felicito por tu gran trabajo y mucho ánimo! Me suscribo a tu canal.

[@codificandobits]

Hola Daniel, gracias por tu comentario y bienvenido al canal! Qué bueno saber que a pesar de que el tema es a veces complejo, la explicación resulta bastante amena y fácil de entender. Un saludo!

[@luiferubedacamacho4129]

Tienes pocos suscriptores pero viendo tu nivel, tranquilo en lada llegarás a los 100 de miles, sigue asi, excelente trabajo.

[@codificandobits]

¡Gracias por ese comentario Luis! Sí, muy seguramente el canal seguirá creciendo. ¡Un saludo!

[@RobersonHernandez]

Excelente, muy bien explicado muchas gracias

[@antoniotutoriales9991]

Información muy buena, quedaría seguir aprendiendo

[@keveenjhosep5896]

Excelente forma clara y concisa de explicar!

[@codificandobits]

Hola Keveen, qué bueno saber de tí. ¡Gracias por tu comentario! ¡Un saludo!

[@paulcabezas5739]

Muy buena información. Talvez nos podría mostrar la metodología de aplicar redes convolucionales siamesas a partir de un par de imágenes detectando cambios. Saludos

[@emanuelbellido928]

Gracias.

[@josemanuelmanesridaura8874]

Como Siempre... Muy Bueno. Y ante TODO, MUCHAS GRACIAS por COMPARTIR.

[@codificandobits]

A tí un saludo José Manuel, seguimos en contacto!

[@javiersuarez8415]

No sabía usar los TPU, muchas gracias.

[@gabrielperezsanz5801]

Gracias por compartir!!!

[@joalar33]

Excelente video, la he probado con el MNIST fashion y funciona, pero la verdad me gustaría que si es posible hagas uno mas extenso explicando bien lo de la TPU es difícil hacerla funcionar, pero cuando funciona estamos sobre un ferrari.

[@andreashuaman2041]

Muchas gracias, mucha suerte

[@codificandobits]

Gracias a ti por tu comentario. Un saludo!

[@datexland]

Muchas gracias por compartir , excelente trabajo ..

[@codificandobits]

De nuevo un saludo Alexander, y gracias por estar conectado al canal!

[@henry-db]

Genial vídeo, muy buena introducción a Google Colab

[@codificandobits]

Gracias a ti Henry por comentar. Un saludo!

[@bvc_]

Excelente trabajo.... es cuestión de tiempo que aumenten tus seguidores...

[@BenjaSerra]

Creo que es más fácil ajustar las imagenes en array de 28x28 (rows & columns), con cada row de 0 a 225 (usando float), por ejemplo: train_images = train_images/255.0 test_images = train_images/255.0 Genial el video y su edición, ojala te detuvieras más en el código en vez de lanzarlo y explicar lo general. Por ejemplo, tengo duda acerca de por qué esa forma del modelo y no usar : flatten, dense dense, que de todas maneras daria el mismo resultado en menor tiempo con más cantidad de epochs. Saludos!

[@codificandobits]

Hola Benjamín! Claro, el ajuste que tu sugieres también se debería hacer, aunque en ese caso se trata de una normalización del nivel de gris de cada pixel en cada imagen (pasando de 0-255 a 0-1). El que sugiero en el video es más un ajuste de tamaños. Pero en todo caso, y siendo rigurosos, ambos ajustes deben hacerse. Un saludo!

[@BenjaSerra]

@@codificandobits gracias por tu respuesta, saludos!

[@moisesosio2152]

Muy bueno y util el video, muchas Gracias

[@codificandobits]

Gracias por tu comentario Moisés. Un saludo!

[@kchaosfh]

Me quedé pegado en el segundo paso, me tira: FileNotFoundError: [Errno 2] No such file or directory: 'gdrive/My Drive/Colab Notebooks/fashion_mnist_data/train-labels-idx1-ubyte.gz' que estoy haciendo mal >:c

Gracias por el video!!

[@gabrielmartin3107]

Habria alguna forma de hacer una copia de internet solo la parte de texto y solo hasta 2021 para entrenamiento de una IA ?

[@juanmeve837]

que video!! vale oro

[@codificandobits]

😮😮 gracias Juan, un saludo!

[@pablogiri812]

excelente trabajo

[@codificandobits]

Gracias por tu comentario Pablo. Un saludo!

[@rolandohernandez6627]

Como puedo usar Colab a 32bits? Tengo una base de datos y solo puedo trabajarlo con 32bits. Alguien sabe?

[@carlossins993]

Amigo cómo variar la frecuencia de un mismo audio ? Me puedes dar alguna referencia dónde buscar ? Porfavor ....

[@luisjaimeestudioytrabajo7577]

excelente video

[@codificandobits]

😉

[@alejandrogonzalez1598]

Puedo usar colab para hacer website and apps.. Se puede usar js, html, css y otros languages... Que diferencia con firebase..??

[@rubengarcia-xt9qe]

pero el problema es que cuando quieres entrenar un modelo con imagenes en colab, cargar esas imagenes al entorno es un lio,....demora un monton..se hace casi inviable.....

[@capablancastyle]

gracias x la explicación, me gustaría saber si se pueden llamar archivos .py desde google drive a traves del comando import?

[@vozdominicana]

excelente!

[@codificandobits]

😉

[@jomsam]

El tiempo de dicción va muy lento y pausas muy largas, buena información.

[@codificandobits]

Gracias por tu comentario José. Tendré en cuenta estas sugerencias para próximos videos. Un saludo!

[@cursosdesam6218]

Hola. ¿Se puede copiar archivos de una cuenta de google drive a otra cuenta de google drive con una GPU o TPU si estos son mas de 3 millones de datos y alrededor de 16 Terabytes? ¿como sería?. De verdad felicidades, tu explicación fue mejor que la de un profesor

[@ksk5058]

muy buen video, clarito como el agua, puedo ver los peces

[@codificandobits]

😂😂😂

[@fernandozumbajr]

@codificandobits excelente video muy claro y preciso. Gracias por este tutorial. Me podrías indicar cómo se comprimen en ese formato las bases de datos. ?

[@codificandobits]

Hola Fernando. La extensión .gz hace referencia al formato gzip, muy parecido al ZIP convencional. Se puede usar Python para comprimir/descomprimir los datos en este formato. Un saludo!

[@victorhugoninachipena9554]

Genial!

[@codificandobits]

😉

[@pomitax38]

Hola bro, disculpa la molestia, me sale este siguiente error: No such file or directory: 'gdrive/My Drive/Colab Notebooks/fashion_mnist_data/train-labels-idx1-ubyte.gz' Soy principiante en Python, cuál sería el error?

[@codificandobits]

Hola! Quiere decir que en la carpeta "Colab Notebooks" de tu Google Drive, debes tener almacenada la carpeta/archivo "fashion_mnist_data/train-labels-idx1-ubyte.gz".

[@ELParasitoDeLaWeb]

Necesito ayuda para usar una tarjeta de video en colab con el repositorio GitHub tecoGan es una Ia que rescala imágenes a 4k

[@sxfix5312]

¿Alguien sabe como sacar el área de un círculo con esta vaina?

[@xtian_neuralx]

Excelente tutorial. Muchas gracias. Me ayudó bastante. Una solicitud adicional, ¿me puedes ayudar a cómo puedo mantener una sesión conectada, mientras entreno, por más tiempo?. Luego de cierto tiempo se desconecta y no termina de entrenar el modelo

[@codificandobits]

Hola Carlos. Hay algunos trucos con scripts de javascript. Aunque nunca los he usado te sugiero revisar: stackoverflow.com/questions/57113226/how-to-prevent-google-colab-from-disconnecting Un saludo!

[@xtian_neuralx]

@@codificandobits Muchas gracias por la sugerencia. El meme me representa a mi al 100% :P

[@akiralezama708]

Como puedo copiar carpetas de Google drive de otro usuario a mi cuenta de Google usando colab ?? Se puede ?

[@franciscopech366]

Creo si no me equivoco, es posible si copias primero la carpeta compartiendo dicha carpeta de esa cuenta tú cuenta y de ahí la subes en google colab, es la barra lateral izquierda se encuentran las carpetas de google colab, ahí puedes subir los archivos que desees o bien intenta importarlo, no garantizo que funcione, ya que eso se me ocurre de como solucionarlo

[@1061exclavo]

Hola, gracias por el video. Me asalta una duda y agradezco la ayuda para solucionar la: si tengo que construir un conjunto de datos muy grande, también sería útil usar colab? Si la respuesta es si, las funciones que activan por ejemplo la tpu deberían declararse antes de correr mis iteraciones? En mi caso tengo dos conjuntos de datos, el primero contiene tiempos con punteros a filas de otro conjunto de datos, debo crear un conjunto donde los datos del segundo conjunto se organicen y repitan según el valor del puntero. Gracias...

[@codificandobits]

Hola José Luis. Esto depende de qué tan grande sea el conjunto de datos a procesar (en términos de GB), y si necesitas tener la totalidad del dataset cargado en Google Colab para poder desarrollar el modelo. Sí, las funciones para activar la TPU deben declararse antes de correr las iteraciones. De hecho, antes de correr el código mismo debes escoger el "runtime" en el modo TPU. Un saludo!

[@alexij.ariassaravia3784]

Excelente video, este ejemplo que hiciste se podria trabajar con YOLO para el reconocimiento de objetos en video para luego implementarlo en Android Studio?

[@codificandobits]

Hola. Claro que sí, en Google Colab se puede entrenar prácticamente cualquier modelo!

[@alexij.ariassaravia3784]

@@codificandobits y usted podría hacer un tutorial así? Para poder guiarnos

[@xatario]

I LOVE YOU MAN

[@amaurypicotto7671]

No me carga la ruta u acceso a los datos

[@codificandobits]

Hola! ¿Te funcionó finalmente? ¿Puedes copiar acá el error que te aparece?

[@josecarlosquinonespuma4339]

escuche que hay un momento que debes pagar por usar google colab...!!!! si quiero realizar un entrenamiento nuevo con YOLO en colab... se puede?

[@Mary-cn6sd]

Marca error al momento de llamar la carpeta, ayuda...

[@codificandobits]

¿Qué error te aparece?

[@musica-lofi]

El problema es que se llena el disco muy rápido

[@rodrigorecavarren4547]

buen video bro, se podria usar la libreria gdal ?

[@codificandobits]

Hola Rodrigo, gracias por tu comentario. Aunque no lo he probado, en teoría creo que sí debería ser posible usar "gdal" en Google Colab, se instala de igual forma con "pip". Prueba y me cuentas. Un saludo!

[@solangefernandez5836]

Buen vídeo, gracias. Pero tengo una consulta es necesario tener instalado el Python en la máquina para usar el google colab? pregunto esto por que cuando intento hacer la configuración no me aparece la ventana donde se selecciona python, unicamente tengo una ventana para elegir entre None, GPU y TPU. De antemano, gracias por tu respuesta.

[@codificandobits]

Hola Solange. No, no debes instalar Python. Por defecto al crear un nuevo notebook en Google Colab ya viene incluida la última versión de Python. Un saludo!

[@jesuis_jo]

Pero si deberás instalar los paquetes o librerías que tu uses y que por default no se encuentren en el ambiente de Google.

[@misterioenelagua3955]

Me traume, yo solo quería mejorar la calidad de video y audio de un video antiguo, y llegué a este video.

[@gladysrodrigogutierrez4889]

jajaja

[@codificandobits]

😄😄

[@dacv77]

Excelente vídeo. He realizado la prueba con mi conjunto de datos (train = 691563) pero al iniciar el entrenamiento solo me entrena hasta 23053. Esto a que se debe? Muchas gracias.

[@codificandobits]

Hola Diego. ¿Te aparece algún error durante el entrenamiento?

[@dacv77]

@@codificandobits No, ningún error. Porque lo hice en jupyter también pero con cpu y me dio prácticamente el mismo resultado. Lo único es que no se porque aparece los datos resumidos.

[@codificandobits]

@@dacv77 ¿Me puedes compartir un pantallazo por inbox en facebook? (facebook.com/codificandobits)

[@dacv77]

@@codificandobits Claro que si. Muchas gracias.

[@wilmersaavmend8749]

Todo estaba bien hasta que me salio el error FileNotFoundError: [Errno 2] No such file or directory: 'gdrive/My Drive/Colab Notebooks/fashion_mnist_data/train-labels-idx1-ubyte.gz' ( al momento de correr el acceso a google drive porfa como lo soluciono., muchas gracias saludos

[@codificandobits]

Debes cerciorarte de que en tu Google Drive exista la carpeta "Colab Notebooks/fashion_mnist_data/". Un saludo. Me cuentas

[@altaga]

LOL! Justo hoy apenas estuve aprendiendo a entrenar modelos YOLO en google colab jajaja el problema que veo con esta herramiento esque la reconexión puede darte en la torre y perder todo el progreso, tu qué opinas de eso? :/

[@claudioayma9906]

Tienes 12 horas en google colab que es el Limite. Si muestras inactividad en media hora te quitan la sesión, he leido en stackoverflow de que inyectan codigo JS creando un evento que hace click en una cierta parte de google colab, lo cual se soluciona el problema de la inactividad de media hora. Ademas hace una semana ya salio Google Colab Pro, tienes mas GPU, TPU y tiempo de sesión.

[@codificandobits]

Hola Altaga! Sí, como lo menciona Claudio Ayma, el límite son 12 horas. Una opción que existe es guardar progresivamente el modelo (modelo.save en Keras) a medida que se va entrenando. Así, si culmina la sesión de 12 horas en todo caso es posible reiniciar una nueva sesión y retomar el entrenamiento con el modelo guardado. Un saludo!

[@codificandobits]

Hola Claudio, gracias por tu comentario. Una pregunta: ¿de casualidad tienes el enlace de stackoverflow que mencionas? No había oído hablar del código JS. Un saludo!

[@altaga]

@@codificandobits el código del que habla es este. medium.com/@shivamrawat_756/how-to-prevent-google-colab-from-disconnecting-717b88a128c0

[@codificandobits]

@@altaga Gracias!

[@gabrielmartin3107]

Una tpu permitiria hacer labores de cpu y de gpu ???? Supongo que la respuesta es si y mucho mas rápido y con menos consumo. Entonces, pk nos siguen vendiendo toneladas de mierda carisima?

[@germanaguirre9584]

.

[@henry-db]

Si quieres ver el mundo arder, usa PyTorch en colab :)

[@codificandobits]

:) :) :)

[@ssebastiancardona]

no entendi ni forro XD

[@leonardog27]

Buenos días. Hay como usar TPU para los modelos de Open AI Jukebox? Muchas gracias. colab.research.google.com/drive/1XVxvMYv789oUsszkpm8E0DWWHGEIDJYW

[@codificandobits]

Hola Leonardo. No he probado pero en teoría creo que sí. La única limitación es que en Google Colab, versión gratuita, tienes un número máximo de horas para entrenar los modelos, después de este número máximo debes reiniciar el entrenamiento. La alternativa es almacenar progresivamente el modelo durante el entrenamiento. Un saludo!

[@alejandrogonzalez1598]

No entendi ni madres.. Y 😵

[@codificandobits]

😕😕

[@alejandrogonzalez1598]

@@codificandobits De hecho muy buena informacion lo que pasa es que apenas voy aprendiendo..acabo de comprar un curso de python y java ,,pues echandole ganas, sabes si puedo usar esta nube para cualquier lenguaje y que otras plataformas existen para programar sin tener que descargar los lenguajes a mi lap top ...?¡

[@sebxrey1yt396]

no entendi niuuna wea -.-

[@codificandobits]

😕