023 Web Scraping 2: DevTools, elementos HTML y scraping con REQUESTS y BEAUTIFULSOUP [curso Python]

[@pk2k2]

He hecho el ejercicio y he hecho el web scraping con la web que necesitaba. No puedo estar más contento.

[@pk2k2]

Hola Friki, crees que podrías incluír en el video, la creación de un Data Frame + exportación a excel? Yo he intentado lo siguiente sin éxito: import pandas as pd d = {} #este sería el diccionario de salida df = pd.DataFrame(d, columns=['URL', 'id.', 'Nombre_producto', 'url_imagen', 'plataformas', 'valoración', 'precio_antes', 'precio_ahora']) df Muchas gracias.

[@FRIKIdelTO]

la librería pandas aún no la domino... es algo que tengo pendiente pero nunca encuentro el momento de atacarle... no obstante, casi seguro que en un futuro habrá vídeo de ello...

[@pk2k2]

@@FRIKIdelTO Hola Friki, le pregunté a ChatGPT y me lo dijo. Sé que no es lo mejor pero por si te sirve.

[@jorgeachar8320]

No me pude contener la emoción y comencé a saltar y festejar como si fuera un gol de Messi jajajaja desde hace meses que venía frustrado con una función de petición de información a una web que quería implementar en mi programa por que de verdad no le entendía a requests... ví muchos tutoriales, pero este les ganó a todos por goleada! de corazón muchísimas gracias, al fin pude lograr la función que quería y como yo quería! Mil gracias. Ya me suscribí y continuaré viendo los demás videos del canal, abrazo enorme!

[@mme-jt7fd]

He estado buscando mucho contenido para web scrapping y por el momento estos tutoriales son los mejores que he visto con mucha diferencia. Gracias por compartirlo!

[@Cryptoprofitnews]

es un buen contenido que realmente me hace falta y esta muy bien explicado y conciso. le dare like a todos los videos y ya me suscribi

[@untalmartin627]

Muchas gracias FRIKIdelTo por compartir tus conocimientos. He realizado (pagado) cursos de Python y en ninguno me brindaron tantos conocimientos sobre este lenguaje como tu. Un fuerte abrazo desde Argentina.

[@pablogenero1678]

Hola, gracias por compartir! Muy interesante. Mientras veía el video escribía el código en un notebook de Jupyter en paralelo. Me pasa que la barra de control de KZbin (para pausar y con el progreso del video, lo que aparece en la parte de abajo) por momentos queda por encima del código que estas escribiendo, ya que también estas en la parte inferior. Un consejo para futuros videos es que si puedes hacer que lo que escribes quede mas en el medio de la pantalla, así no queda oculto con la barra del video. Saludos!!

[@FRIKIdelTO]

Te entiendo, no había caído en eso. Lo tendré en cuenta en el futuro. Gracias por la sugerencia.

[@yuplasencia]

Un crack! la mejor explicación que he visto hasta ahora.

[@alfonsozeta]

Ya te comenté en otro vídeo, y vuelvo a hacerlo aquí. Estoy intentando desarrollar mi primera aplicación full-stack y he hecho un detour de mi roadmap para aprender web scraping y poder obtener los datos con los que quiero trabajar. Después de varios días buscando, di con tu curso y voy por este video 23. He tenido problemas con el tema del captcha que aunque modifique el User Agent me lo sigue pidiendo, pero espero solucionarlo en el futuro. No sé si conseguiré "scrapear" la web con la que tengo pensado hacer mi aplicación, pero acabo de conseguir sacar el precio de un producto como haces en el ejemplo, y parece que voy por el buen camino, gracias a tu curso. Así que nada, like y me suscribo porque el currazo que te has pegado lo merece. Gracias!

[@FRIKIdelTO]

Gracias a tí 😅

[@vrdarkal]

Brutal!, desde hace tiempo necesitaba estos videos. Ya le estoy sacando full utilidades a tus videos. Gracias crack.

[@_isDev]

por lejos! la mejor explicación. Un crack hermano!

[@gallegoenlaluna]

Buen video y genial curso!!! Muchas gracias por todo este contenido, lo estoy aprovechando muchísimo. Por cierto, en el 26:52, en el inspector se puede ver ASCII art ;)

[@faridgonzalez9292]

Bro, te amo jajajajaja hoy te descubro, hoy me suscribo. Eres el mejor

[@brandonmissaelgarciaaguirr7719]

Eres un crack me volví adicto al curso llevo dos dias con el y ya llegue aqui

[@FRIKIdelTO]

Pued aún te queda lo mejor! 😉

[@Inaki_L]

Hola FikiDelTO, me encantan tus videos y explicaciones, me están sirviendo de mucho. Sigue así ;-) .....

[@shekory]

Sin duda alguna excelente explicación y edición de video.

[@mashimaro2005]

Exelente amigo gracias bien detallado y claro tu explicación , éxitos totales sigue adelante

[@FRIKIdelTO]

Muchas gracias

[@roximolinamendoza6013]

hola buen video genial el curso, estoy suscrita, gracias por compartir tus conocimientos

[@arguimano6426]

Muchas gracias de nuevo por tu contenido

[@CarolinaAvilaCoral]

Muy buena clase, gracias por mostrar tantos ejemplos!

[@silvinaromero9713]

Muy buenos tus videos, se aprende mucho, un saludo!

[@gonzaloalonsorodriguez4929]

Eres un crack, gracias

[@raymundopena1706]

Excelente video y explicación, recientemente suscrito , tengo una pregunta¿Hay alguna interfaz o maneral alguna de hacerlo en un IDEo o no lo sé, para dejarlo de una vez en un archivo? Hay además alguna forma de ordenar las respuestas?

[@FRIKIdelTO]

No entiendo la pregunta...

[@raymundopena1706]

@@FRIKIdelTO es que eran dos

[@FRIKIdelTO]

Pues ninguna de las dos. Explícate mejor por favor

[@domingofdez7492]

Que ocurre si en el caso de dd class_"dd" no es la primera función si no la segunda. Estaba scrapeando otra web donde existe más de una vez esa etiqueta y se encuentra en 2 lugar. Gracias!!!

[@FRIKIdelTO]

mira a ver si ambas clases difieren en algún otro atributo y usa eso a tu favor Sin más información del caso concreto no puedo ayudarte más

[@DiegoAz.14]

Excelente tutorial, amigo una pregunta, si quiero mostrar articulos de entradas de wordpress como hago, ya que hice con find_all pero me muestra siempre uno solo, entonces que hice tuve que actualizar nuevamente page_source para tomar, siempre hay que hacer eso ??

[@FRIKIdelTO]

Quizá no hiciste findall en el elemento que corresponde.

[@Pinkman443]

Estaba siguiendo el tutorial y a día de hoy, el título está dentro de un h2 en vez de un h1 y no hay precio anterior (sipongo que solo aparece si está en oferta el artículo).

[@zeroes5237]

bro, disculpa, esto esta en Github?, sino, podrías compartir el ejemplo final por favor? mas que nada como una referencia para momentos en los que no tengamos el video a la mano. Muchas gracias por tu trabajo.

[@FRIKIdelTO]

No. No lo está. El código lo tenéis en el vídeo. Toca teclear...

[@vargaswildcat]

Hola my friend, por un lado no me funciona el código de colores que tienes puesto y por otro lado, no se porque pones al final de la impresión en la línea 81 el que imprima en gris, supongo que para que lo siguiente lo imprima en gris no?

[@FRIKIdelTO]

Lo hago para "resetear" el color. De tal forma que si surge algún error, este se vea en gris y no del último color activado. Manías mías supongo...

[@vargaswildcat]

@@FRIKIdelTO Lo suponía, es que no pude probarlo porque parece ser que en la terminal de windows, no van esos códigos, thankss!!

[@FRIKIdelTO]

Instala windows terminal. Lo explico en los primeros vídeos del curso

[@vargaswildcat]

@@FRIKIdelTO Hecho!!

[@alex.dev7x7]

Gran video. Enhorabueba. Podrías compartir el código de prueba? Gracias

[@blackguitarluz]

eres un grande

[@giovasan]

Hola saludos desde Colombia. que pasa si quiero que me devuelva un h1 pero no tiene ninguna clase. Esta contenido en varios div los cuales no son únicos sino que aparecen en varias partes de la página (la cual no es la misma del ejemplo ya que desde Colombia no deja ingresar). cuando lo hago con alguno de estos div devuelve nada (nontype), De echo de varios datos que he tratado de obtener el único dato que me ha dejado traer es soup.title.text. Grande Friki!!

[@FRIKIdelTO]

Envíame el html a [e-mail] y te lo miro

[@CristianLeva615]

Amigo, muchas gracias. Quisiera saber que proyectos podria realizar con esta informacion ¿Me podrias ayudar?

[@FRIKIdelTO]

Eso ya entra en la imaginación y creatividad de cada uno. Tienes mi bot de Telegram como ejemplo y muy pronto os mostraré otro bot más para que veáis otro ejemplo más...

[@xxLopodoxx]

Hola, no me queda claro si este curso es para hacer scraping sobre un producto en concreto y publicarlo en tu telegram por ejemplo. yo lo que estoy investigando es hacer scraping y guardarlo en mi base de datos que para mi proyecto creo que lo mejor es usar mongo

[@FRIKIdelTO]

Es para hacer web scraping en general, entre otras cosas. Lo que hagas luego con los datos es cosa tuya...

[@xxLopodoxx]

@@FRIKIdelTO a vale gracias, entonces investigare mas para saber como exportar los datos y guardarlos en mi bbdd. igualmente me veré tu curso completo. muchas gracias

[@ChillVibesxx]

Hola me gastaría saber si en algún momento del curso explicas como generar un bot de telegram como los del inicio de cada video

[@FRIKIdelTO]

Durante el curso, explico todo lo necesario para poder hacerlo.

[@ChillVibesxx]

@@FRIKIdelTO Muchas Gracias hasta el momento de maravillas gracias por compartir este conocimiento

[@Cryptoprofitnews]

Menos mal que ya se html y css

[@user-sh7tg9zk8m]

Disculpe profe y si me sale un None 17:48

[@FRIKIdelTO]

Pues o no has seleccionado bien el elemento o no has obtenido bien el html.

[@jorgemugarte7543]

@@FRIKIdelTO Me pasa lo mismo, al parecer el html que se obtiene de respuesta al hacer la petición es diferente al de la página, hay algún error en eso o alguna solución?

[@accesibilidadconluismi]

Tienes que fijarte que @FRIKIdelTO ha cogido "h1" y muchos de los productos vienen con "h2". Mira si es eso.

[@edelsonamoretti]

Buen video pero a hoy no puedo ingresar a la pagina, esta caida, ¿sera porque estoy en Perú?

[@FRIKIdelTO]

Pues será por eso porque la página sigue activa

[@edelsonamoretti]

@@FRIKIdelTO bueno lo intentaré ckn otra página, gracias por todo el material amigo

[@rafita930]

Solicito generar dinero, con estas herramientas.

[@FRIKIdelTO]

Yo muestro las piezas. Cómo montéis el puzle y con qué fin es cosa vuestra.

[@EloyGurucharriHernandez]

Efectivamente, no paré el vídeo...

[@Christo_tfs]

Gracias

[@BeFinisher]

🫡🫡🫡🫡🫡

[@jolivera4058]

soy de los que no paro el video :P