WEB SCRAPING PYTHON : CARA BEDA CARI BARANG DI SHOPEE INDONESIA. DARI AWAL SAMPAI JADI. STEP BY STEP

[@Mr.Machintoz-tb1vh]

dari semua pencarian , vidio ini yang penjelasannya paling lengkap, public speaking-nya keren, intonasinya sangat jelas. kalau ada kesempatan belajar langsung, saya berharap bisa ketemu. mudah-mudahan buka kelas khusus Pak.

[@sibujangtv]

setuju

[@NightFury3012]

terimakasih pak untuk ilmunya, semoga berkah,alhamdulillah saya berhasil.

[@0xcid]

Mantapp. klo yg pengen mudah bisa pakai instant data scriper

[@programmerpro9686]

Sumpah saya senang sekali dan terinspirasi jadi tolong buatkan lagi project python

[@farabisteam6673]

terimakasih banyak atas ilmu nya, semoga semkin berjaya mang

[@sibujangtv]

om bikinin lagi dong pengajaran scraping ke halaman berikutnya dan scraping per 1 toko. terimakasih om. nice konten....✌

[@ianadriannn]

Bgaimana jika data yg diinginkan berada pada web yg harus login ?

[@fahmulihsan3196]

bang kalau misal kan kita mau explore lagi ke dalam masing2 produk yang tampil bagaimana bang ??? contoh produk yang pertama kita mau ambil sampai ke deskripsi2 nya , kemudian back lagi dan begitu seterus nya .. mohon dijawab bang

[@zulfafauziyyah3444]

I need this one too

[@kanzeker]

Terimakasih tutorialnya. Sangat menginspirasi.

[@spcpbengkulu1676]

om @Programming Di Rumahrafif, om kelupaan bagian lokasi tadi di export ke pandas

[@rozakcenter]

Terima kasih pak tutorialnya, lagi belajar web scraping untuk ambil project luar negeri dengan rate $20 / hours 😂

[@fajarsaepulramadhan3502]

permisi mas saya mau tanya kenapa saat saya akses di gambar shopee, tertera tulisan halama tidak tersedia dan kamu mendeteksi masalah koneksi dari jaringanmu 🙏, selanjutnya data yang diambil pun tidak sesuai dengan contoh di Vidio yang menampilkan produk terjual, terimakasih sebelumnya mas 🙏

[@juanfakhri6476]

Coba bang bahasa dasar selenium Saya sebagai pemula bingung bang kurang ngerti fungsi fungsi apa saja yang ada di selenium. Setelah itu baru buat video web scraping, soalnya biar ngerti fungsi² yang ada di selenium

[@ciymylee]

Pak tolong bantu sayyaaa, ini kenapa di bagian i = 1 for area in data.find_all('li', class_="col-xs-2-4 shopee-search-item-result__item"): print(i) print(area) i += 1 print("---") gaa muncul yaa? padahal engga ada warning

[@Rint0youtub3]

Pak mau nanya di terminal vs code saya gak bisa install pip install bs4 error ( bash: /c/Users/Asus/AppData/Local/Programs/Python/Python39/Scripts/pip: Device or resource busy ) klo pertama saya bisa install pip install selenium tetapi untuk install bs4 gak bisa mohon solusinya pak?

[@dirumahrafif]

kalau koneksinya aman ya Bang?

[@Rint0youtub3]

@@dirumahrafif koneksi internetnya lancar, kenapa ya pak gak bisa install?

[@Rint0youtub3]

Pak mau nanya untuk tampilan home.png saya tidak tampil shopee blank putih, sesudah di run

[@dirumahrafif]

Coba time.sleep waktunya dibuat lebih lama Bang, mungkin halaman belum di-load sempurna

[@mrizkyprayoga6584]

bang mau tanya, di home.png gambar yang keluar bukan homepage tapi access denied, kira-kira saya salahnya dimana ya bang? atau memang tidak bisa lagi scraping di shopee? soalnya saya juga coba pakai link tokopedia dan bukalapak hasilnya sama

[@gearryandreas5788]

Saya dapet kendala yang sama juga bang

[@ArunikaDwipantara]

udah ketemu belum bang masalhnya gmana? saya juga sama

[@dewadurja]

pak.. kalau parsing data dari google maps bagaimana ya pak? saya sudah coba tapi belum berhasil untuk mendapatkan data altitude.

[@kreativaindonesia6215]

Kang update dong shopee sekarang udah update, req pakai google collabs

[@kevinkurnia2259]

bang kenapa pas saya coba jalannin codenya screenshotnya muncul keterangan halaman tidak tersedia apakah metode ini sudah tida bisa?

[@dirumahrafif]

perlu disesuaikan lagi Bang, shopee perlu login dulu kalau tidak salah untuk pencarian

[@kevinkurnia2259]

@@dirumahrafif oke makasih banyak bang balesannya saya coba lagi

[@kevinkurnia2259]

@@dirumahrafif saya juga sudah coba copas all code di github out putnya malah begini loading ke-1 loading ke-2 loading ke-3 loading ke-4 loading ke-5 loading ke-6 jadi excelnya tapi isinya kosong?

[@izzadavid5090]

Bang di output nya gada pilihan code itu gmna cara nampilin nya? Sblmnya sih instal vscode

[@NFRSZ]

halo oom, dari web shopee nya sekarang di haruskan login, ada cara untuk bypass nya tidak ya? kayanya di persulit login dengan chromedriver oleh shopee

[@madansaputro6570]

Bang, saya di bagian gambar nya bertuliskan eror [ src] ... Tuh knp yaa

[@dirumahrafif]

error lengkapnya seperti apa Bang?

[@madansaputro6570]

Line 40, in gambar = area.find('img)['src']

[@dirumahrafif]

kalau posisi di variabel area itu, ada tag img nya gak ya Bang? Saya belum lihat lagi letak element html di shopee sekarang

[@naufalshaquilla8749]

Bang izin bertanya saat proses running di url shopee ada error NameError: name 'drive' is not defined kenapa yah bang. mohon pencerahaanya terimakasih

How can I fix 'NoneType' object has no attribute 'getText' I do not know how to fix it 🤦‍♂🤦‍♂

[@khairihilmisaputra6620]

mantep bnget penjelasannya

[@boymanggalaputra4362]

mau nanya dong mas, kalo misal kita udah ada linknya, nah ada di file excel untuk linknya. nah kita mau tarik lewat python, modul/librarynya apa aja ya?

[@boymanggalaputra4362]

jadi dari excel di import ke ptyhon, baru tarik gitu.

[@dirumahrafif]

pake pandas bisa juga Bang...pake yang fungsi read_excel

[@boymanggalaputra4362]

@@dirumahrafifiya udah pandas dsb, dia kan hanya untuk nampilin frame kalo case gue, tp kok blm ketarik gitu. jd otomatis dr excel lgsg narik gitu

[@INDOMINING_HEAVYDUTY]

Bang kemarin code nya working tapi sekarang ga bisa di pake lagi code nya

[@Apluen]

Wih asik nih channel

[@zaki8551]

om saya pas di import module kok error ya? tapi kalau dicoba di jupyter aman2 aja. btw penjelasannya enak dan lengkap auto subscribe.

[@dirumahrafif]

peringatan nya apa Bang?

[@zaki8551]

@@dirumahrafif from selenium import webdriver ModuleNotFoundError: No module named 'selenium' itu om, saya juga ngga tau kenapa.

[@Myworlddd111]

​@@zaki8551sama kal

[@gearryandreas5788]

@@zaki8551 coba dicek python interpreter nya bang terus cek di version berapa selenium nya di install

[@TheArifbmc]

udah gak bs ya bang? home nya isinya gambar "gak bisa login" kadang blank

[@candymadinaalislami8160]

pak mau tanya, kalau yg Nonetype errornya di bagian gambar itu gmn ya pak? (img)[src] if =! none gmn ya pak? di saya dari 60 jumlah tampilan product, hanya 16 pak yang berhasil di baca. knp gitu ya pak

[@dirumahrafif]

kadang masalah koneksi jg bisa Kak

[@mustofaahmad4262]

kayaknya itu sinyalnya jelek bang terus imagenya ga keload jdi ga ada gambarnya

[@doaldo5070]

cara ini ga works ya kak kalau websitenya harus login dahulu?

[@girisuryamawandi8743]

Coba tambah, fitur buat login dulu bisa sih harusnya

[@riyadlilmi480]

Maksud, "tambah" di sana apa, Kak?​@@girisuryamawandi8743

[@andiadzanbintang9783]

terimakasih banyak pak🙏

[@dirumahrafif]

Semoga bermanfaat

[@kevinkurnia2259]

kalau udh login tapi ketika foto tulisan screenshotnya halaman tidak tersedia kira2 kenapa mas ya?

[@dirumahrafif]

ada error' apa Bang?

[@MuhammadReza-rr1ip]

ada kontak selain email yg bsa dihubungi utk nanya" bg?

[@RahmatullahStory]

mau tanya kak, kalau ngescrap image atau gambar nya lebih satu gimana cara nya ? semoga di bls

[@dirumahrafif]

perlu masuk ke detail halaman dari produknya dulu Kak, baru dilist gambar yang dimiliki

[@JunkerInside]

Yg keluar halaman log in shopee bang, udah log in d browser tp sama aj

[@dirumahrafif]

iya shopee perlu login dulu kalau untuk pencarian, kapan kapan kita update tutorialnya, sekalian menggunakan google colab untuk coding nya

[@craizhunterx9033]

@@dirumahrafif tutorialnya udah diupdate bang?

[@isenginaja90]

bang boleh nanya. for area nya bukan div tapi pre, class bisa nggak?, sama apakah script ini menscrap semua data class pada alamat web, atau hanya pada alamat yang kita buka di chrome? terimakasih

[@dirumahrafif]

bisa Bang harusnya, bisa cek dokumentasi selenium. dan dia mencari berdasar alamat yg kita buka di url tertentu saja Bang

[@anandaa.ramadhan1241]

mau tanya pak, kenapa home.png saya menampilkan halaman login, berbeda dengan yang di tampilkan?

[@dirumahrafif]

coba login ke shopee dulu Bang di browser, sebelum melakukan scraping, sekarang shopee harus login dulu ternyata...

[@azizanwafie1689]

@@dirumahrafif kak..kalau sudah login tapi hasil run terminal nya Cannot assign to read only property ini kenapa ya kak

[@KyySEIKO]

om, aku mau tanya, kok aku invalid syntax itu kenapa yaa?

[@dirumahrafif]

error' lengkapnya seperti apa Bang?

[@shiroiii2835]

Permisi pak, kalau misal mau langsung ke halaman selanjutnya gimana ya? jadi misal mau scraping sampai 10 halaman itu gimana?

[@dirumahrafif]

bisa melalui url nya ditambah parameter untuk menuju ke halaman berikutnya, sampai halaman yg diinginkan bang

[@rifalanugrah307]

permisi bang, kok saya waktu running outputnya gini ya ""

[@gomgom330]

403 : Ga diizinin sama server biasanya

[@mametmeta]

Ha bisa install pip selenium nya gimana ya bang?

[@mutiahmarhamah8953]

Pak, saya email bapak kemarin untuk menanyakan scrapping, boleh dicek pak

[@agivchaedar9823]

permisi bang mau tanya, caranya untuk scrape lebih dari 60 data bagaimana caranya bang? makasih

[@dirumahrafif]

url nya diganti ke - shopee.co.id/search?keyword=macbook&page=0 - shopee.co.id/search?keyword=macbook&page=1 - shopee.co.id/search?keyword=macbook&page=3 dan seterusnya Bang

[@NightFury3012]

@@dirumahrafif bang mau tanya, kalau mau sekaligus ambil semua halaman gabisa ya bang? harus looping 1per satu ya bang? thankyou bang.

[@gamebocils]

punya saya kok udh error aja yaa mulai dari menit 10:24

[@NidarMuharamsah]

Om kalo saya gunakan di google colab bisa kan? Python nya

[@dirumahrafif]

bisa juga Bang

[@user-dz4qq7gv1w]

Klau scraping Di website bagaimana bos caranya

[@dirumahrafif]

hampir sama caranya Bang, penting tahu untuk class atau id css yang digunakan di web tersebut

[@user-dz4qq7gv1w]

@@dirumahrafif ada tutoril vidionya tdk mas,

[@juanfakhri6476]

Ko tiba-tiba langsung lompat ke bagian ini web scraping bang pythonnya?

[@dirumahrafif]

Sellingan Bang, playlist Python tetap jalan Bang... tetap semangattt...hihi

[@Lukmandst]

anjay mantap

[@dirumahrafif]

gass Bang...😁👍

[@adiwidiantoro726]

Om, mau kursus bisa kah?

[@abdullohaddayan6696]

eror bang

Excuse me! How can we save it to database instead of excel ? Can you teach me 🥲🥲

[@dirumahrafif]

actually it has the same process, we only have to send the result to our database, and not to our xls file Bro

[@ferdiansatriamulya701]

Halo Pak, mau tanya kalau sekarang sudah tidak bisa ya? karena screenshot saya jadinya halaman tidak tersedia, jadi web nya mengharuskan kita untuk log in dulu, apakah karena harus log in dulu jadi gak bisa? Terima kasih

[@dirumahrafif]

yes betul Bang, saya sudah coba pake selenium belum Nemu caranya lagi, baru nyoba buat chrome extension 😁

[@azzahrahijriah3855]

Kak, kalau mau ambil data review dari pembeli nyaa gimana ya kak?

[@azzahrahijriah3855]

tinggal cari area find untuk rating/review nya aja yaa kak?

[@dirumahrafif]

iya Kak, dicari area nya, berdasar class css nya

[@skippshop]

hasil ss nya kenapa tulisannya halaman tidak tersedia ya bang?

[@DankerRXN]

gua juga sama bang , terus gimana?