ChatGPT教我Python爬虫 1小时搞定数千家公司信息

用ChatGPT实现对雪球网公司简介的爬取，一小时左右搞定了几千家公司信息，解救了本来要加班半夜的朋友
这个视频纯按照和ChatGPT交互的过程不断探索和了解，试错--问ChatGPT--解决错误，解决一些日常工作无法用Excel和其他工具解决的问题💻💡🤝
看这个视频你需要：
必要条件：你能使用ChatGPT👨‍💻，电脑上有安装Python（任意环境）📝🖥️
可选条件：一点点的HTML知识（不会也没关系，讲解很傻瓜式）🤔📚
感想：已经是个很不错的学习辅助工具🌟，接下来只需要有人包装出个更好的界面，就可以替代很多线上课程了💼💰📈👌
如果喜欢的话可以通过购买Super Thanks打赏噢！~

[@JustPeng]

感谢各位关注 你们会有兴趣什么其他的用chatGPT教学的主题 可以在这里留言😊

[@eddie75ism]

所以你才是真的 搬運工?

[@JustPeng]

@@eddie75ism 没有 视频是我原创 我只是回复这帖子时候误用了个人KZbin号～

[@eddie75ism]

@@JustPeng 你說你用到個人號，說真的 已由「TheDataQ」設為置頂這個動作很明顯的

[@YeYang-w2d]

有没有抢票软件，微信小程序门票之类

[@苗雨田-b6m]

博主求合作 请你开通一个指定app的爬虫技术 每日我们付给你至少1000-5000rmb

[@yanbol0514]

抱歉，我不能提供任何关于违法或侵犯隐私的指导。爬取网站信息可能违反网站的使用条款，并且可能违反法律法规。如果你需要特定网站的信息，建议直接与网站管理员联系，获取授权访问或使用其提供的 API（如果有的话）。 在进行任何网站爬取操作之前，请确保你已经详细阅读并理解了相关网站的使用条款和隐私政策。此外，你还需要确保你的行为遵循法律法规，以及尊重他人的隐私。 如果你是为了研究或学习目的而进行爬取，建议在符合法规和道德规范的前提下，使用公开可用的 API 或网站提供的合法数据。😀

[@plutopufos9707]

非常实用，prompt是零基础的Python初学者也能理解的程度，感觉思考方式和人类很像，Think step by step, 一步步试错才得到答案

[@whc-kb5ts]

笑裂开了，《感觉思考方式和人类很像》

[@ZiqiiZiqii]

你好，蘋果電腦怎麼安裝和使用python和jupyter呢？可以出一個視頻嗎？謝謝

[@zhangxiang18]

非常棒！受教了！谢谢！

[@UlyssesWrite]

挺不错的，希望接下来能制作更多利用chatGPT的编程尝试

[@businesswarsw]

先收藏下，改天试试！确实需要做个爬虫

[@skyhwakli]

怎么我让chatgpt 写的爬代码，在编译器里爬不出东西呢？

[@boygood9788]

太好了，期待更新

[@hogankk5975]

如果是爬取動態加載的,要用到selenium庫的, 感覺很難形容,也很難爬到

[@rabbitb]

如果這樣爬蟲，是否需要安裝其他插件在chatgpt裏呢？

[@vtulin3097]

不好意思，新手小白請問如何學習：抓取twitter 音訊空間的逐字稿（twitter spaces caption） （目前的直播好像都可以自動產生逐字稿） 有嘗試用chatGPT、Claude、Bard實作都失敗

[@thedataq]

你要不试试我另一个视频介绍的通义听悟？

[@Mark-lg2qe]

你好 右侧的jupyter工具是什么 我怎么安装呢

[@thedataq]

anaconda -->jupyter notebook

[@islandersean2213]

这个不错谢谢分享

[@拥忠]

你好博主 需要定制软件 接单吗

[@傅松波]

很厉害哦

[@cacasun]

试试scrapy

[@佐恩-t1h]

博主你好，接定制爬虫软件吗？

[@mina5088]

可是他的網站需要登錄，還需要驗證 請問是他改版了嗎？

[@thedataq]

也许就是被我这个视频闹的😂

[@3170ccp]

老师，您用ChatGPT多少版本？

[@thedataq]

这里demo的是3.5 虽然其他评论在说ChatGPT拒绝提供爬虫有关的代码 但我最近在另一个项目里也用了类似prompt在3.5和4.0中都得到了爬虫代码

[@陈健民-o8v]

你好，为什么我问GPT,它直接说未经允许进行爬取可能会违反相关规定，就没有了，说一大堆的什么违反规定的东西。

[@thedataq]

看其他网友反馈 可能目前GPT已经禁止了这种内容输出

[@胡晉維-l6b]

版主有飛機能討論嗎

[@张翔宇-c6n]

能爬取Google吗

[@bc.z-1]

虽然不懂，但很有意思

[@kizens]

爬得不错😂

[@howardzhang6221]

学习一下

[@江刘]

怎么联系

[@cssa2893]

静态网站的爬取很简单的

[@kangjames-hs4tg]

要Chatgpt 4.0才行吧 我3.5 发现是不可以爬到信息的。

[@thedataq]

倒也不是。我最近做的这个也是用3.5给到的python爬取代码 zhuanlan.zhihu.com/p/689993707

[@user-xs6ox7mk3k]

有TG联系方式吗？

[@albertwu96]

❤

[@haozhang-im3dv]

演示账号是GTP3.5还是4呢？

[@asiaboy3289]

絕對是3.5，只有plus才能用4，左下角有，這個帳號還沒有買plus，所以是3.5

[@Hideme-m6x]

gpt 应该可以做字幕吧?😂

[@gba3455]

有个缺点，视频的声音太小了。。。

[@imovecss]

autogpt 不香吗？😂

[@counterko]

你試試就知道

[@Tihu_2580]

不咋滴，运行半天，什么东西都没得到

[@拥忠]

@@Tihu_2580

[@Yayagamer]

localhost:8888这个是啥开发环境？

[@thedataq]

就是jupyter notebook

[@user-xs6ox7mk3k]

@@thedataq 有TG联系方式吗？有谷歌谷歌爬虫软件？

[@nicksprivateclassroom6834]

volume is too little

[@SeaSprayX]

这么小声

[@mkunmgs651]

太恐怖了 国内的专家还在给农民办理农民证件呢 文明社会都在用人工智能了

[@petevm]

还不是因为你这种人太多了，我们才不能成为文明社会的

[@雷鸣-r3o]

什么叫农民证哈哈哈有钱能使鬼推磨现在还没有实现科学上网节点限制网速，很多软件还没有比如说笔电电视机手机收看全球中文频道和收听全球中文电台。笔电弄个模拟器播放星火软件卡顿节点体验度很差劲，笔电找不到免费软件收看全球中文频道，连新加坡新传媒8频道找不到在线收看机会限制新加坡人使用哪怕使用VPN软件IP地址新加坡地区一样无法收看，就像中国大陆网民不能使用手机版Tik Tok平台一样，香港人看不了Tik Tok平台一样。这么多年笔电手机体验度很差劲各种各样问题一箩筐没办法解决问题，加上中国移动基站和光纤宽带限制上传网速导致大陆社交平台卡顿等半天延时很严重。抖音平台服务器太小了手机笔电经常卡顿。2015年前新浪微博服务器太差劲上传照片失败率很高，现在抖音平台有点像当年新浪微博服务器一样结果。

[@ZiqiiZiqii]

你好，蘋果電腦怎麼安裝和使用python和jupyter呢？可以出一個視頻嗎？謝謝

[@thedataq]

搜索anaconda 过程和你装其他软件没差