会员服务
default sy_dh
在线客服
请教各位大佬:如何使用ChatGPT有效实现爬虫?ChatGPT给出的爬虫代码,运行 - AI副业赚钱 - 富裕者联盟社区 - Affiliate营销圈

3回答

0收藏

请教各位大佬:如何使用ChatGPT有效实现爬虫?ChatGPT给出的爬虫代码,运行

AI副业赚钱 AI副业赚钱 275 人阅读 | 3 人回复 | 2023-03-12

请教各位大佬:如何使用ChatGPT有效实现爬虫?ChatGPT给出的爬虫代码,运行不报错,但总是拿不到结果。

是否需要特定的限制要求呢?

示例:
下面是一个简单的Python爬虫示例,可以抓取国家药品监督管理局的新闻页面
[url=https://www.nmpa.gov.cn/ylqx/ylqxjgdt/index.html]https%3A%2F%2Fwww.nmpa.gov.cn%2Fylqx%2Fylqxjgdt%2Findex.html[/url





加入社区,可阅读全站10w+资源

 非会员试读19%,加入社区后可阅读全文 

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
分享到:
回复

使用道具 举报

回答|共 3 个

Frank老师

发表于 2023-3-12 10:54:52 | 显示全部楼层

测试的网页是简单网页,不存在复杂的网页结构、反爬虫逻辑
回复

使用道具 举报

大铭

发表于 2023-3-12 11:00:42 | 显示全部楼层

# 查找所有新闻标题和链接 news_list = soup.find_all('div', {'class': 'piclist2 clearfix'}) 强烈怀疑这两句是胡写的 这个网页标题的部分是用一个 ul 结构,对应的 selector 是 #ariaqkarf74ykg0 > div.w1200-auto.bg-fff > div > div.list > ul 或者寻找 class 是 list 的 div 下的 ul 然后遍历其中的 li 即可
回复

使用道具 举报

James

发表于 2023-3-12 11:25:50 | 显示全部楼层

爬虫里面还是带着业务的,已经不算是技术问题了,chatGPT应该是没有办法很好的帮你解决具体业务问题的,比如文章图片具体在哪个dom节点
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭