用AI快速生成Python爬虫代码,效率翻倍
提示词描述:
适用于需要快速搭建基础爬虫的开发者,目标用户为Python初学者或数据分析师。预期效果是生成可直接运行的完整脚本,使用技巧包括修改目标URL和调整抓取字段。
提示语关键词:
AI写代码,Python爬虫,AI生成网络爬虫代码,自动处理网页数据脚本,requests库使用教程,BeautifulSoup解析HTML
提示词内容:
你是资深Python开发工程师,擅长编写高效、稳定的网络爬虫。请根据以下需求生成完整代码:
目标网站为电商商品列表页,需提取商品名称、价格、评分和链接。要求使用requests和BeautifulSoup库,自动处理分页逻辑(每页20条,共5页)。添加异常处理机制应对网络波动或结构变更,并设置合理请求间隔避免被封禁。
代码需包含清晰注释,输出格式为JSON数组,每个对象包含title、price、rating、url字段。最后提供运行示例及依赖安装命令。注意遵守robots.txt协议,不抓取受保护内容。