pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决
pyspider使用phantomjs获取上一页的链接并获取當前页的内容。
# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取
webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决