pyspider 如何调用函数调用可以创建新任务

pyspider使用phantomjs获取上一页的链接并获取當前页的内容。

# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取

webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决

pyspider使用phantomjs获取上一页的链接并获取當前页的内容。

# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取

webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决

pyspider使用phantomjs获取上一页的链接并获取當前页的内容。

# 将本页地址交给详情页抓取处理 # 获取到上一页下一页的链接,并进行抓取

webui里调试执行采集脚本可以运行点击任务列表那里的run就不行,只执行一次index_page的代码就结束了根本就没有执行detail_page。detail_page是以fetch_type="js"方式采集数据的
请问是什么原因?如何解决

我要回帖

更多关于 函数调用可以 的文章

 

随机推荐