作者: - 小程序开发快人一步
本文會跟大家介绍如何在本地使用知晓云云函数 API 与 cheerio 开发一个图片爬虫,并使用 webpack 与 mincloud 将代码打包并上传部署到知晓云
- 其他:知晓云 Node SDK(云函数内置)
最终我们会使用以下两个命令来部署与测试
由于使用的是 v4 的 webpack,所以只需要很少的配置就可以了
云函数作为一个模块在沙箱环境中被調用执行,该模块需要暴露出一个 main 方法模块代码结果如下:
我们的 webpack 入口文件需要暴露出一个函数(签名为:function (event, callback)),打包后就可以生成一个給个跟上面一致的模块文件(在 webpack.config.js 中已经定义了)所以我们的入口文件主要结构如下:
这里分为 4 个步骤:
- 解析页面,抓出所有 img 标签中的 src
- 将丅载下来的图片上传到知晓云
使用知晓云 Node SDK 的 request 方法将网页下载下来(不能直接使用其他第三方 request 包):
跟 npm 一样部署前需要先登录,请参照文檔配置
使用以下命令即可将云函数部署到知晓云。
使用以下的命令来测试:
执行成功后即可在知晓云文件模块看到抓取到的图片
关注「知晓云」公众号点击菜单栏「知晓云」-「知晓课堂」,获取更多开发教程
发布了41 篇原创文章 · 获赞 5 · 访问量 2万+