apify相关内容

如何在 Google Cloud Functions 上使用 Apify

我正在使用 Apify 作为 Google Cloud Functions 部署一些代码.触发后,云函数会静默终止.我做错了什么? 我有一些使用 Apify 0.15.1 的工作代码.它在本地运行良好.一旦部署为谷歌云功能,它会静默失败,没有任何明显的错误.使用 Puppeteer 1.18.1 的等效代码可以正常工作. 我已经使用下面更简单的代码重现了该问题.虽然此示例并不严格要求 ..
发布时间:2022-01-08 10:50:59 前端开发

如何使用 JQuery/Ajax 调用 Apify Google Search Scraper Task?

我正在通过他们的 API 调用学习使用 apify/google-search-scraper.该文档在此处提供. 我对他们的文档有点困惑,因为我是新手.特别是我需要帮助来配置呼叫.它 $.ajax({网址:'',方法:“POST",contentType: "application/json; charset=utf-8",数据 : {},成功:功能(响应){控制台日志(响应数据);}} ..
发布时间:2021-10-26 16:59:44 前端开发

当网页无限滚动时,如何使Apify Crawler滚动整页?

我遇到了一个问题,即我无法使用产品目录页面上的延迟加载来获取网站上的所有产品数据.这意味着它需要滚动直到整个页面加载完毕. 我只获得首页产品数据. 解决方案 首先,您应该记住,有无限的方法可以实现无限滚动.有时,您必须在途中单击按钮或进行任何形式的转换.在这里,我将仅介绍最简单的用例,该用例将以一定的间隔向下滚动,并在没有新产品加载时结束. 如果您使用 Apify SDK 构建 ..
发布时间:2021-05-15 21:11:26 前端开发

如何在Google Cloud Functions上使用Apify

我正在使用Apify作为Google Cloud Functions部署一些代码.触发后,云功能将以静默方式终止.我在做什么错了? 我有一些使用Apify 0.15.1的工作代码.它在本地运行良好.部署为Google Cloud Function后,它会静默失败,没有任何明显的错误.使用Puppeteer 1.18.1的等效代码可以正常工作. 我已在下面使用更简单的代码重现了该问题.尽 ..
发布时间:2021-05-12 19:36:19 前端开发