jjzjj

php - CasperJS/PhantomJS 比 Curl 慢得多

coder 2024-01-03 原文

当我尝试 curl www.yelp.com 时，它需要 1.1 秒。然而，使用 CasperJS 检索页面需要超过一分钟的时间!

这正常吗？我如何找出是什么在减慢 casper/phantom 的速度？我怀疑 casper 没有遵循它的某些 HTTP 重定向？

var casper = require('casper').create();
var url = 'http://www.yelp.com';

casper.start(url);
casper.then(function() {
    console.log(  this.getHTML() );
    this.exit();
});

casper.run();

最佳答案

你在 Windows 上吗？如果是，则在使用自动代理时存在神秘的网络问题。有关详细信息，请参阅发行说明:http://phantomjs.org/release-1.9.html .

一般来说，尝试分析网络请求和响应。跟踪网络流量的一种非常简单的方法:

page.onResourceRequested = function (request) {
  console.log('Request ' + JSON.stringify(request, undefined, 4));
};
page.onResourceReceived = function (response) {
  console.log('Receive ' + JSON.stringify(response, undefined, 4));
};

如果您需要时间等，您需要进一步调整它。阅读有关此 Network Monitoring 的文档特征。

关于php - CasperJS/PhantomJS 比 Curl 慢得多，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/15859454/

PhantomJSCasperJSsectioncaspercodephpweb-scrapingscreen-scraping

有关php - CasperJS/PhantomJS 比 Curl 慢得多的更多相关文章

  1. ruby - 在 Ubuntu 14.04 中使用 Curl 安装 RVM 时出错 - 2

    我试图在Ubuntu14.04中使用Curl安装RVM。我运行了以下命令:\curl-sSLhttps://get.rvm.io|bash-sstable出现如下错误:curl:(7)Failedtoconnecttoget.rvm.ioport80:Networkisunreachable非常感谢解决此问题的任何帮助。谢谢 最佳答案 在执行curl之前尝试这个:echoipv4>>~/.curlrc 关于ruby-在Ubuntu14.04中使用Curl安装RVM时出错，我们在Stack

  2. ruby-on-rails - 这个 C 和 PHP 程序员如何学习 Ruby 和 Rails？ - 2

    按照目前的情况，这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持，但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开，visitthehelpcenter指导。关闭9年前。我来自C、php和bash背景，很容易学习，因为它们都有相同的C结构，我可以将其与我已经知道的联系起来。然后2年前我学了Python并且学得很好，Python对我来说比Ruby更容易学。然后从去年开始，我一直在尝试学习Ruby，然后是Rails，我承认，直到现在我还是学不会，讽刺的是那些打着简单易学的烙印，但是对于我这样一个老练的程序员来说，我只是无法将它

  3. ruby - ruby 中等效的 curl 命令 - 2

    我有一个运行良好的curl命令，但我需要在ruby​​脚本中自动执行它，curl命令:curl-uusrname:pwd-XPOST--data"del=false&val=100"http://localhost:1111/sample/path我写了下面的代码:uri=URI::HTTPS.build(:host=>"localhost",:port=>1111)uri.path=URI.escape("/sample/path")client=Net::HTTP.new("localhost","1111")req=Net::HTTP::Post.new(uri.request_

  4. ruby - ruby 中的 400 个错误请求但不是 curl - 2

    我正在尝试在ruby​​中发出https发布请求，它在curl中工作，但我在ruby​​中收到400错误请求，我无法弄清楚原因。这是ruby代码:require'rubygems'require'net/https'require'uri'require'json'uri=URI.parse("https://api.parse.com/1/push")http=Net::HTTP.new(uri.host,uri.port)http.use_ssl=truehttp.verify_mode=OpenSSL::SSL::VERIFY_NONEreq=Net::HTTP::Post.ne

  5. ruby-on-rails - Rails 还是 Sinatra？ PHP程序员入门学习哪个好？ - 2

    按照目前的情况，这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持，但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开，visitthehelpcenter指导。关闭10年前。我使用PHP的时间太长了，对它感到厌倦了。我也想学习一门新语言。我一直在使用Ruby并且喜欢它。我必须在Rails和Sinatra之间做出选择，那么您会推荐哪一个？Sinatra真的不能用来构建复杂的应用程序，它只能用于简单的应用程序吗？

  6. ruby - 为什么有七个对象的新散列比六个长度的散列慢得多？ - 2

    我发现当我新建一个有七个对象的哈希比六个长度的哈希要慢得多。我知道散列的长度会影响性能。但我不知道为什么七是一个特殊的。这里是基准代码(Ruby2.2.3):require'benchmark/ips'Benchmark.ipsdo|x|x.report(5){{a:0,b:1,c:2,d:3,e:4}}x.report(6){{a:0,b:1,c:2,d:3,e:4,f:5}}x.report(7){{a:0,b:1,c:2,d:3,e:4,f:5,g:6}}x.report(8){{a:0,b:1,c:2,d:3,e:4,f:5,g:6,h:7}}x.report(9){{a:0,

  7. ruby - Ruby 对 curl 进行系统调用的正确语法是什么？ - 2

    要刷新Redmine，我需要SVN从我们的提交后Hookping我们的Redmine安装。我们的提交后Hook是一个生成电子邮件的Ruby脚本。我想插入一个调用:curl--insecurehttps://redmineserver+webappkey此调用在命令行中有效，但当我尝试这样做时:#!/usr/bin/ruby-wREFRESH_DRADIS_URL="https://redmineserver+webappkey"system("/usr/bin/curl","--insecure","#{REFRESH_DRADIS_URL}")这是行不通的。我如何在ruby中做到这一

  8. ruby-on-rails - PHP 魔术方法 __call、__get 和 __set 的 Ruby 等价物 - 2

    我很确定Ruby有这些(等同于__call、__get和__set)，否则find_by将如何在Rails中工作？也许有人可以举一个简单的例子来说明如何定义与find_by相同的方法？谢谢 最佳答案 简而言之你可以映射__调用带有参数的method_missing调用__设置为方法名称以'='结尾的method_missing调用__获取不带任何参数的method_missing调用__调用PHPclassMethodTest{publicfunction__call($name,$arguments){echo"Callingob

  9. ruby - Lisp - 是否适合网络编程/应用程序(交互式)？ ruby 的方式是？ php的方式是？ - 2

    Lisp是否适合Web编程/应用程序(交互式)，就像ruby​​和php一样？需要考虑的事情是:易于使用可部署性难度(尤其是对于编程初学者而言)(编辑)在阅读PaulGraham'sessay之后，我特别提到了CommonLisp.将是我的第一门编程语言。在这方面。这样做合适吗？我听说Clojure的宏功能不如CommonLisp的强大，这就是我尝试学习Clojure的原因。它教授编程并且非常强大。 最佳答案 Lisp是一个语系，而不是单一的语言。为了稍微回答您的问题，是的，存在用于各种Lisp方言的Web框架，例如用于Common

  10. 软件工程毕业设计课题（81）微信小程序毕业设计PHP校园跑腿小程序系统设计与实现 - 2

        项目背景和意义 目的：本课题主要目标是设计并能够实现一个基于微信校园跑腿小程序系统，前台用户使用小程序发布跑腿任何和接跑腿任务，后台管理使用基于PHP+MySql的B/S架构；通过后台管理跑腿的用户、查看跑腿信息和对应订单。意义：手机网络时代，大学生通过手机网购日常用品、外卖外卖、代取快递等已不再是稀奇的事情。此外，不少高校还流行着校园有偿工作，校园跑腿就成了大学生创业服务项目。      　　因为你在校园里，所以不会有进入的限制。并不是所有的外卖平台都可以随意进入校园，比如小黄和小蓝的双打外卖平台。许多大学禁止送餐进入学校，更不用说送餐进入宿舍了。这一措施使得校园服务市场的竞争相对不

随机推荐