在我们的 LAMP 站点上,我们遇到了一些服务必须多次调用数据库以提取数据的问题。通常这是在 PHP 中完成的方式(至少我的经验)是串行的;这显然是低效的。我们可以通过使用缓存和聚合一些查询来减轻一些低效率;但在某些情况下,我们仍然需要进行多次数据库调用。
理想情况下,我会同时向数据库或 Web 服务异步发送尽可能多的请求,但 PHP 似乎不支持开箱即用的模式。这些是我所知道的解决方法。
我们目前使用 Gearman 来处理异步任务。我可以将我们的一些服务重写为 Gearman 任务,并使用它来对数据库和服务进行异步调用。然而,我们有过 Gearman 占用大量进程和内存的糟糕经历;在某些情况下强制使用重新启动我们的生产服务器,因为它们变得无响应。但是,我相信由于脚本中的一些错误我能够追踪到这个问题并且我相信我已经修复了它。但是我觉得如果我们使用 Gearman 作为处理异步任务的任务池/管理器,这种不稳定和过度的资源消耗可能会再次出现。
或者,我正在研究 pthreads。这似乎是一个更好的选择,因为它不需要运行 Gearman 守护进程就可以工作,而且它完成了我想要的。甚至似乎有一个不错的框架,amphp。我们决定配置一个启用 pthreads 的测试服务器。然而,我们不知道的是 pthreads 需要更改我们的 Apache 配置,特别是从 httpd(又名 prefork)转到 httpd.worker。诚然,我不是经验丰富的 Apache 管理员,所以我什至不确定进行此更改会产生什么后果。因此,现在我对使用它犹豫不决,至少在我有时间对此进行更多研究之前。
所以我的问题是,如果我想在 PHP 中执行异步请求,我应该坚持使用 Gearman 知道我可能会遇到问题,还是应该冒险使用 pthreads,即使它似乎需要更改我们的 Apache坦率地说,我不知道它将如何影响我们的网站的配置?或者,对于我正在尝试做的事情,也许还有另一种我还不知道的选择。
服务器配置:
最佳答案
首先,异步和并行并发之间存在着深刻的混淆。
异步执行意味着各个任务的指令是交错的,因此任务相对于彼此并发运行。
并行执行意味着各个任务的指令并行执行,因此它们在时间上同时运行。
您可以找到有关异步和并行并发的更完整解释,以及漂亮的图片 here .
Gearmans 多处理模型允许并行执行,pthreads 也是如此。
当您说 PHP 不支持异步执行时,这是错误的。
是错误的,因为异步执行不是需要语言支持才能实现的东西。只是交错指令并不那么复杂,here是一个适用于我们需要关心的任何 PHP 版本的示例。
像这样的交错指令会造成代码困惑,而且只有在非阻塞 I/O 的情况下才值得这样做。在这种情况下,交错指令允许您消除等待,方法是在同步阻塞代码会强制您等待时执行另一个任务的指令。这减少了总执行时间。
现代版本的 PHP 确实有设施(生成器)来使这变得更好,而且正如您已经知道的那样,存在许多框架来尽可能地抽象出困难。
现在,我们开始在 Web 服务器的前端使用 pthreads。在最新版本的 pthreads 中,这是强制禁用的。在 Web 应用程序的前端创建(真实的、内核的)线程没有充分的理由,也没有合适的时机,它永远没有意义。
有关该决定的更多详细信息,请阅读 this .
因此,展望 future ,您的预期用途是不可能的。
没有什么比说 pthreads 做到这一点更让我高兴的了,但我认为这不是真的。我认为您关注的是错误的优化类型。
如果您的数据库模式或服务器有问题,请解决该问题。如果您需要向外部 API 发出多个请求,请尽可能采用最简单的方法;异步非阻塞 I/O。
在任何特定任务中以 gearman 或 pthreads 的形式抛出线程只能保证做一件事; 让它更复杂。
关于php - PHP : Gearman vs. pthreads 中的异步数据库/服务调用,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33219294/
总的来说,我对ruby还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用
我试图在一个项目中使用rake,如果我把所有东西都放到Rakefile中,它会很大并且很难读取/找到东西,所以我试着将每个命名空间放在lib/rake中它自己的文件中,我添加了这个到我的rake文件的顶部:Dir['#{File.dirname(__FILE__)}/lib/rake/*.rake'].map{|f|requiref}它加载文件没问题,但没有任务。我现在只有一个.rake文件作为测试,名为“servers.rake”,它看起来像这样:namespace:serverdotask:testdoputs"test"endend所以当我运行rakeserver:testid时
作为我的Rails应用程序的一部分,我编写了一个小导入程序,它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是,与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存,我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关,因为当我删除对LDAP内容的调用时,内存使用情况会很好地稳定下来。此外,不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray,它们都是LDAP库的一部分。当我运行导入时,内存使用量最终达到超过1GB的峰值。如果问题存在,我需要找到一些方法来更正我的代
Rails2.3可以选择随时使用RouteSet#add_configuration_file添加更多路由。是否可以在Rails3项目中做同样的事情? 最佳答案 在config/application.rb中:config.paths.config.routes在Rails3.2(也可能是Rails3.1)中,使用:config.paths["config/routes"] 关于ruby-on-rails-Rails3中的多个路由文件,我们在StackOverflow上找到一个类似的问题
我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i
我需要从一个View访问多个模型。以前,我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它,但这似乎不是“ruby方式”,我将需要在不久的将来访问更多模型。这可能会变得很脏,是否有针对这种情况的任何技术?注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展,本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向,这似乎很麻烦。最终从任何
我在我的项目中添加了一个系统来重置用户密码并通过电子邮件将密码发送给他,以防他忘记密码。昨天它运行良好(当我实现它时)。当我今天尝试启动服务器时,出现以下错误。=>BootingWEBrick=>Rails3.2.1applicationstartingindevelopmentonhttp://0.0.0.0:3000=>Callwith-dtodetach=>Ctrl-CtoshutdownserverExiting/Users/vinayshenoy/.rvm/gems/ruby-1.9.3-p0/gems/actionmailer-3.2.1/lib/action_mailer
exe应该在我打开页面时运行。异步进程需要运行。有什么方法可以在ruby中使用两个参数异步运行exe吗?我已经尝试过ruby命令-system()、exec()但它正在等待过程完成。我需要用参数启动exe,无需等待进程完成是否有任何rubygems会支持我的问题? 最佳答案 您可以使用Process.spawn和Process.wait2:pid=Process.spawn'your.exe','--option'#Later...pid,status=Process.wait2pid您的程序将作为解释器的子进程执行。除
刚入门rails,开始慢慢理解。有人可以解释或给我一些关于在application_controller中编码的好处或时间和原因的想法吗?有哪些用例。您如何为Rails应用程序使用应用程序Controller?我不想在那里放太多代码,因为据我了解,每个请求都会调用此Controller。这是真的? 最佳答案 ApplicationController实际上是您应用程序中的每个其他Controller都将从中继承的类(尽管这不是强制性的)。我同意不要用太多代码弄乱它并保持干净整洁的态度,尽管在某些情况下ApplicationContr
我想向我的Controller传递一个参数,它是一个简单的复选框,但我不知道如何在模型的form_for中引入它,这是我的观点:{:id=>'go_finance'}do|f|%>Transferirde:para:Entrada:"input",:placeholder=>"Quantofoiganho?"%>Saída:"output",:placeholder=>"Quantofoigasto?"%>Nota:我想做一个额外的复选框,但我该怎么做,模型中没有一个对象,而是一个要检查的对象,以便在Controller中创建一个ifelse,如果没有检查,请帮助我,非常感谢,谢谢