jjzjj

linux - 让 GNU Octave 与多核处理器一起工作。 (多线程)

coder 2023-06-16 原文

我希望能够使用 gnu octave 对多线程进行编程,这样它将利用多个处理器。

我在 Fedora 17 Linux 上安装了 GNU Octave 并执行了以下操作:

yum install octave

在我的电脑上安装了最新版本的 Octave,3.6.2。它工作得很好,但是当你将两个巨大的矩阵相乘时,它会使 Octave 使用的一个 CPU 陷入困境。如果矩阵乘法利用所有内核,那就太好了,因为在这种情况下,CPU 显然是瓶颈。

octave能否充分利用多核处理器,多线程运行?是否有用于此的库或编译时标志?

最佳答案

解决方案

Octave 本身是一个运行在一个内核上的单线程应用程序。您可以使用 Octave 来使用 ATLAS 等利用多核​​的库。因此,虽然 Octave 仅使用一个核心,但当您遇到繁重的操作时,Octave 会调用 ATLAS 中使用许多 CPU 的函数。

我能够做到这一点。首先从源代码编译“ATLAS”并使其可供您的系统使用,以便 octave 可以找到它并使用这些库函数。 ATLAS 会根据您的系统和内核数量进行 self 调整。当您从源代码安装 octave 并指定 ATLAS 时,它会使用它,因此当 octave 执行繁重的操作(如巨大的矩阵乘法)时,ATLAS 决定使用多少个 cpu。

我无法让它在 Fedora 上运行,但在 Gentoo 上我可以让它运行。

我使用了这两个链接: ftp://ftp.gnu.org/gnu/octave/

http://math-atlas.sourceforge.net/

我在 ATLAS 安装前后运行了以下 Octave 核心:

tic
bigMatrixA = rand(3000000,80);
bigMatrixB = rand(80,30);
bigMatrixC = bigMatrixA * bigMatrixB;
toc
disp("done");

矩阵乘法在使用多个处理器时速度更快,比以前使用单核处理器快 3 倍:

Without Atlas: Elapsed time is 3.22819 seconds.
With Atlas:    Elapsed time is 0.529 seconds.

我正在使用的三个加快速度的库是 blas-atlas, cblas-atlas, lapack-atlas.

如果 Octave 可以使用这些而不是默认的 blas 和 lapack 库,那么它将利用多核。

使用 ATLAS 从源代码编译 Octave 并不容易,需要一些编程技巧。

使用 Atlas 的缺点:

此 Atlas 软件使用大量开销将您的 Octave 程序拆分为多个线程。当然,如果你所做的只是巨大的矩阵乘法,它会更快,但大多数命令不能被 atlas 多线程处理。如果从核心中提取每一点处理能力/速度是重中之重,那么只需编写与自身并行运行的程序,你就会有更好的运气。 (将你的程序分成 8 个等效程序,处理 1/8 的问题并同时运行它们,当所有完成后,重新组合结果)。

Atlas 帮助单线程 Octave 程序表现得更像多线程应用程序,但它不是 Elixir 。 Atlas 不会使您的单线程 Octave 程序最大化您的 2、4、6、8 核心处理器。您会注意到性能提升,但这种提升会让您寻找更好的方式来使用所有处理器。答案是编写与自身并行运行的程序,这需要大量的编程技巧。

建议

将您的精力投入到对您最繁重的操作进行矢量化处理并将流程分布到 n 个同时运行的线程上。如果您等待某个进程运行的时间过长,最有可能实现加速的最简单方法是使用更高效的算法或数据结构。

关于linux - 让 GNU Octave 与多核处理器一起工作。 (多线程),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/11889118/

有关linux - 让 GNU Octave 与多核处理器一起工作。 (多线程)的更多相关文章

  1. ruby-on-rails - 由于 "wkhtmltopdf",PDFKIT 显然无法正常工作 - 2

    我在从html页面生成PDF时遇到问题。我正在使用PDFkit。在安装它的过程中,我注意到我需要wkhtmltopdf。所以我也安装了它。我做了PDFkit的文档所说的一切......现在我在尝试加载PDF时遇到了这个错误。这里是错误:commandfailed:"/usr/local/bin/wkhtmltopdf""--margin-right""0.75in""--page-size""Letter""--margin-top""0.75in""--margin-bottom""0.75in""--encoding""UTF-8""--margin-left""0.75in""-

  2. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗?当我运行compasswatch时,它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行?文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们?我自己编译的.sass文件编译成compiled/t

  3. ruby - 如何指定 Rack 处理程序 - 2

    Rackup通过Rack的默认处理程序成功运行任何Rack应用程序。例如:classRackAppdefcall(environment)['200',{'Content-Type'=>'text/html'},["Helloworld"]]endendrunRackApp.new但是当最后一行更改为使用Rack的内置CGI处理程序时,rackup给出“NoMethodErrorat/undefinedmethod`call'fornil:NilClass”:Rack::Handler::CGI.runRackApp.newRack的其他内置处理程序也提出了同样的反对意见。例如Rack

  4. ruby - 无法让 RSpec 工作—— 'require' : cannot load such file - 2

    我花了三天的时间用头撞墙,试图弄清楚为什么简单的“rake”不能通过我的规范文件。如果您遇到这种情况:任何文件夹路径中都不要有空格!。严重地。事实上,从现在开始,您命名的任何内容都没有空格。这是我的控制台输出:(在/Users/*****/Desktop/LearningRuby/learn_ruby)$rake/Users/*******/Desktop/LearningRuby/learn_ruby/00_hello/hello_spec.rb:116:in`require':cannotloadsuchfile--hello(LoadError) 最佳

  5. ruby-on-rails - rspec should have_select ('cars' , :options => ['volvo' , 'saab' ] 不工作 - 2

    关闭。这个问题需要detailsorclarity.它目前不接受答案。想改进这个问题吗?通过editingthispost添加细节并澄清问题.关闭8年前。Improvethisquestion在首页我有:汽车:VolvoSaabMercedesAudistatic_pages_spec.rb中的测试代码:it"shouldhavetherightselect"dovisithome_pathit{shouldhave_select('cars',:options=>['volvo','saab','mercedes','audi'])}end响应是rspec./spec/request

  6. ruby-on-rails - s3_direct_upload 在生产服务器中不工作 - 2

    在Rails4.0.2中,我使用s3_direct_upload和aws-sdkgems直接为s3存储桶上传文件。在开发环境中它工作正常,但在生产环境中它会抛出如下错误,ActionView::Template::Error(noimplicitconversionofnilintoString)在View中,create_cv_url,:id=>"s3_uploader",:key=>"cv_uploads/{unique_id}/${filename}",:key_starts_with=>"cv_uploads/",:callback_param=>"cv[direct_uplo

  7. ruby - RuntimeError(自动加载常量 Apps 多线程时检测到循环依赖 - 2

    我收到这个错误:RuntimeError(自动加载常量Apps时检测到循环依赖当我使用多线程时。下面是我的代码。为什么会这样?我尝试多线程的原因是因为我正在编写一个HTML抓取应用程序。对Nokogiri::HTML(open())的调用是一个同步阻塞调用,需要1秒才能返回,我有100,000多个页面要访问,所以我试图运行多个线程来解决这个问题。有更好的方法吗?classToolsController0)app.website=array.join(',')putsapp.websiteelseapp.website="NONE"endapp.saveapps=Apps.order("

  8. ruby-on-rails - 如果我将 ruby​​ 版本 2.5.1 与 rails 版本 2.3.18 一起使用会怎样? - 2

    如果我使用ruby​​版本2.5.1和Rails版本2.3.18会怎样?我有基于rails2.3.18和ruby​​1.9.2p320构建的rails应用程序,我只想升级ruby的版本,而不是rails,这可能吗?我必须面对哪些挑战? 最佳答案 GitHub维护apublicfork它有针对旧Rails版本的分支,有各种变化,它们一直在运行。有一段时间,他们在较新的Ruby版本上运行较旧的Rails版本,而不是最初支持的版本,因此您可能会发现一些关于需要向后移植的有用提示。不过,他们现在已经有几年没有使用2.3了,所以充其量只能让更

  9. ruby - JetBrains RubyMine 3.2.4 调试器不工作 - 2

    使用Ruby1.9.2运行IDE提示说需要gemruby​​-debug-base19x并提供安装它。但是,在尝试安装它时会显示消息Failedtoinstallgems.Followinggemswerenotinstalled:C:/ProgramFiles(x86)/JetBrains/RubyMine3.2.4/rb/gems/ruby-debug-base19x-0.11.30.pre2.gem:Errorinstallingruby-debug-base19x-0.11.30.pre2.gem:The'linecache19'nativegemrequiresinstall

  10. ruby - `rescue $!` 是如何工作的? - 2

    我知道全局变量$!包含最新的异常对象,但我对下面的语法感到困惑。谁能帮助我理解以下语法?rescue$! 最佳答案 此构造可防止异常停止您的程序并使堆栈跟踪冒泡。它还会将该异常作为值返回,这很有用。a=get_me_datarescue$!在此行之后,a将保存请求的数据或异常。然后您可以分析该异常并采取相应措施。defget_me_dataraise'Nodataforyou'enda=get_me_datarescue$!puts"Executioncarrieson"pa#>>Executioncarrieson#>>#更现实的

随机推荐