jjzjj

performance - go rpc、http 或 websockets，这是将许多小块数据从一个服务器重复传输到另一个服务器的最快方式

coder 2023-07-01 原文

背景

我正在尝试在 go 中创建一个内存 + cpu 分析器，并希望快速传输信息，也许每秒，从正在分析的程序/服务到服务器，该服务器将通过保存数据来完成所有繁重的工作到数据库和/或通过 http 将其提供给站点；这将减少正在分析的程序的负载以进行更准确的测量。传输的将是小块数据。我知道已经有一些库了，但就像我说的，正在试验中。

传输内容类型

我还没有决定具体的传输类型，但看起来像用于 HTTP 或 Websockets 的 JSON 以及用于 RPC 的结构(如果我已经正确完成了我的研究)

总结

我可能会尝试每一个，只是为了亲眼看看，但我对使用 RPC 和 Websockets 的经验很少，并且想要一些可能更快或更适合我正在尝试做的事情的意见或建议:

  • HTTP
  • 远程调用
  • 网络套接字
  • 其他我没有考虑的事

最佳答案

正如您在评论中提到的，HTTP 不是必需的。

在这种情况下，为了寻找最快的传输解决方案，我会完全放弃 HTTP 传输层，而只使用普通 (TCP) 套接字连接，因为 HTTP 仅传输几个字节就会产生相当大的开销。

定义您自己的协议(protocol)(可能非常简单)，打开到服务器的 TCP 连接，并根据您的要求每隔几秒左右发送一次数据包。

发送(和接收)数据的协议(protocol)可以很简单:

  • 执行可选的身份验证或客户端/服务器标识(以确保您已连接到您想要连接的服务器/程序)。
  • 使用encoding/gob标准库中的 packgae 通过连接以二进制形式发送数据。

所以基本上，配置文件程序(客户端)应该打开 TCP 连接，并使用 gob.NewEncoder()包装连接以发送数据。服务器应接受传入的 TCP 连接并使用 gob.NewDecoder()包装连接以接收数据。

客户来电Encoder.Encode()所以发送分析信息，它通常可以是一个结构值。服务器调用 Decoder.Decode()接收分析信息，即客户端发送的结构。就这样。

使用encoding/gob 包发送二进制形式的数据需要你使用相同的类型来描述两边的profiling数据。如果你想要更多的灵 active ，你也可以使用 encoding/json以 JSON 文本形式发送/接收分析信息的包。缺点是 JSON 需要发送更多数据，并且与二进制表示相比，生成和解析 JSON 文本需要更多时间。

如果丢失一些分析数据包(或收到重复数据包)不是问题，您可能想尝试/试验使用 UDP 而不是 TCP，这可能更有效。

关于performance - go rpc、http 或 websockets，这是将许多小块数据从一个服务器重复传输到另一个服务器的最快方式，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/32556174/

performancewebsocketscodeencodingnoreferrerhttpgowebsocketrpc

有关performance - go rpc、http 或 websockets，这是将许多小块数据从一个服务器重复传输到另一个服务器的最快方式的更多相关文章

  1. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封，在我看来soap请求没有正确的命名空间。任何人都可以建议我

  2. ruby - 具有身份验证的私有(private) Ruby Gem 服务器 - 2

    我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时，它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器？这是不可能的吗？谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..

  3. ruby - 使用 Vim Rails，您可以创建一个新的迁移文件并一次性打开它吗？ - 2

    使用带有Rails插件的vim，您可以创建一个迁移文件，然后一次性打开该文件吗？textmate也可以这样吗？ 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件，这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails，您可以创建一个新的迁移文件并一次性打开它吗？，我们在StackOverflow上找到一个类似的问题： https://sta

  4. ruby-on-rails - Rails - 一个 View 中的多个模型 - 2

    我需要从一个View访问多个模型。以前，我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它，但这似乎不是“ruby方式”，我将需要在不久的将来访问更多模型。这可能会变得很脏，是否有针对这种情况的任何技术？注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展，本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向，这似乎很麻烦。最终从任何

  5. ruby-on-rails - 渲染另一个 Controller 的 View - 2

    我想要做的是有2个不同的Controller，client和test_client。客户端Controller已经构建，我想创建一个test_clientController，我可以使用它来玩弄客户端的UI并根据需要进行调整。我主要是想绕过我在客户端中内置的验证及其对加载数据的管理Controller的依赖。所以我希望test_clientController加载示例数据集，然后呈现客户端Controller的索引View，以便我可以调整客户端UI。就是这样。我在test_clients索引方法中试过这个:classTestClientdefindexrender:template=>

  6. ruby-on-rails - 如果 Object::try 被发送到一个 nil 对象，为什么它会起作用？ - 2

    如果您尝试在Ruby中的nil对象上调用方法，则会出现NoMethodError异常并显示消息:"undefinedmethod‘...’fornil:NilClass"然而，有一个tryRails中的方法，如果它被发送到一个nil对象，它只返回nil:require'rubygems'require'active_support/all'nil.try(:nonexisting_method)#noNoMethodErrorexceptionanymore那么try如何在内部工作以防止该异常？ 最佳答案 像Ruby中的所有其他对象

  7. ruby - 为什么 SecureRandom.uuid 创建一个唯一的字符串？ - 2

    关闭。这个问题需要detailsorclarity.它目前不接受答案。想改进这个问题吗？通过editingthispost添加细节并澄清问题.关闭8年前。Improvethisquestion为什么SecureRandom.uuid创建一个唯一的字符串？SecureRandom.uuid#=>"35cb4e30-54e1-49f9-b5ce-4134799eb2c0"SecureRandom.uuid方法创建的字符串从不重复？

  8. ruby-on-rails - 启动 Rails 服务器时 ImageMagick 的警告 - 2

    最近，当我启动我的Rails服务器时，我收到了一长串警告。虽然它不影响我的应用程序，但我想知道如何解决这些警告。我的估计是imagemagick以某种方式被调用了两次？当我在警告前后检查我的git日志时。我想知道如何解决这个问题。-bcrypt-ruby(3.1.2)-better_errors(1.0.1)+bcrypt(3.1.7)+bcrypt-ruby(3.1.5)-bcrypt(>=3.1.3)+better_errors(1.1.0)bcrypt和imagemagick有关系吗？/Users/rbchris/.rbenv/versions/2.0.0-p247/lib/ru

  9. ruby-on-rails - s3_direct_upload 在生产服务器中不工作 - 2

    在Rails4.0.2中，我使用s3_direct_upload和aws-sdkgems直接为s3存储桶上传文件。在开发环境中它工作正常，但在生产环境中它会抛出如下错误，ActionView::Template::Error(noimplicitconversionofnilintoString)在View中，create_cv_url,:id=>"s3_uploader",:key=>"cv_uploads/{unique_id}/${filename}",:key_starts_with=>"cv_uploads/",:callback_param=>"cv[direct_uplo

  10. ruby-on-rails - Rails - 从另一个模型中创建一个模型的实例 - 2

    我有一个正在构建的应用程序，我需要一个模型来创建另一个模型的实例。我希望每辆车都有4个轮胎。汽车模型classCar轮胎模型classTire但是，在make_tires内部有一个错误，如果我为Tire尝试它，则没有用于创建或新建的activerecord方法。当我检查轮胎时，它没有这些方法。我该如何补救？错误是这样的:未定义的方法'create'forActiveRecord::AttributeMethods::Serialization::Tire::Module我测试了两个环境:测试和开发，它们都因相同的错误而失败。 最佳答案

随机推荐