jjzjj

xml - 是否有正当理由将数据作为 XML 在内部保存?

coder 2024-06-25 原文

在我工作的这些年里,我注意到一种明显的趋势,我认为这是一种反模式:将内部数据维护为大的 XML 字符串。我已经看到以多种不同的方式完成此操作,尽管两个最严重的违规行为非常相似。

网络服务

第一个应用程序是一个 Web 服务,它提供对 SQL 数据库中潜在大量数据的访问。在启动时,它或多或少地从数据库中提取所有数据,并将其作为 XML 存储在内存中。 (三次。)此应用程序的所有者将其称为缓存。我称之为慢,因为在解决这个问题时遇到的每个性能问题都可以直接追溯到这个东西。 (这是一个企业环境,因此客户因性能故障而不是服务而受到指责也就不足为奇了。)这个应用程序确实使用了 XML DOM。

进口商

第二个应用程序读取作为从第三方数据库导出的结果而生成的 XML 文件。目标是将此数据导入专有系统(由我们拥有)。执行此操作的应用程序读取整个 XML 文件并在整个导入序列中维护至少两个,有时多达四个 XML 文件的副本。请注意,可以在导入之前对数据进行操作、转换和配置,因此导入器在整个生命周期内都以 XML 格式拥有该数据。毫不奇怪,当提供一个中等大小的 XML 文件时,这个导入器就会爆炸。此应用程序仅将 XML DOM 用于其副本之一,其余均为原始 XML 字符串。

我对常识的理解表明 XML 不是在内存中保存数据的良好格式,而是在输出/传输数据并转换为内部数据结构时应将数据转换为 XML在读入和导入时。问题是,我经常遇到完全忽略可伸缩性问题的生产代码,并为此付出了的额外努力。 (这些应用程序中的字符串解析量之大令人恐惧。)

这是否是其他人遇到的常见错误,无法将正确的工具应用于工作?还是只是我运气不好?还是我错过了一些非常明显和好的情况,在这些情况下,将内存中的大量数据存储为 XML 是正确且可以的?

最佳答案

任何存储在内存中的数据都应该在类中。我们谈论的数据量越大,这就变得越重要。 Xml 是一种非常臃肿的格式,会降低性能。 Xml 应该仅用于在应用程序之间传输数据。恕我直言。

关于xml - 是否有正当理由将数据作为 XML 在内部保存?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/1008564/

有关xml - 是否有正当理由将数据作为 XML 在内部保存?的更多相关文章

  1. ruby-on-rails - 如何验证 update_all 是否实际在 Rails 中更新 - 2

    给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru

  2. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  3. ruby-on-rails - 如何从 format.xml 中删除 <hash></hash> - 2

    我有一个对象has_many应呈现为xml的子对象。这不是问题。我的问题是我创建了一个Hash包含此数据,就像解析器需要它一样。但是rails自动将整个文件包含在.........我需要摆脱type="array"和我该如何处理?我没有在文档中找到任何内容。 最佳答案 我遇到了同样的问题;这是我的XML:我在用这个:entries.to_xml将散列数据转换为XML,但这会将条目的数据包装到中所以我修改了:entries.to_xml(root:"Contacts")但这仍然将转换后的XML包装在“联系人”中,将我的XML代码修改为

  4. ruby - RSpec - 使用测试替身作为 block 参数 - 2

    我有一些Ruby代码,如下所示:Something.createdo|x|x.foo=barend我想编写一个测试,它使用double代替block参数x,这样我就可以调用:x_double.should_receive(:foo).with("whatever").这可能吗? 最佳答案 specify'something'dox=doublex.should_receive(:foo=).with("whatever")Something.should_receive(:create).and_yield(x)#callthere

  5. ruby - 检查数组是否在增加 - 2

    这个问题在这里已经有了答案:Checktoseeifanarrayisalreadysorted?(8个答案)关闭9年前。我只是想知道是否有办法检查数组是否在增加?这是我的解决方案,但我正在寻找更漂亮的方法:n=-1@arr.flatten.each{|e|returnfalseife

  6. ruby - 检查字符串是否包含散列中的任何键并返回它包含的键的值 - 2

    我有一个包含多个键的散列和一个字符串,该字符串不包含散列中的任何键或包含一个键。h={"k1"=>"v1","k2"=>"v2","k3"=>"v3"}s="thisisanexamplestringthatmightoccurwithakeysomewhereinthestringk1(withspecialcharacterslike(^&*$#@!^&&*))"检查s是否包含h中的任何键的最佳方法是什么,如果包含,则返回它包含的键的值?例如,对于上面的h和s的例子,输出应该是v1。编辑:只有字符串是用户定义的。哈希将始终相同。 最佳答案

  7. ruby-on-rails - Ruby 检查日期时间是否为 iso8601 并保存 - 2

    我需要检查DateTime是否采用有效的ISO8601格式。喜欢:#iso8601?我检查了ruby​​是否有特定方法,但没有找到。目前我正在使用date.iso8601==date来检查这个。有什么好的方法吗?编辑解释我的环境,并改变问题的范围。因此,我的项目将使用jsapiFullCalendar,这就是我需要iso8601字符串格式的原因。我想知道更好或正确的方法是什么,以正确的格式将日期保存在数据库中,或者让ActiveRecord完成它们的工作并在我需要时间信息时对其进行操作。 最佳答案 我不太明白你的问题。我假设您想检查

  8. ruby - 检查日期是否在过去 7 天内 - 2

    我的日期格式如下:"%d-%m-%Y"(例如,今天的日期为07-09-2015),我想看看是不是在过去的七天内。谁能推荐一种方法? 最佳答案 你可以这样做:require"date"Date.today-7 关于ruby-检查日期是否在过去7天内,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.com/questions/32438063/

  9. ruby - 如何验证 IO.copy_stream 是否成功 - 2

    这里有一个很好的答案解释了如何在Ruby中下载文件而不将其加载到内存中:https://stackoverflow.com/a/29743394/4852737require'open-uri'download=open('http://example.com/image.png')IO.copy_stream(download,'~/image.png')我如何验证下载文件的IO.copy_stream调用是否真的成功——这意味着下载的文件与我打算下载的文件完全相同,而不是下载一半的损坏文件?documentation说IO.copy_stream返回它复制的字节数,但是当我还没有下

  10. ruby - Ruby 有 `Pair` 数据类型吗? - 2

    有时我需要处理键/值数据。我不喜欢使用数组,因为它们在大小上没有限制(很容易不小心添加超过2个项目,而且您最终需要稍后验证大小)。此外,0和1的索引变成了魔数(MagicNumber),并且在传达含义方面做得很差(“当我说0时,我的意思是head...”)。散列也不合适,因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题,但我很想知道:Ruby标准库是否已经带有这样一个类? 最佳

随机推荐