jjzjj

c# - "Where are my bytes?"或文件长度特征调查

coder 2024-05-28 原文

这是我关于 downloading files in chunks 问题的延续.解释会很大，所以我会尽量把它分成几个部分。

1)我试图做什么？

我正在为 Window-Phone 应用程序创建一个下载管理器。首先我尝试解决下载的问题
大文件(解释在上一个问题中)。不，我想添加“可恢复下载”功能。

2)我已经做过的事情。

目前我有一个运行良好的下载管理器，它可以超越 Windows Phone 的 RAM 限制。
这个管理器的特点是，它允许使用 HTTP Range header 下载小块文件。

对其工作原理的快速解释:

该文件以恒定大小的块下载。我们称这个大小为“delta”。下载文件块后，
它以追加模式保存到本地存储(硬盘，在 WP 上称为隔离存储)(因此，下载的字节数组是
总是添加到文件的末尾)。下载单个块后的语句

if (mediaFileLength >= delta) // mediaFileLength is a length of downloaded chunk

被检查。如果是真的，那
意味着，还有一些东西可供下载，并且这个方法被递归调用。否则就意味着，这个块
是最后一个，没有什么可以下载了。

3)有什么问题？

直到我在一次性下载时使用了这个逻辑(一次性我的意思是，当您开始下载文件并等待下载完成时)
效果很好。但是，我决定，我需要“恢复下载”功能。 所以，事实:

3.1) 我知道，文件块大小是一个常数。

3.2) 我知道，当文件完全下载与否。 (这是我的应用程序逻辑的间接结果，
不会因解释而使您厌烦，只是假设这是事实)

在这两个陈述的假设下，我可以证明，下载的块数等于
(CurrentFileLength)/delta .其中 CurrentFileLenght 是已下载文件的大小(以字节为单位)。

要继续下载文件，我应该简单地设置所需的标题并调用下载方法。这似乎是逻辑，不是吗？我试图实现它:
    // Check file size
    using (IsolatedStorageFileStream fileStream = isolatedStorageFile.OpenFile("SomewhereInTheIsolatedStorage", FileMode.Open, FileAccess.Read))
    {
      int currentFileSize = Convert.ToInt32(fileStream.Length);
      int currentFileChunkIterator = currentFileSize / delta;
    }

我看到的结果是什么？下载的文件长度等于 2432000 字节( delta 是 304160 ，总文件大小约为 4,5 MB ，我们只下载了其中的一半)。所以结果是
大约 7,995 . (它实际上是 long/int 类型，所以它是 7，而应该是 8!)为什么会发生这种情况？
简单的数学告诉我们，文件长度应该是 2433280 ，所以给定的值非常接近，但不相等。

进一步的调查表明，所有值都来自 fileStream.Length不准确，但都接近。

为什么会这样？ 我不知道确切，但也许 .Length 值是从文件元数据中获取的。
也许，这种四舍五入对于这种方法来说是正常的。也许，当下载中断时，文件没有完全保存......(不，那真的很棒，不可能)

所以问题就解决了 - 它是 “如何确定下载的块数” .问题是如何解决。

4)我对解决问题的想法。

我的第一个想法是在这里使用数学。设置一些 epsilon-neiborhood 并在 currentFileChunkIterator = currentFileSize / delta; 中使用它声明。
但这将要求我们记住第一类和第二类错误(或者误报和错过，如果您不喜欢统计术语。)也许，没有什么可以下载的了。
另外，我没有检查，如果提供的值和真​​实值的差异应该永久增长
否则会出现周期性波动。对于小尺寸(大约 4-5 MB)，我只看到了增长，但这并不能证明什么。

所以，我在这里寻求帮助，因为我不喜欢我的解决方案。

5) 我想听到的答案是:

是什么导致了实际值(value)和接收值(value)之间的差异？

有没有办法获得真正的值(value)？

如果没有，我的解决方案是否适合这个问题？

还有其他更好的解决方案吗？

附言我不会设置 Windows-Phone 标签，因为我不确定这个问题是否与操作系统有关。我使用了隔离存储工具
检查下载文件的大小，它向我显示与收到的值相同(我很抱歉截图中的俄语):

最佳答案

我正在回答您的更新:

到目前为止，这是我的理解:实际写入文件的长度(四舍五入到下一个 1KiB)比您实际写入文件的长度要长。这会导致您对“file.Length == 下载量”的假设是错误的。

一种解决方案是单独跟踪此信息。创建一些元数据结构(可以使用相同的存储机制持久化)以准确跟踪已下载的块以及文件的整个大小:

[DataContract] //< I forgot how serialization on the phone works, please forgive me if the tags differ
struct Metadata
{
     [DataMember]
     public int Length;
     [DataMember]
     public int NumBlocksDownloaded;
}

假设您继续以连续方式下载它们，这足以重建哪些块已被下载，哪些块尚未下载。

编辑

当然，在将数据写入流之前，您必须将代码从简单的追加更改为将流的位置移动到正确的块:
 file.Position = currentBlock * delta;
 file.Write(block, 0, block.Length);

关于c# - "Where are my bytes?"或文件长度特征调查，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/14848786/

征调c#strongbr的sizebyte

有关c# - "Where are my bytes?"或文件长度特征调查的更多相关文章

  1. ruby - 使用 RubyZip 生成 ZIP 文件时设置压缩级别 - 2

    我有一个Ruby程序，它使用rubyzip压缩XML文件的目录树。gem。我的问题是文件开始变得很重，我想提高压缩级别，因为压缩时间不是问题。我在rubyzipdocumentation中找不到一种为创建的ZIP文件指定压缩级别的方法。有人知道如何更改此设置吗？是否有另一个允许指定压缩级别的Ruby库？ 最佳答案 这是我通过查看ruby​​zip内部创建的代码。level=Zlib::BEST_COMPRESSIONZip::ZipOutputStream.open(zip_file)do|zip|Dir.glob("**/*")d

  2. ruby - 其他文件中的 Rake 任务 - 2

    我试图在一个项目中使用rake，如果我把所有东西都放到Rakefile中，它会很大并且很难读取/找到东西，所以我试着将每个命名空间放在lib/rake中它自己的文件中，我添加了这个到我的rake文件的顶部:Dir['#{File.dirname(__FILE__)}/lib/rake/*.rake'].map{|f|requiref}它加载文件没问题，但没有任务。我现在只有一个.rake文件作为测试，名为“servers.rake”，它看起来像这样:namespace:serverdotask:testdoputs"test"endend所以当我运行rakeserver:testid时

  3. ruby-on-rails - 在 Rails 中将文件大小字符串转换为等效千字节 - 2

    我的目标是转换表单输入，例如“100兆字节”或“1GB”，并将其转换为我可以存储在数据库中的文件大小(以千字节为单位)。目前，我有这个:defquota_convert@regex=/([0-9]+)(.*)s/@sizes=%w{kilobytemegabytegigabyte}m=self.quota.match(@regex)if@sizes.include?m[2]eval("self.quota=#{m[1]}.#{m[2]}")endend这有效，但前提是输入是倍数(“gigabytes”，而不是“gigabyte”)并且由于使用了eval看起来疯狂不安全。所以，功能正常，

  4. ruby-on-rails - unicode 字符串的长度 - 2

    在我的Rails(2.3，Ruby1.8.7)应用程序中，我需要将字符串截断到一定长度。该字符串是unicode，在控制台中运行测试时，例如'א'.length，我意识到返回了双倍长度。我想要一个与编码无关的长度，以便对unicode字符串或latin1编码字符串进行相同的截断。我已经了解了Ruby的大部分unicode资料，但仍然有些一头雾水。应该如何解决这个问题？ 最佳答案 Rails有一个返回多字节字符的mb_chars方法。试试unicode_string.mb_chars.slice(0,50)

  5. ruby-on-rails - rails : "missing partial" when calling 'render' in RSpec test - 2

    我正在尝试测试是否存在表单。我是Rails新手。我的new.html.erb_spec.rb文件的内容是:require'spec_helper'describe"messages/new.html.erb"doit"shouldrendertheform"dorender'/messages/new.html.erb'reponse.shouldhave_form_putting_to(@message)with_submit_buttonendendView本身，new.html.erb，有代码:当我运行rspec时，它失败了:1)messages/new.html.erbshou

  6. ruby-on-rails - 由于 "wkhtmltopdf"，PDFKIT 显然无法正常工作 - 2

    我在从html页面生成PDF时遇到问题。我正在使用PDFkit。在安装它的过程中，我注意到我需要wkhtmltopdf。所以我也安装了它。我做了PDFkit的文档所说的一切......现在我在尝试加载PDF时遇到了这个错误。这里是错误:commandfailed:"/usr/local/bin/wkhtmltopdf""--margin-right""0.75in""--page-size""Letter""--margin-top""0.75in""--margin-bottom""0.75in""--encoding""UTF-8""--margin-left""0.75in""-

  7. ruby-on-rails - Rails 3 中的多个路由文件 - 2

    Rails2.3可以选择随时使用RouteSet#add_configuration_file添加更多路由。是否可以在Rails3项目中做同样的事情？ 最佳答案 在config/application.rb中:config.paths.config.routes在Rails3.2(也可能是Rails3.1)中，使用:config.paths["config/routes"] 关于ruby-on-rails-Rails3中的多个路由文件，我们在StackOverflow上找到一个类似的问题

  8. ruby - 将差异补丁应用于字符串/文件 - 2

    对于具有离线功能的智能手机应用程序，我正在为Xml文件创建单向文本同步。我希望我的服务器将增量/差异(例如GNU差异补丁)发送到目标设备。这是计划:Time=0Server:hasversion_1ofXmlfile(~800kiB)Client:hasversion_1ofXmlfile(~800kiB)Time=1Server:hasversion_1andversion_2ofXmlfile(each~800kiB)computesdeltaoftheseversions(=patch)(~10kiB)sendspatchtoClient(~10kiBtransferred)Cl

  9. ruby - 如何将脚本文件的末尾读取为数据文件(Perl 或任何其他语言) - 2

    我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚

  10. ruby - 如何以所有可能的方式将字符串拆分为长度最多为 3 的连续子字符串？ - 2

    我试图获取一个长度在1到10之间的字符串，并输出将字符串分解为大小为1、2或3的连续子字符串的所有可能方式。例如:输入:123456将整数分割成单个字符，然后继续查找组合。该代码将返回以下所有数组。[1,2,3,4,5,6][12,3,4,5,6][1,23,4,5,6][1,2,34,5,6][1,2,3,45,6][1,2,3,4,56][12,34,5,6][12,3,45,6][12,3,4,56][1,23,45,6][1,2,34,56][1,23,4,56][12,34,56][123,4,5,6][1,234,5,6][1,2,345,6][1,2,3,456][123

随机推荐