我到处都在寻找答案，但我认为我已经达到了所能找到的极限。我的问题似乎与这个问题有点相关:Android NDK mmap call broken on 32-bit devices after upgrading to Lollipop 但没有提供答案。

我的问题是我尝试通过 mmap 调用从文件中内存映射 457232384 字节。在装有 Android 5.1.1 的两个不同设备(三星 Galaxy Note 3 和 OnePlus One，每个 3GB RAM)上，该调用失败并显示错误号 12“内存不足”。实际上，当我尝试分配超过 300MB 的内存时，调用失败了。 313524224 字节 (299MB) 有效，314572800 (300MB) 无效。

事实是，同一个调用适用于仍然使用 Android 4.4.2 的第三台设备。更奇怪的是，此调用适用于带有 SDK 21 (Android 5.0) 的 Android ARM 模拟器。不用说，可以毫无问题地加载相同数量的数据(未映射)。

dmesg 向我报告:

<3>[ 1137.488411] [0:Thread-298: 4267] arch_get_unmapped_area (TASK_SIZE - len < addr) len=457232384 task size=3204448256 pid=4267 do_align=0 addr=3034054656 mmap_base=3069939712

尝试映射文件的函数(来自 openfst)如下:

MappedFile* MappedFile::Map(istream* s, const FstReadOptions &opts,
                        size_t size) {
  size_t pos = s->tellg();

  if (opts.mode == FstReadOptions::MAP && pos >= 0 &&
      pos % kArchAlignment == 0) {
    int fd = open(opts.source.c_str(), O_RDONLY);
    if (fd != -1) {
      int pagesize = getpagesize();
      off_t offset = pos % pagesize;
      off_t upsize = size + offset;
      void *map = mmap(NULL, upsize, PROT_READ, MAP_SHARED, fd, pos - offset);
      char *data = reinterpret_cast<char*>(map);
      if (close(fd) == 0 && map != MAP_FAILED) {
        MemoryRegion region;
        region.mmap = map;
        region.size = upsize;
        region.data = reinterpret_cast<void*>(data + offset);
        MappedFile *mmf = new MappedFile(region);
        s->seekg(pos + size, ios::beg);
        if (s) {
          VLOG(1) << "mmap'ed region of " << size << " at offset " << pos
                  << " from " << opts.source.c_str() << " to addr " << map;
          return mmf;
        }
        delete mmf;
      } else {
        LOG(INFO) << "Mapping of file failed: " << strerror(errno);
      }
    }
  }
  // If all else fails resort to reading from file into allocated buffer.
  if (opts.mode != FstReadOptions::READ) {
    LOG(WARNING) << "File mapping at offset " << pos << " of file "
                 << opts.source << " could not be honored, reading instead.";
  }
  MappedFile* mf = Allocate(size);
  if (!s->read(reinterpret_cast<char*>(mf->mutable_data()), size)) {
    delete mf;
    return NULL;
  }
  return mf;
}

每次从 mmap 返回都是 MAP_FAILED。

有人对我在哪里可以解决我的问题有建议吗？ 谢谢!

编辑:

这是臭名昭著的 mmap 调用之后/proc/self/maps 的内容:http://pastebin.com/1864jZC2

一点差距分析:

Gap between 00000000 and 12c00000 (diff = 314572800 bytes, 300 MB)
Gap between 42c00000 and 55281000 (diff = 308809728 bytes, 294.50390625 MB)
Gap between 67e80000 and 67ea4000 (diff = 147456 bytes, 0.140625 MB)
Gap between 7778b000 and 77800000 (diff = 479232 bytes, 0.45703125 MB)
Gap between 77a80000 and 77a82000 (diff = 8192 bytes, 0.0078125 MB)
Gap between 77c00000 and 77c04000 (diff = 16384 bytes, 0.015625 MB)
Gap between 78080000 and 780b7000 (diff = 225280 bytes, 0.21484375 MB)
Gap between 79ac1000 and 79ac2000 (diff = 4096 bytes, 0.00390625 MB)
Gap between 7db70000 and 7db71000 (diff = 4096 bytes, 0.00390625 MB)
Gap between 7e000000 and 7e001000 (diff = 4096 bytes, 0.00390625 MB)
Gap between 7e0fe000 and 7e0ff000 (diff = 4096 bytes, 0.00390625 MB)
Gap between 7e145000 and 7e146000 (diff = 4096 bytes, 0.00390625 MB)
Gap between b6fb9000 and be6ff000 (diff = 125067264 bytes, 119.2734375 MB)
Gap between beeff000 and ffff0000 (diff = 1091506176 bytes, 1040.94140625 MB)

编辑:

@fadden 回答的评论中对我有用的解决方案。

TL;DR:将 dalvik.vm.heapsize 设置为 512m。

最佳答案

在 mmap() 失败后转储 /proc/self/maps 的副本(只需从代码中打开文件并将内容复制到临时文件)。由于 ASLR，您可能无法获得较大的连续虚拟地址范围。 .

Android 中的一些 Zip 文件处理代码使用 mmap() 映射整个文件，并在内存中对其进行操作。有一天，有人创建了一个 1GB 的 Zip 文件，但无法打开它。虽然进程的虚拟地址空间有足够的空闲页面，但没有足够的连续 页面来创建单个线性映射。 (IIRC，解决方案是 mmap() 只是中央目录。)

maps 输出将向您展示进程的地址空间是什么样的。 300MB 对于 ASLR/fragment 问题来说似乎有点低，但它是开始寻找的好地方，并且可能解释不一致的行为。

关于android mmap 因内存不足而失败，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/33897711/