memory-mapped-files 相关问题

内容映射到虚拟内存中的文件。

如何动态扩展内存映射文件

我已经使用C#来解决以下要求.. - 创建一个可以快速接收大量数据的应用程序 - 您必须能够分析收到的数据,同时传入更多数据。 - 使用尽可能少的CPU和......

回答 5 投票 25

如何在Linux上的.Net Core中捕获双页错误(内存映射文件读取错误)?

我在Docker中的Linux上随机读取.NetCore中的文件。为了更好的速度,我有文件内存映射,所以实际读取只是Span.CopyTo。但是当IO失败时会发生什么,整个应用程序将......

回答 1 投票 2

使用Julia Mmap复制一个巨大的文件

我有一个大文件(75GB)内存映射到数组d,我想在另一个m中复制。因为我没有75GB的RAM可用,我做了:for(i,v)枚举(d)m [i] = v end为了复制......

回答 1 投票 0

PYTHON - Ctypes:OSError:异常:访问冲突写入0xFFFFFFFFFA1C001B

这是使用内存映射将值写入内存的代码。当我尝试运行代码时,我得到错误“文件”MMF.py“,第26行,在memcpy(pBuf,szMsg,len(szMsg))OSError:...

回答 1 投票 1

How to use Linux hugetlbfs for shared memory maps of files?

我有一个程序使用 mmap() 和共享内存来有效地访问大型数据库文件。我想尝试使用大页面,看看它是否可以加快速度。 我认为快速......

回答 2 投票 0

MapViewOfFile返回ERROR_INVALID_PARAMETER Windows-10(通用Windows平台)

我试图将我现有的Windows桌面应用程序(在Windows-7上运行正常)移植到Windows-10(通用Windows平台)在Windows-10上,MapViewOfFile返回ERROR_INVALID_PARAMETER,当......

回答 1 投票 0

Chronicle Queue内存映射文件,以减少垃圾回收?

我有一个关于Chronicle队列如何避免垃圾收集的问题:我理解Chronicle队列使用一个内存映射文件,以便它可以将一个对象保存到主内存或dist ...

回答 1 投票 1

如何在PyFilesystem中使用内存映射文件(numpy.memmap)?

我可以将PyFilesystem与numpy内存映射文件一起使用吗?下面的示例代码抛出io.UnsupportedOperation:fileno,这是由于PyFilesystem抛出了fileno不支持的异常...

回答 2 投票 0

Java - 堆与直接内存访问

我最近遇到了sun.misc.Unsafe类,允许用户以类似于C的方式分配,解除分配和一般访问内存。我在几个博客中读到了解决这个问题的方法,例如...

回答 1 投票 8

内存映射Java中的大文件

是否可以在Java中对大型文件(多个GB)进行内存映射? FileChannel的这种方法看起来很有前景:MappedByteBuffer map(FileChannel.MapMode模式,长位,长尺寸)这两个位置......

回答 2 投票 8

Julia 1.1在Windows中使用JLD HDF5软件包和内存版本

我正在使用带有JLD和HDF5的Julia 1.1将文件保存到磁盘上,在那里我遇到了一些关于内存使用情况的问题。问题1:首先,我定义了一个4 GB矩阵A. A =零(ComplexF64,(243,243,...

回答 1 投票 0

写入内存映射文件比非内存映射文件慢

我正在尝试使用内存映射文件来编写具有高IO要求的应用程序。在这个应用程序中,我收到的数据突发速度比磁盘速度快...

回答 2 投票 4

(.Net)使用内存映射文件的简便方法。就像一个变量

我正在开发一个ASP.NET Web应用程序。它需要大量的RAM。因此,我正在考虑内存映射文件。但是,实现内存映射文件非常耗费精力。它需要使用那些......

回答 1 投票 0

使用mmap和大页面随机读取大文件

我正在使用mmap来读取一个大型数据库文件(例如,100GB),索引保存在主内存中(键偏移对)。由于默认的4KB虚拟内存页面大小,我假设读取调用...

回答 1 投票 4

Windows上的内存映射文件截断

为什么我们不能在Windows上截断内存映射文件?假设我已经映射了4kb文件并且仅使用了2kb。因此要截断2kb,我需要先取消映射映射文件,然后截断它。这个案子为什么? ...

回答 1 投票 0

使用Lucene目录作为主文件存储有什么缺点?

我想使用Lucene MMapDirectory作为主文件存储。每个文件将作为StoredField中的字节数组存储在单独的文档中。应该可搜索的所有文件属性,例如......

回答 2 投票 1

使用StandardOpenOption.SYNC打开基础通道时,是否必须刷新MappedByteBuffer

StandardOpenOption.SYNC是否与MappedByteBuffers一起使用并保存我们调用MappedByteBuffer.force()?组 options = new HashSet <>(); options.add(StandardOpenOption.READ); ...

回答 1 投票 0

将指针传递给bufio.Scanner()

为了避免我提出XY问题,我的目标是按照建议在多个goroutine之间共享内存映射文件。每个goroutine需要逐行迭代文件,所以我希望存储...

回答 1 投票 0

将内存映射文件读取到字符串

我试图从内存映射文件中读取数据,该文件从C ++程序写入内存文件。我能够使用debug方法并将数据作为循环中的字符串写入。但是,我 ...

回答 1 投票 0

是否可以在内存映射文件中存储python对象(特别是sklearn模型)?

我有几个占用大量内存的大型对象(sklearn模型),我想在几个进程之间共享它们。有没有办法做到这一点?它必须是“活的”对象,而不是......

回答 1 投票 8

© www.soinside.com 2019 - 2024. All rights reserved.