large-files 相关问题

即使对于有经验的程序员来说,大文件(无论是二进制文件还是文本文件)有时也会出现问如果出现与在文本编辑器中打开和/或写入大文件,管理运行到千兆字节的资源或大量数据的战略决策相关的问题,则应使用此标记。

fseeko的表现(FILE * stream,off_t offset,int whence)

我的问题:我有一个大约4GB的文件。我从来没有使用过fseeko / ftello,而且我对磁盘上文件的组织方式也不太熟悉。如果我打开一个文件,然后让fseeko跳...

回答 2 投票 -1

在提供大型文件供下载时,客户端丢弃连接(Java,Jersey,HTTP,GET)

我有一个HTTP服务器,提供下载文件,其中一些文件非常大(可以是7 GB或更多)。从某些网络下载这些文件时,连接将被删除并且......

回答 1 投票 0

Java中文件中的行数

我使用大量的数据文件,有时我只需要知道这些文件中的行数,通常我打开它们并逐行读取它们直到我到达文件的末尾我想知道是否有...

回答 18 投票 203

在多线程中处理一个巨大的文件并将其写回另一个文件,

我有一个巨大的XML文件(差不多5Gig)。我尝试搜索整个文件,找到一些标签并重命名。我在这里使用相同的想法将文件块分成10兆字节的块,搜索每个...

回答 1 投票 0

文本编辑器打开大(巨大,巨大,大)文本文件[关闭]

我的意思是100多MB大;这样的文本文件可以推动编辑的信封。我需要查看一个大型XML文件,但如果编辑器有错误则无法查看。有什么建议?

回答 2 投票 1023

PHP x86如何在没有外部程序的情况下获取> 2 GB文件的文件大小?

我需要获得大小超过2 GB的文件的文件大小。 (在4.6 GB文件上测试)。没有外部程序有没有办法做到这一点?当前状态:filesize(),stat()和fseek()失败......

回答 14 投票 24

标记数据时出错。 C错误:内存不足pandas python,大文件csv

我有一个3.5 go的大型csv文件,我想用pandas来阅读它。这是我的代码:导入pandas为pd tp = pd.read_csv('train_2011_2012_2013.csv',sep =';',iterator = True,chunksize = 20000000,...

回答 3 投票 8

Python中的大型csv文件[重复]

我使用Python在大型csv文件中找到一些模式(120万行,250MB),如果找到这样的模式,则在每行上执行一些修改。我的方法是这样的:dfile = open(csvfile,'r')...

回答 1 投票 -1

在python中处理大型文本文件

我正在处理2个大文件。主文件有2个字段,例如客户名称,第二个字段是客户ID。我有第二个文件,它是第一个文件的子集,只有客户名称。一世 ...

回答 2 投票 0

在C#中为大文件创建校验和的最快方法是什么?

我必须在一些机器上同步大文件。这些文件最大可达6GB。同步将每隔几周手动完成。我不能考虑文件名,因为他们可以改变...

回答 8 投票 122

Java:读取HUGE文件的最后n行

我想读取一个非常大的文件的最后n行,而不是使用Java将整个文件读入任何缓冲区/内存区域。我查看了JDK API和Apache Commons I / O,但无法找到...

回答 10 投票 35

如何用PhpStorm 8打开大文件?

我正在处理我想在编辑器中打开的大型SQL或XML文件(最高可达3GB)。我收到消息:文件 对于PhpStorm编辑器来说太大了我有32GB ......

回答 2 投票 5

具有比较功能的大文本文件编辑器?

我试图比较两个大约500MB的大文本文件,我试图使用Notepad ++,Textpad,VIM等,甚至无法让它们打开文本文件。无论是那个,还是那些工作的编辑都不愿意......

回答 5 投票 1

无法从具有80K记录的CSV读取数据

我正在尝试读取超过80K记录的CSV。不幸的是,我无法实现它。有人可以帮帮我吗?我的CSV大约是100MB,我已将memory_limit增加到128M。我有 ...

回答 1 投票 0

如何在html5播放器中播放更长的视频?

我正在尝试播放大小:2.1 GB,持续时间:06:10:58.17和比特率:797 kb / s的视频文件该文件在S3存储中,下载后视频在VLC播放器桌面上播放正常但不在... 。

回答 1 投票 0

如何打开大(10gb +)文本文件并进行编辑

我有大的.txt文件,超过10GB我应该打开这个文件并制作简单的版本: - 删除重复的行 - 拆分此文件(如5x2gb文件)我需要什么软件? Windows pref ...但如果不是......

回答 4 投票 -2

Git lfs - “这超过了GitHub的文件大小限制为100.00 MB”

我有一些csv文件大于github的文件大小限制为100.00 MB。我一直在尝试使用Git Large File Storage扩展。 https://git-lfs.github.com/来自LFS - “大文件......

回答 5 投票 23

在使用xml.NewDecoder(xmlFile)解析Go / Golang中的大型XML文件时如何实现进度计数器?

我写了一些代码来解析大型XML文件(> 3GB),请按照以下网站上的示例进行操作:https://blog.singleton.io/posts/2012-06-19-parsing-huge-xml-files-with- go /想法是创建解码器......

回答 1 投票 0

如何修复:“文件太大:__,在Intellij IDEA中显示第一个:__”的只读预览?

我试图在Intellij IDEA中查看一个大文件,但我遇到了错误:“文件太大:30.1 MB,显示第一个2.56 MB的只读预览”。我以前见过一些......

回答 1 投票 0

如何使用vim,sed或其他类似工具在大文件(100万行)中连接成对的连续行?

我需要将每个第二行的内容移动到上面的行,这样line2的数据就在line1的旁边,逗号或空格分隔的工作。输入:line1 line2 line3 line4输出:...

回答 8 投票 13

© www.soinside.com 2019 - 2024. All rights reserved.