PHP - 从目录读取大量文件

问题描述 投票:0回答:2

我有一个包含大量图片的文件夹(至少 10000 个文件),我需要使用 PHP 获取所有这些文件的名称。 问题是当我使用

scandir()
时,我收到有关内存限制的错误。 另外,我尝试使用这样的代码:

          $files = [];
          $dir = opendir($this->path);
          $i = 0;
          while(($file = readdir($dir)) !== false) {
              $files[] = $file;
              $i++;
              if ($i == 100)
                  break;
          }

这段代码工作正常,但不是我需要的。当我尝试获取所有文件时,脚本仍然崩溃。

此外,我考虑过以某种方式将指针的状态保存在

$dir
中,以便稍后通过 AJAX 请求使用它并获取所有文件,但我找不到任何用于此目的的解决方案。

有没有办法设置读取文件的限制和偏移量? 我的意思是像分页一样。

php file-handling large-data
2个回答
13
投票

如果内存是一个大问题,您可以将 RecursiveDirectoryIteratorGenerator 一起使用。

function recursiveDirectoryIterator($path) {
  foreach (new RecursiveIteratorIterator(new RecursiveDirectoryIterator($path)) as $file) {
    if (!$file->isDir()) {
      yield $file->getFilename() . $file->getExtension();
    }
  }
}

$start = microtime(true);
$instance = recursiveDirectoryIterator('../vendor');
$total_files = 0;
foreach($instance as $value) {
  // echo $value
  $total_files++;
}
echo "Mem peak usage: " . (memory_get_peak_usage(true)/1024/1024)." MiB";
echo "Total number of files: " . $total_files;
echo "Completed in: ", microtime(true) - $start, " seconds";

这是我在不太好的笔记本电脑上得到的。


0
投票

我有 Unix 背景,所以你可以这样做(假设你在 Linux 或 Unix 上运行 PHP):

  • 系统调用:/bin/ls -c1 > files.list
  • 您可以使系统调用变得像您想要的那样复杂,排序、解析、编辑……
  • 读取 files.list 并显示该列表
  • 您可以使用 file_get_contents() 来读取文件。
© www.soinside.com 2019 - 2024. All rights reserved.