在非常大的文件开头添加两行的有效方法

Question

我有一组非常大（每个几个 GB）的文本文件。我需要在每个文件的开头添加两行。

我尝试使用 sed 和以下命令

sed -i '1iFirstLine'
sed -i '2iSecondLine'

sed 的问题是它会循环遍历整个文件，即使只需要在开头添加两行，因此会花费大量时间。

是否有其他方法可以更有效地执行此操作，而无需读取整个文件？

Answer 1

你应该尝试一下

echo "1iFirstLine" > newfile.txt
echo "2iSecondLine" >> newfile.txt
cat oldfile.txt >> newfile.txt
mv newfile.txt oldfile.txt

Answer 2

这个运行完美，而且速度也非常快。

perl -pi -e '$.=0 if eof;print "first line\nsecond line\n" if ($.==1)' *.txt

Answer 3

如果不重写文件，就不可能在开头添加（与附加到末尾相反）。您根本无法“移动”文件内容，因为没有文件系统支持这一点。所以你应该这样做：

echo -e "line 1\nLine2" > tmp.txt
cat tmp2.txt oldbigfile.txt > newbigfile.txt
rm oldbigfile.txt
mv newbigfile.txt oldbigfile.txt

请注意，您需要足够的磁盘空间来保存这两个文件一段时间。