linux删除文件前几行,linux删除文件的前n行

最新推荐文章于 2023-02-25 23:39:26 发布

转载最新推荐文章于 2023-02-25 23:39:26 发布 · 2.2k 阅读

5 ·

CC 4.0 BY-SA版权

原文链接：https://blog.csdn.net/weixin_42514005/article/details/116578854

运维专栏收录该内容

51 篇文章

订阅专栏

本文介绍了一种处理大型文件的方法，特别是如何利用Linux命令行工具tail、rm及mv来保留文件尾部特定数量的行，同时删除其余所有内容。此方法适用于需要清理不再需要的大规模数据的情况。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

需求描述:

今天看了一个系统的临时文件,有5.6G的大小,这个文件也没有用了,想要将大部分的文件都删除掉.

在此记录下删除的过程.删除前n行的记录.

操作过程:

对于数据量比较大的情况(本例5800万行)

1.通过tail命令,将文件尾部的n行数据重定向到新的文件中

tail -n 30000 out.tmp > out.tmp.bak

2.然后删除旧的文件,将新的文件修改为原名字

rm out.tmp

mv out.tmp.bak out.tmp

# 注意：如需要变更用户组，使用 sudo chown -R root:root out.tmp

备注:这样的话文件out.tmp尾部的30000行就保存下来,之前的行就删除掉了.在我的测试环境中,out.tmp中的记录大概5800万+

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

sunzq55

关注关注

0
点赞
踩
5

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Linux删除超大文件的前N行或后N行

JustinMars的博客

03-04

4602

查看数据，确认需要删除的行数查看前十行 cat bigdata.txt | head -n 10 查看后十行 cat bigdata.txt | tail -n 10 删除第一行 sed -i '1d' bigdata.txt 删除最后一行 sed -i '$d' bigdata.txt head命令删除后5行 head -n -5 bigdata.txt sed命令删除最后5行 tac bigdata.txt | sed '1,3d' | tac 删除前5行 sed -i '.

sed命令删除前100行里匹配的行

kevyoung的专栏

08-02

1757

sed是linux系统里非常简单实用的文本处理小工具，配合正则表达式以及find、grep等基本命令，可以非常快速实现一些日常的文本处理。举几个简单的例子吧： 1. 将当前目录下所有txt文件中abc替换为xyz： sed -i ‘s/abc/xyz/g' *.txt 解释一下，这里-i参数是直接修改输入文件， ’s/abc/xyz/g' 是对输出文件执行的操作， *.txt 是当前目录下的所有txt文件。 ‘s/abc/xyz/g' 意思是把输入文件逐行读入，然后查找abc并替换为xy...

2 条评论您还未登录，请先登录后发表或查看评论

Linux删除当前日志的前1万行

一只没有脚的鸟

11-03

9062

需求:目前有一台服务器的日志过多，需要删除前100w行。操作命令如下: 1)删除一个日志的前1000000行日志。 [root@arpapp primetongw]# cat nohup.out |wc -l 5695412 [root@arpapp primetongw]# sed -i '1,1000000d' nohup.out （d命令的意思是删除） [root@arpapp prime...

Linux 删除超大文件的前N行或后N行

李逍遥

10-28

2612

Linux 删除超大文件的前N行或后N行

linux shell sed 删除文件前几行

whatday的专栏

10-24

1万+

sed命令不加参数i 就只看到结果，没写入a.txt文件，加参数i 就写入了如果有不大确定删除效果的，就先不加参数i 1，删除首行 $ sed -i '1d' a.txt 2，删除前100行 $ sed -i '1,100d' a.txt 3，删除尾行 $ sed -i '$d' a.txt ...

linux删除文件的前几行

06-28

2. 输入以下命令，将文件的前n行删除，并将结果输出到新文件中： sed '1, n d' oldfile > newfile 其中，n为要删除的行数，oldfile为原文件名，newfile为新文件名。 3. 等待命令执行完成，查看新文件是否符合要求...

Linux 文件 IO 删除文件的第10行

qq_55898737的博客

02-25

676

想删除一个文件的第10行，首先我们我们要操作一个文件，先用两个文件指针打开他，再一个文件指针赋予读权限，另一个赋予读权限，再让读指针指向文件的第11行，写指针指向文件的第10行，然后读指针读一个写指针写一个，直到文件末尾，这样就完成了删除文件的第10行。第三步读指针到达指定位置。第四步写指针到达指定位置。

linux 去除文件里面第二行数据,运用sed命令高效地删除文件的特定行

weixin_34663443的博客

05-16

2389

正常来说，我们想要删除文件中的某些行内容，一般都是先打开这个文件，然后找到要删除的内容，再然后选中这些行并按删除键进行删除，这在数据量很少时是没有问题的。但是，一旦文件中的行数据非常多，而且数据冗杂的情况下，你还要用上面的方法去做的话就很恐怖了。为此，今天这篇文章将带大家一起学习运用 sed行工具，即使在数据多而杂的情况下也能高效而优雅地删除文件中的特定行内容。ed 是 Stream Editor...

linux实现自动删除最旧的几个文件详解

09-15

`ls`用于列出目录内容，`-l`选项显示详细信息，`-t`按修改时间排序，`-r`进行反向排序（即最新到最旧），`head`用于获取文件或命令输出的前几行，`xargs`则用于将标准输入转换为命令行参数。要删除最旧的几个文件...

linux删除大文件的前n行

kwame211的博客

01-22

8590

linux删除大文件的前n行在数据挖掘中我们经常会增量更新训练日志，需要删除前n行的过期数据，直接用sed命令比较慢，谷歌了一下，发现有个奇技巧： tail -n +3 old_file > new_file mv new_file old_file 这样就删除了前2行，速度要比sed命令快 ...

linux下大文件删除行

谷雨

02-26

1481

在linux 下，删除文件file中的第1到第N行： sed -i '1,N d' file PS：上面是对原文件file做删除操作。 sed '1,N d' file > newfile PS：上面是保持原文件file不变，做删除操作后将结果另存为newfile。

[转]linux 删除文件的前几行

gxl_ct001的专栏

05-26

1107

linux 删除文件的前几行删除前十行sed -i '1,10d' filename 原文网址：http://blog.sina.com.cn/s/blog_6d62076c0100q6o1.html

LINUX删除文章的前几行

独自登高楼望断天涯路

07-06

5916

sed -i 1,5d file 删除前5行

Linux超大文件删除前N行

u011390757的博客

11-01

485

这个方法比sed快几百倍是有的。对于小文件可以用sed来操作 sed -i '1,14030000d' send_url_log.txt tail -n +3 old_file > new_file mv new_file old_file

linux环境中如何删除文件的前n行?

weixin_33964094的博客

08-15

2490

需求描述: 　　今天看了一个系统的临时文件,有5.6G的大小,这个文件也没有用了,想要将大部分的文件都删除掉. 　　在此记录下删除的过程.删除前n行的记录. 操作过程: 对于数据量比较大的情况(本例5800万) 1.通过tail命令,将文件尾部的n行数据重定向到新的文件中 tail -n 30000 out.tmp > out.tmp.bak 2.然后删除旧的文件,将新...

『批处理』批量删除文本文件前 n 行

rhymeXmoves的博客

10-15

4575

使用方法：新建文本文档，复制下方代码，保存，修改后缀为**.bat**，双击即可执行。 @ECHO OFF SET TxtDir="%~dp0" SET /A N=6 ECHO 删除行操作开始，请耐心等待。 ECHO 正在执行，请勿关闭本窗口。 ECHO ... CD /D %TxtDir% FOR /F "tokens=1 delims=" %%I IN ('DIR /A /B *.txt') DO ((MORE +%N% "%%I">"%%I_")&(DEL /A /F /Q "%%I")

bash shell : 删除文件的前几行