python和shell(awk命令) 可以实现直接读取文件的某一行,按行号进行读取 。并可以精准的取得该行的某个字段,这个有点类似于x轴、y轴定位某个点的操作。

一、awk取某行某列值

awk 可以设置条件来输出文件中m行到n行中每行的指定的k字段,使用格式如下:

1awk    'NR==m,NR==n {print $k}'  path/filename

m,n,k表示实在的数值。如果要用变量来表示m,n的值,则变量需要用单引号将其引起来。NR,{print }是awk命令在此用法下的规定字段;path/filename表示读取文件的路径及文件名。这里指定了两行,如果只指定一行,可以这样写:

1awk    'NR==m {print $k}'  path/filename

二、python取某行某列

标准库提供的linecache模块提供具体取某一行的方法:

1import linecache
2theline = linecache.getline(filepath, line_number)

取到相关的行以后,再对theline做split切分成list,再对list索引取值就行了。如theline.split()[2] 。

三、linecache模块的用法

即然,提到了linecache模块,这里就列下linecache的其他方法。linecache模块允许从任何文件里得到任何的行,并且使用缓存进行优化,常见的情况是从单个文件读取多行。

  • linecache.getlines(filename) 从名为filename的文件中得到全部内容,输出为列表格式,以文件每行为列表中的一个元素,并以linenum-1为元素在列表中的位置存储
  • linecache.getline(filename,lineno) 从名为filename的文件中得到第lineno行。这个函数从不会抛出一个异常–产生错误时它将返回”(换行符将包含在找到的行里)。如果文件没有找到,这个函数将会在sys.path搜索。
  • linecache.clearcache() 清除缓存。如果你不再需要先前从getline()中得到的行
  • linecache.checkcache(filename) 检查缓存的有效性。如果在缓存中的文件在硬盘上发生了变化,并且你需要更新版本,使用这个函数。如果省略filename,将检查缓存里的所有条目。
  • linecache.updatecache(filename) 更新文件名为filename的缓存。如果filename文件更新了,使用这个函数可以更新linecache.getlines(filename)返回的列表。

示例

1# cat a.txt
21a
32b
43c
54d
65e
76f
87g

1、获取a.txt文件的内容

1>>> a=linecache.getlines('a.txt')
2>>> a
3['1an', '2bn', '3cn', '4dn', '5en', '6fn', '7gn']

2、获取a.txt文件中第1-4行的内容

1>>> a=linecache.getlines('a.txt')[0:4]
2>>> a
3['1an', '2bn', '3cn', '4dn']

3、获取a.txt文件中第4行的内容

1>>> a=linecache.getline('a.txt',4)
2>>> a
3'4dn'

注意

使用linecache.getlines(‘a.txt’)打开文件的内容之后,如果a.txt文件发生了改变,如你再次用linecache.getlines获取的内容,不是文件的最新内容,还是之前的内容,此时有两种方法:

1、使用linecache.checkcache(filename)来更新文件在硬盘上的缓存,然后在执行linecache.getlines(‘a.txt’)就可以获取到a.txt的最新内容;

2、直接使用linecache.updatecache(‘a.txt’),即可获取最新的a.txt的最新内容。

读取文件之后你不需要使用文件的缓存时需要在最后清理一下缓存,使linecache.clearcache()清理缓存,释放缓存。