Python 基础文件操作

FEB 24TH, 2013

学习一门语言，我总是喜欢从文件开始。文本文件的读写操作是我比较在意的基本功能。 在这方面，Java语言功能比较强大，用到的设计模式也非常多。只是使用起来太过繁琐。 而Python在这方面表现非常好，简洁不失功能，强大不失性能，通俗不失优雅，值得称赞。

 

我们从一个最简单的开始。

 

with open('/etc/resolv.conf') as f:

   print(f.read()) 

这里有用到with语法来关闭文件句柄。

 

open()

首先来了解下open()内置函数。

 

open(file, mode='r', buffering=-1, encoding=None, errors=None, newline=None, closefd=True, opener=None)

   Open file and return a corresponding file object. If the file cannot be opened, an OSError is raised. 

open()的参数众多，通常需要关注的是mode/encoding/errors/newline等。

 

最佳实践

 

(1) 读取文件必须传入字符编码encoding 

(2) 用完的流需要关闭，推荐使用with操作 

(3) 换行符尽可能的使用UNIX格式(\n)，尽管python可以智能转换 

(4) 如果可以的话尽可能的使用utf-8编码来处理非ascii字符，不要依赖操作系统的编码 

小贴士

 

多个文件同时操作可使用with的语法：

 

with open('/etc/hosts','r') as f,open('/tmp/hosts','w') as t:

   //do something 

或者

 

with f=open('/etc/hosts'),t=open('/tmp/hosts','w'):

   // do something 

file object

文件对象描述的是一种“流”操作，通常支持read()或者write()方法。 这里的文件对象是一种概念上的“文件对象”，除了常见的真是的磁盘文件，还可以是 标准输入输出文件(stdin/stdout/stderr)，内存缓冲区(StringIO,cStringIO)， socket，pipes等。

 

这在io模块中有具体的描述。

 

文本操作和二进制操作有一些区别。分别介绍。

 

Text I/O

如果mode中包含t（默认），那么返回的流是一个纯文本操作。

 

read() 是读取文本的最简单的方法。返回的是字符串形式的结果（和参数encoding有关）。

 

read(n)

 Read and return at most n characters from the stream as a single str. If n is negative or None, reads until EOF. 

在很多安装脚本中有：

 

readme=open('./README.md').read() 

类似的用法。这在一个快速结束的程序中问题不大。在正式的服务中应该随时关闭文件句柄释放资源。

 

小贴士：

 

如果已经读取到文件末尾，read()则返回空字符串''。 

如果要读取一行，使用readline()方法。

 

readline(limit=-1)

 Read until newline or EOF and return a single str. If the stream is already at EOF, an empty string is returned. If limit is specified, at most limit characters will be read. 

读取一行意味着和行结束符有关，这个有点复杂。

 

读取多行，使用readlines()方法。这将返回一个字符串列表。readlines()也可以限制最多读取多少个字符。

 

小贴士：

 

readline(limit=-1)和readlines(limit=-1)对limit的描述不太一致。 

readline(limit=-1)描述的是读取一行，最多不超过limit个字符（不是字节），因此有可能结果不是某一行的结束。 

readlines(limit=-1)描述的是读取字符，直到limit个字符所在的行结束。也就是返回的结果一定是某一行的结束(除非EOF)。 

 

例如：

>>> open('/tmp/x1','w').write('Python真是一个好同学\n只是限制被割裂成两个版本了\n我支持python3.x')

 40 

>>> open('/tmp/x1','r').readline(10)

 'Python真是一个' 

>>> open('/tmp/x1','r').readlines(10)

 ['Python真是一个好同学\n'] 

readlines(limit)是一个难以理解的逻辑。如果可以不要随便传输一个参数。参考这里。

 

写入文本可使用write(s)方法：

 

write(s) Write the string s to the stream and return the number of characters written. 

写入的是字符串，而不是字节。如果要写入多行字符串，可以使用writelines(lines)方法。

 

小贴士：

 

write(s)和writelines(lines)不会将行结束符写入文件流。因此需要手动写入行结束符。 

Binary I/O

二进制流和文本流类似，只是二进制流没有encoding一说。打开二进制流需要传入参数mode中包含’b’。

 

例如：

 

>>> type(open('/etc/hosts','rb').read())

 <class 'bytes'> 

对比文本流，二进制流有一些小的差别：

 

read()返回的值是字节(bytes)

readline()返回的值是字节(bytes)，包括换行符

readlines()返回的值是字节(bytes)列表，包括换行符

write()参数可以是bytes或者bytearray

readinto(b)是将内容读取到bytearray b中，返回读取的字节数。

其它文件操作

除了read/write方法，文件对象还有一些其它的内置方法：

 

file.close() 关闭文件

file.fileno() 获取文件描述符（整形值）

file.flush() 对于有缓冲区的写操作，刷新缓冲区

file.tell() 返回当前流的字节位置

file.seek() 移动文件流的当前位置

file.truncate() 截断文件大小