Python实现高效的文件处理

第一段：文件的读取和写入

Python标准库中自带了文件读取和写入的模块，使用open()方法即可打开文件。常用的几个参数分别是文件名、打开文件的模式、缓冲区大小，其中打开文件的模式有w、r、a等等，分别表示写、读、追加等等。接下来是一个读取文件中每行文本的例子：

with open("example.txt", "r") as f:
    for line in f.readlines():
        print(line.strip()) 

第二段：正则表达式的应用

正则表达式是处理文本的利器，它是一种描述字符模式的语言。Python也支持在文件处理中使用正则表达式来提取、匹配或替换文本。下面是一个读取文件并根据正则表达式替换文本的例子：

import re

with open("example.txt", "r") as f:
    file_content = f.read()

new_content = re.sub(r"\d+", "42", file_content)

with open("example_new.txt", "w") as f:
    f.write(new_content)

第三段：文件的压缩和解压

Python中的gzip模块和zipfile模块提供了文件的压缩和解压功能。gzip模块可以压缩一个单独的文件，而zipfile模块则可以将多个文件压缩成一个zip文件。接下来是一个使用zipfile模块压缩文件的例子：

import zipfile

with zipfile.ZipFile("example.zip", "w") as myzip:
    myzip.write("example.txt")
    myzip.write("example2.txt")

第四段：使用pandas处理大量文件数据

在处理大量文件数据时，可以使用pandas库来快速读取、处理和分析数据。pandas库提供的对象，如Series和DataFrame，可以将数据以表格的形式展示出来，并提供了许多丰富的数据操作和统计功能。下面是一个使用pandas读取csv文件的例子：

import pandas as pd

df = pd.read_csv("example.csv")
print(df.head())  # 打印前5条数据