当前位置:首页 > 文章列表 > 文章 > python教程 > Python读写TXT文件入门教程

Python读写TXT文件入门教程

2026-03-08 16:35:49 0浏览 收藏
本文系统讲解了Python中安全、高效读写TXT文件的完整实践方案,涵盖open()函数的核心用法、with语句的必要性、read()/readline()/readlines()与write()/writelines()的适用场景差异,并重点剖析了编码乱码这一高频痛点——强调必须显式指定encoding(如utf-8或gbk),介绍chardet自动检测技巧;同时针对大文件处理提供逐行迭代和生成器等内存友好策略,并深入对比'w'、'a'、'x'三种写入模式的安全边界与典型应用,帮助开发者规避数据覆盖风险、确保操作健壮可靠。

python如何读取一个txt文件_python读写TXT文件的基本操作

Python读取TXT文件,核心在于使用内置的open()函数来打开文件,然后根据需求选择不同的方法(如read()readline()readlines())来获取文件内容。写入文件也同样通过open()函数,并利用write()writelines()方法实现。重要的是,始终推荐使用with语句来管理文件操作,这能确保文件在操作完成后被正确关闭,即使发生错误也不例外。

解决方案

处理TXT文件,无论是读还是写,其基本骨架都围绕着Python的open()函数展开。这个函数返回一个文件对象,我们通过它来与文件交互。

读取TXT文件:

最常见的场景就是把文件内容读出来。这里有几种方式,取决于你希望如何处理文件内容。

  1. 一次性读取整个文件: 如果你确定文件不大,或者需要一次性处理所有内容,read()方法最直接。

    try:
        with open('my_document.txt', 'r', encoding='utf-8') as file:
            content = file.read()
            print("文件全部内容:")
            print(content)
    except FileNotFoundError:
        print("错误:文件 'my_document.txt' 未找到。")
    except UnicodeDecodeError:
        print("错误:文件编码不匹配,尝试其他编码。")

    这里'r'表示读取模式,encoding='utf-8'则指定了文件编码,这是非常关键的一步,不然很容易遇到乱码问题。

  2. 逐行读取文件: 对于大多数文本文件处理,逐行读取更为常见,也更节省内存,尤其是在处理大文件时。

    try:
        with open('my_document.txt', 'r', encoding='utf-8') as file:
            print("\n逐行读取内容:")
            for line_num, line in enumerate(file, 1):
                print(f"第 {line_num} 行: {line.strip()}") # .strip() 去除行尾的换行符
    except FileNotFoundError:
        print("错误:文件 'my_document.txt' 未找到。")
    except UnicodeDecodeError:
        print("错误:文件编码不匹配,尝试其他编码。")

    直接迭代文件对象是最优雅且高效的逐行读取方式。

  3. 读取所有行到一个列表中: 如果你需要将文件的所有行作为一个列表来处理,readlines()方法会很方便。

    try:
        with open('my_document.txt', 'r', encoding='utf-8') as file:
            lines = file.readlines()
            print("\n所有行以列表形式:")
            for line_num, line in enumerate(lines, 1):
                print(f"列表第 {line_num} 项: {line.strip()}")
    except FileNotFoundError:
        print("错误:文件 'my_document.txt' 未找到。")
    except UnicodeDecodeError:
        print("错误:文件编码不匹配,尝试其他编码。")

    注意,readlines()会把所有行加载到内存中,对超大文件要慎用。

写入TXT文件:

写入文件同样需要选择合适的模式。

  1. 写入新内容(覆盖模式): 使用'w'模式会创建一个新文件,如果文件已存在,则会清空原有内容。

    new_content = "这是我写入的第一行内容。\n这是第二行,带换行符。\n"
    with open('output.txt', 'w', encoding='utf-8') as file:
        file.write(new_content)
        file.write("再加一行,不带换行符可能和上一行连起来。\n")
    print("\n'output.txt' 已在'w'模式下写入。")
  2. 追加内容(追加模式): 使用'a'模式会在文件末尾添加新内容,而不会覆盖原有内容。如果文件不存在,则会创建新文件。

    append_content = "这是追加的新内容。\n"
    with open('output.txt', 'a', encoding='utf-8') as file:
        file.write(append_content)
    print("\n'output.txt' 已在'a'模式下追加内容。")
  3. 写入多行内容:writelines()方法可以写入一个字符串列表。

    list_of_lines = ["列表中的第一行。\n", "列表中的第二行。\n", "列表中的第三行。\n"]
    with open('output_list.txt', 'w', encoding='utf-8') as file:
        file.writelines(list_of_lines)
    print("\n'output_list.txt' 已使用writelines写入。")

    需要注意的是,writelines()不会自动添加换行符,你需要确保列表中的每个字符串都包含\n

处理文件编码问题:为什么我的TXT文件读出来是乱码?

这几乎是Python文件操作中最常见、也最让人头疼的问题之一。当你的TXT文件读出来一堆“锟斤拷”或者莫名其妙的符号时,八成是编码惹的祸。简单来说,文件编码就像是一种语言,你的Python程序需要用正确的“语言”去解读文件。如果文件是UTF-8编码,你却用GBK去读,那肯定就“鸡同鸭讲”了。

Python的open()函数默认的编码在不同操作系统上可能不一样(比如Windows上可能是GBK,Linux/macOS上可能是UTF-8),所以,最稳妥的做法是明确指定编码

# 假设文件是GBK编码
try:
    with open('example_gbk.txt', 'r', encoding='gbk') as file:
        content = file.read()
        print("成功读取GBK文件:", content)
except UnicodeDecodeError:
    print("错误:尝试GBK编码失败。")
except FileNotFoundError:
    print("文件未找到。")

# 假设文件是UTF-8编码
try:
    with open('example_utf8.txt', 'r', encoding='utf-8') as file:
        content = file.read()
        print("成功读取UTF-8文件:", content)
except UnicodeDecodeError:
    print("错误:尝试UTF-8编码失败。")
except FileNotFoundError:
    print("文件未找到。")

如何确定文件的编码?

这其实是个经验活,但也有工具可以帮忙:

  • 文本编辑器查看: 很多高级文本编辑器(如VS Code, Sublime Text, Notepad++)在右下角或状态栏会显示当前文件的编码。

  • 尝试常见的编码: UTF-8是目前最通用的编码,其次是GBK(中文Windows系统常见)、Latin-1(或ISO-8859-1,处理西欧语言)。你可以依次尝试这些编码,直到成功。

  • 使用第三方库:chardet这样的Python库可以帮助你猜测文件的编码。

    # 需要先安装:pip install chardet
    import chardet
    
    def detect_encoding(file_path):
        with open(file_path, 'rb') as f: # 以二进制模式读取,因为chardet需要字节流
            raw_data = f.read(10000) # 读取文件开头一部分数据进行猜测
        result = chardet.detect(raw_data)
        return result['encoding']
    
    file_path = 'my_document.txt'
    detected_encoding = detect_encoding(file_path)
    print(f"猜测文件 '{file_path}' 的编码是: {detected_encoding}")
    
    if detected_encoding:
        try:
            with open(file_path, 'r', encoding=detected_encoding) as file:
                content = file.read()
                print("使用猜测编码读取成功:", content)
        except UnicodeDecodeError:
            print("错误:猜测编码未能成功解码。")

    即便chardet很强大,它也只是“猜测”,并非100%准确,尤其是文件内容较少或编码特征不明显时。但它无疑提供了一个很好的起点。

大型文件读取策略:如何高效处理GB级别的TXT文件?

当你的TXT文件达到GB级别时,直接使用file.read()file.readlines()将整个文件加载到内存中,几乎肯定会导致内存溢出(MemoryError),程序直接崩溃。这种情况下,我们需要更“聪明”的策略,也就是逐行处理

Python的文件对象本身就是一个迭代器。这意味着你可以像遍历列表一样遍历它,每次只加载一行到内存中,这正是处理大文件的关键。

def process_large_file_line_by_line(file_path):
    line_count = 0
    total_chars = 0
    print(f"开始处理大型文件: {file_path}")
    try:
        with open(file_path, 'r', encoding='utf-8') as file:
            for line in file: # 核心:直接迭代文件对象
                line_count += 1
                total_chars += len(line)
                # 在这里对每一行进行你的具体处理
                # 例如:解析数据、筛选特定内容、写入另一个文件等
                if line_count % 100000 == 0: # 每处理10万行打印一次进度
                    print(f"已处理 {line_count} 行...")
        print(f"文件处理完成。总行数: {line_count}, 总字符数: {total_chars}")
    except FileNotFoundError:
        print(f"错误:文件 '{file_path}' 未找到。")
    except UnicodeDecodeError:
        print(f"错误:文件 '{file_path}' 编码不匹配,请检查。")

# 假设有一个非常大的文件 'big_data.txt'
# process_large_file_line_by_line('big_data.txt')

这种逐行迭代的方式,无论文件有多大,内存占用都保持在一个较低且稳定的水平,因为它每次只在内存中保留当前处理的这一行数据。

更高级一点的思考:生成器(Generators)

如果你需要对每一行进行一些预处理,并且这些预处理结果需要被后续的多个步骤使用,可以考虑使用生成器函数。生成器提供了一种惰性计算的方式,它不会一次性生成所有结果,而是在每次需要时才计算并返回下一个结果。

def read_lines_as_processed_data(file_path):
    """一个生成器函数,用于从文件中逐行读取并进行简单处理"""
    try:
        with open(file_path, 'r', encoding='utf-8') as file:
            for line_num, line in enumerate(file, 1):
                # 假设我们只是想把每行数据转为大写,并返回行号和处理后的内容
                processed_line = line.strip().upper()
                yield line_num, processed_line # 使用yield关键字
    except FileNotFoundError:
        print(f"错误:文件 '{file_path}' 未找到。")
    except UnicodeDecodeError:
        print(f"错误:文件 '{file_path}' 编码不匹配。")

# 使用生成器
# for num, data in read_lines_as_processed_data('big_data.txt'):
#     # 对data进行进一步操作
#     # print(f"处理后的第 {num} 行: {data}")
#     pass

生成器在处理大型数据集时非常有用,它将数据的生成和消费解耦,使得代码更清晰、内存效率更高。

写入文件时如何避免数据丢失或覆盖?

写入文件时最怕的就是不小心把原有数据冲掉,或者在多进程/多线程环境下写入冲突。Python的open()函数通过不同的模式来控制这种行为,理解它们是避免数据丢失的关键。

  1. 'w' (write) 模式: 这是最需要小心的模式。如果文件存在,它会截断文件(清空所有内容)然后写入;如果文件不存在,它会创建新文件。

    • 何时使用: 当你明确知道要创建一个全新的文件,或者要完全替换现有文件的内容时。
    • 风险: 误用会导致原有数据彻底丢失。
    # 第一次运行:创建文件并写入
    with open('safe_write.txt', 'w', encoding='utf-8') as f:
        f.write("这是第一次写入的内容。\n")
    print("safe_write.txt (w模式) 第一次写入完成。")
    
    # 第二次运行:会覆盖第一次写入的内容
    with open('safe_write.txt', 'w', encoding='utf-8') as f:
        f.write("这是第二次写入的内容,覆盖了第一次。\n")
    print("safe_write.txt (w模式) 第二次写入完成,内容已被覆盖。")
  2. 'a' (append) 模式: 这是最安全的写入模式之一。如果文件存在,它会在文件末尾追加内容;如果文件不存在,它会创建新文件。

    • 何时使用: 当你需要向日志文件添加记录、或在现有数据末尾追加新数据时。
    • 优点: 不会覆盖原有数据。
    # 第一次运行:创建文件并写入
    with open('safe_append.txt', 'a', encoding='utf-8') as f:
        f.write("这是第一次追加的内容。\n")
    print("safe_append.txt (a模式) 第一次追加完成。")
    
    # 第二次运行:会在文件末尾添加新内容
    with open('safe_append.txt', 'a', encoding='utf-8') as f:
        f.write("这是第二次追加的内容。\n")
    print("safe_append.txt (a模式) 第二次追加完成,内容已在末尾添加。")
  3. 'x' (exclusive creation) 模式: 这个模式是专门为防止覆盖而设计的。它要求文件必须不存在,如果文件已存在,open()函数会抛出FileExistsError异常。

    • 何时使用: 当你希望确保你正在创建一个全新的文件,并且不希望覆盖任何现有文件时。这在需要原子性操作(要么成功创建,要么失败,但绝不修改现有文件)的场景下非常有用。
    • 优点: 提供了最强的数据安全保障,防止意外覆盖。
    try:
        with open('safe_exclusive.txt', 'x', encoding='utf-8') as f:
            f.write("这是通过'x'模式创建并写入的内容。\n")
        print("safe_exclusive.txt (x模式) 创建并写入成功。")
    except FileExistsError:
        print("错误:文件 'safe_exclusive.txt' 已存在,'x'模式拒绝覆盖。")
    
    # 再次尝试运行,会触发FileExistsError
    try:
        with open('safe_exclusive.txt', 'x', encoding='utf-8') as f:
            f.write("这行内容永远不会被写入,因为文件已存在。\n")
    except FileExistsError:
        print("第二次尝试创建'safe_exclusive.txt'失败,因为文件已存在。")

确保数据写入磁盘:flush()close()

即便你使用了正确的模式,数据也可能不会立即写入物理磁盘。Python的文件操作通常会有内部缓冲区,数据会先写入缓冲区,达到一定量或文件关闭时才真正写入磁盘。with语句会自动处理文件关闭(close()),这会触发缓冲区刷新。如果你需要在文件关闭前强制数据写入磁盘,可以使用file.flush()方法。

with open('flush_example.txt', 'w', encoding='utf-8') as f:
    f.write("这行内容可能还在缓冲区。\n")
    f.flush() # 强制将缓冲区内容写入磁盘
    print("数据已强制刷新到磁盘。")
    # 即使程序此时崩溃,这行内容也应该已经写入了。
    f.write("这行内容在flush之后写入。\n")
# 文件退出with块时会自动关闭和刷新。

理解这些模式和机制,能让你在Python中进行文件操作时更加从容和安全。

到这里,我们也就讲完了《Python读写TXT文件入门教程》的内容了。个人认为,基础知识的学习和巩固,是为了更好的将其运用到项目中,欢迎关注golang学习网公众号,带你了解更多关于Python,TXT文件读写的知识点!

代码分割与懒加载提升单页应用性能代码分割与懒加载提升单页应用性能
上一篇
代码分割与懒加载提升单页应用性能
作业帮一对一怎么操作?真人老师流程全解析
下一篇
作业帮一对一怎么操作?真人老师流程全解析
查看更多
最新文章
资料下载
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ChatExcel酷表:告别Excel难题,北大团队AI助手助您轻松处理数据
    ChatExcel酷表
    ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
    4129次使用
  • Any绘本:开源免费AI绘本创作工具深度解析
    Any绘本
    探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
    4479次使用
  • 可赞AI:AI驱动办公可视化智能工具,一键高效生成文档图表脑图
    可赞AI
    可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
    4366次使用
  • 星月写作:AI网文创作神器,助力爆款小说速成
    星月写作
    星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
    5886次使用
  • MagicLight.ai:叙事驱动AI动画视频创作平台 | 高效生成专业级故事动画
    MagicLight
    MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
    4726次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码