Python을 사용하여 텍스트 파일을 작업하는 가장 쉬운 방법(단계별)

여기서 정규 표현식을 사용하면 문자열뿐만 아니라 구조화된 텍스트도 바꿀 수 있습니다.

단어, 줄, 글자를 세어보세요
텍스트 파일이 있고 줄 수, 단어 수, 단어 발생 빈도와 같은 기본적인 지표가 필요하다고 가정해 보겠습니다. 이 정보는 텍스트 분석, 보고서, 데이터 처리에 유용할 수 있습니다. Python을 사용하면 이러한 작업을 쉽게 수행할 수 있습니다. 루프를 사용하여 개수를 셀 수 있습니다.

line_count = 0
char_count = 0

과 열 수(“노트.txt”, "아르 자형") as f:
을 통한 선 in f:
줄 수 += 1
문자 수 += 렌(선)

인쇄("윤곽:"(줄 수)
인쇄(“캐릭터:”, 문자 수)

이 간단한 루프는 대용량 파일에서도 잘 작동합니다. 한 번에 한 줄씩 읽고, 세고, 줄 전체에 걸쳐 총 문자 수를 추적합니다. 단어 수를 세는 방법은 다음과 같습니다.

word_count = 0

with open("notes.txt", "r") as f:
    for line in f:
        words = line.split()
        word_count += len(words)

print("Words:", word_count)

.split()을 사용하여 각 줄을 분할하면 단어 목록이 제공되는데, 이는 간단한 단어 기반 측정을 수행할 때 이상적입니다.

더욱 진보된 단어 분석을 위해 모듈을 활용할 수 있습니다. collections , 이와 같이:

from collections import Counter

counter = Counter()

with open("notes.txt", "r") as f:
    for line in f:
        counter.update(line.split())

print(counter.most_common(5))

가장 많이 사용된 단어를 알아야 한다면 "카운터" 도구가 매우 유용합니다. 항목 수를 세어 주고, .most_common() 함수를 사용하면 가장 많이 사용된 단어(N)도 알려줍니다.

파일 분할 및 병합

텍스트 파일은 엄청나게 커질 수 있습니다. 수백만 개의 행이 포함된 데이터세트나 한 번에 처리하기 어려운 방대한 양의 데이터를 내보내는 상황을 상상해 보세요. 때로는 파일을 작은 부분으로 분할해야 할 수도 있고, 때로는 여러 파일을 하나의 명확하고 통합된 출력으로 병합해야 할 수도 있습니다. Python은 두 가지 작업을 모두 손쉽게 처리합니다.

파일을 분할하는 한 가지 방법은 고정된 개수의 줄을 새 파일에 쓰는 것입니다. 방법은 다음과 같습니다.

chunk_size = 10
file_number = 1
current_lines = []

with open("bigdata.txt", "r") as f:
    for i, line in enumerate(f, start=1):
        current_lines.append(line)

        if i % chunk_size == 0:
            output_name = f"chunk_{file_number}.txt"
            with open(output_name, "w") as out:
                out.writelines(current_lines)
            current_lines = []
            file_number += 1

# write any remaining lines
if current_lines:
    output_name = f"chunk_{file_number}.txt"
    with open(output_name, "w") as out:
        out.writelines(current_lines)

여러 파일을 하나의 모듈로 병합하려면 Python의 glob 모듈이 유용합니다.

import glob

with open("merged_output.txt", "w") as outfile:
    for filename in glob.glob("logs/log*"):
        with open(filename, "r") as infile:
            outfile.write(infile.read())