파이썬으로 텍스트 파일의 단어 빈도 분석하기

파이썬으로 텍스트 파일에서 단어 빈도 분석하기

안녕하세요! 프로그래밍을 사랑하는 여러분, 오늘은 Python을 활용하여 텍스트 파일에서 단어의 빈도를 분석해보는 작은 프로젝트를 진행해 보겠습니다. 기본적인 파일 입출력을 이용해 단어 수를 세고 이를 출력하는 과정을 간단히 알아보겠습니다. 이 과정은 데이터 분석에 대한 기초적인 이해를 도와줄 것입니다. 자, 그럼 시작해볼까요?

들어가며

오늘 우리가 다룰 주제는 텍스트 파일에서 특정 단어의 빈도를 계산하는 것입니다. 이 프로젝트는 데이터 분석, 자연어 처리와 같은 다양한 분야에서 유용하게 사용될 수 있습니다. 예를 들어, 웹사이트의 방문자 피드백, 소셜 미디어의 댓글 분석 또는 문서의 내용을 요약하는 데 도움이 됩니다.

코드 작성하기

우선, 단어 빈도를 세기 위해 사용할 코드를 작성해 보겠습니다. 아래는 텍스트 파일을 읽고 각 단어의 빈도를 계산하는 코드입니다.

from collections import Counter
import re

def count_words_in_file(file_path):
    with open(file_path, 'r', encoding='utf-8') as file:
        text = file.read()
    
    # 모든 단어를 소문자로 변환하고, 문자만 남깁니다.
    words = re.findall(r'w+', text.lower())
    
    # 단어의 빈도 계산
    word_counts = Counter(words)
    
    return word_counts

# 실행 예제
file_path = 'sample.txt'  # 분석할 파일 경로
word_counts = count_words_in_file(file_path)

# 결과 출력
for word, count in word_counts.items():
    print(f"{word}: {count}")

코드 설명하기

1. 파일 읽기: with open(file_path, 'r', encoding='utf-8') as file:를 사용하여 파일을 읽습니다. with 구문 덕분에 파일을 안전하게 닫을 수 있습니다.
2. 정규 표현식 사용: re.findall(r'w+', text.lower())는 모든 단어를 소문자로 변환하고, 단어에 포함된 문자만 추출합니다. w+ 패턴은 알파벳과 숫자의 조합을 의미합니다.
3. 단어 빈도 계산: Counter를 사용하여 각 단어의 출현 빈도를 계산합니다.

4. 결과 출력: 최종적으로 각 단어와 그 빈도를 출력합니다.

예제 실행 결과

위 코드를 sample.txt에 대해 실행해 보면, 다음과 같은 결과를 얻을 수 있습니다:

hello: 4
world: 2
python: 5
programming: 3

추가적으로

이 프로그램은 기본적인 단어 빈도 분석 기능만을 제공합니다. 여기서 확장할 수 있는 몇 가지 아이디어는 다음과 같습니다:

• 사용자에게 파일 경로를 입력받기.
• 특정 단어가 포함된 문장도 함께 출력하기.
• 특정 단어를 필터링하여 제외하고 빈도 계산하기.

이러한 기능들을 추가하면 더욱 강력한 분석 도구로 발전할 수 있습니다.

마무리하며

이번 포스트에서는 간단한 파이썬 프로그램을 통해 텍스트 파일에서 단어 빈도를 분석하는 방법을 알아보았습니다. 프로그래밍을 통해 유용한 도구를 만드는 것은 언제나 즐거운 경험이죠! 여러분도 자신만의 분석 도구를 만들어 보시기를 추천드립니다. 질문이나 피드백이 있으시면 언제든지 댓글로 남겨주세요.

공유하기: 이 정보를 필요로 하는 다른 친구들에게도 알려주시면 좋겠습니다. 다음 포스트에서 만나요!