Python을 사용하여 대용량 파일의 줄 수를 어떻게 효율적으로 계산할 수 있습니까?

Python에서 대용량 파일의 줄 수 가져오기

대용량 파일의 줄 수를 계산하는 것은 리소스 집약적인 작업일 수 있습니다. 효율성과 메모리 소비를 모두 최적화함으로써 이 문제를 효과적으로 해결할 수 있습니다.

널리 채택되는 접근 방식 중 하나는 제공된 예에서 볼 수 있듯이 for 루프에서 열거형을 활용하는 것입니다. 그러나 이 방법은 성능 집약적일 수 있습니다.

더 효율적인 솔루션

더 빠르고 간결한 솔루션을 위해 다음을 사용할 수 있습니다.

num_lines = sum(1 for _ in open('myfile.txt'))

이 한 줄 코드는 생성기 표현식의 유연성을 활용하여 전체 파일 내용을 반복하여 저장하지 않고 줄 수를 계산합니다. memory.

추가 성능 향상

속도와 견고성을 향상시키기 위해 바이너리 모드(rb)를 통합하고 with 블록 내에 코드를 포함하여 파일 닫기를 처리할 수 있습니다.

with open("myfile.txt", "rb") as f:
    num_lines = sum(1 for _ in f)

지원 중단됨 사용법

3.3 이전 Python 버전에서는 rbU 모드의 "U"가 범용 개행 지원을 활성화하기 위해 사용되었습니다. 그러나 이 사용법은 더 이상 사용되지 않으며 대신 rb 모드를 사용해야 합니다. Python 3.11에서는 rbU에서 "U"를 제거하여 rb를 표준 옵션으로 만들었습니다.

위 내용은 Python을 사용하여 대용량 파일의 줄 수를 어떻게 효율적으로 계산할 수 있습니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!