Node.js – 버퍼와 스트림 – 2 – 파일 스트림
파일 스트림 소개
파일 스트림은 Node.js에서 파일을 읽거나 쓸 때 사용되는 개념입니다. 파일 스트림은 파일을 작은 청크(조각) 단위로 처리하여 메모리 사용량을 최적화하고 처리 속도를 향상시킬 수 있습니다. 버퍼와 스트림을 이해하고 있다면 파일 스트림을 사용하여 대용량 파일을 효율적으로 처리할 수 있습니다.
파일 스트림의 작동 방식
파일 스트림은 파일을 읽거나 쓰기 위해 스트림 개체를 사용합니다. 파일 스트림은 스트림의 한 종류로서 파일을 효율적으로 처리하는 방법을 제공합니다. 파일을 스트림으로 처리하면 한 번에 파일 전체를 읽거나 쓰는 것이 아니라 작은 청크 단위로 나누어 처리합니다. 이렇게 함으로써 대용량 파일도 메모리에 한 번에 로드하지 않고 조금씩 처리할 수 있습니다.
예를 들어, 파일을 읽는 경우, 파일 스트림은 파일을 청크 단위로 읽어 버퍼에 저장한 다음 버퍼에서 데이터를 처리합니다. 이 과정을 청크 단위로 반복하면 전체 파일을 읽을 수 있습니다. 마찬가지로 파일을 쓰는 경우에도 작은 청크 단위로 데이터를 파일에 쓰게 됩니다.
파일 스트림 예시
아래는 Node.js에서 파일 스트림을 사용하여 파일을 읽고 쓰는 간단한 예시입니다.
const fs = require('fs');
// 파일 읽기 스트림
const readStream = fs.createReadStream('input.txt');
readStream.on('data', (chunk) => {
console.log(`Received ${chunk.length} bytes of data.`);
// 데이터를 처리하는 로직을 여기에 작성합니다.
});
readStream.on('end', () => {
console.log('File reading completed.');
});
// 파일 쓰기 스트림
const writeStream = fs.createWriteStream('output.txt');
writeStream.write('Hello, World!', 'utf8');
writeStream.end();
writeStream.on('finish', () => {
console.log('File writing completed.');
});위 예시에서는 fs 모듈을 사용하여 파일을 읽고 쓰는 작업을 수행합니다. createReadStream 함수를 사용하여 파일 읽기 스트림을 생성하고, createWriteStream 함수를 사용하여 파일 쓰기 스트림을 생성합니다. 읽기 스트림은 data 이벤트를 통해 데이터 청크를 읽어옵니다. 쓰기 스트림은 write 메서드를 사용하여 데이터를 파일에 씁니다. 쓰기 작업이 완료되면 finish 이벤트가 발생합니다.
파일 스트림의 장점
파일 스트림을 사용하는 것에는 여러 가지 장점이 있습니다. 첫째로, 대용량 파일을 효율적으로 처리할 수 있습니다. 전체 파일을 메모리에 로드하지 않고 작은 청크 단위로 나누어 처리하므로, 작업이 메모리에 맞지 않는 큰 파일도 처리할 수 있습니다.
둘째로, 파일 스트림은 실시간 데이터 처리에 적합합니다. 파일이 계속해서 생성되는 상황이라면 파일 스트림을 사용하여 실시간으로 데이터를 처리할 수 있습니다. 예를 들어, 로그 파일을 실시간으로 읽어서 특정 이벤트를 감지하거나 분석하는 등의 작업을 할 수 있습니다.
셋째로, 파일 스트림은 네트워크 통신에서도 유용하게 사용될 수 있습니다. HTTP 요청이나 파일 다운로드 등의 작업에서도 파일 스트림을 사용하여 효율적인 데이터 처리를 할 수 있습니다.
파일 스트림 주의사항
파일 스트림을 사용할 때 몇 가지 주의사항이 있습니다.
첫째로, 파일을 읽을 때는 읽기 스트림에 대한 data 이벤트를 처리해야 합니다. 데이터 청크를 읽을 때마다 data 이벤트가 발생하므로, 이벤트 핸들러를 등록하여 데이터를 처리하는 로직을 작성해야 합니다.
둘째로, 파일을 쓸 때는 파일 쓰기 작업이 완료되었는지 finish 이벤트를 확인해야 합니다. 쓰기 작업이 완료되기 전에 스트림을 종료하면 파일에 데이터가 제대로 쓰이지 않을 수 있습니다. finish 이벤트가 발생할 때까지 기다렸다가 작업을 종료해야 합니다.
셋째로, 파일 스트림을 사용할 때는 오류 처리를 잘 해야 합니다. 파일을 읽거나 쓰는 도중에 오류가 발생할 수 있으므로, error 이벤트를 처리하여 예외 상황에 대처해야 합니다. 오류가 발생하면 적절한 에러 핸들링을 수행하고, 스트림을 종료하거나 필요한 조치를 취해야 합니다.
마무리
이상으로 파일 스트림에 대한 설명을 마칩니다. 파일 스트림은 Node.js에서 파일을 효율적으로 처리하기 위한 강력한 도구입니다. 작은 청크 단위로 파일을 처리하여 메모리 사용량을 최적화하고, 대용량 파일이라도 효율적으로 처리할 수 있습니다. 파일 스트림을 활용하여 실시간 데이터 처리나 네트워크 통신 등 다양한 작업을 수행할 수 있습니다. 그러나 파일 스트림을 사용할 때는 데이터를 읽고 쓰는 이벤트를 올바르게 처리하고, 오류 처리를 신경써야 합니다. 파일 스트림을 적절히 활용하여 원활하고 효율적인 파일 처리를 해보세요!