소품집

1. HDFS 기초 Hadoop Distributed File System 기존 대용량 파일 시스템 HDFS 설계 목표 장애복구 디스크 오류로 인한 데이터 저장 실패 및 유실과 같은 장애를 빠른 시간에 감지하고 대처 데이터를 저장하면, 복제 데이터도 함께 저장해서 데이터 유실을 방지 분산 서버 간 주기적인 상태 체크 스트리밍 방식의 데이터 접근 랜덤 엑세스 방식과 반대되는 개념 순차적으로 데이터에 접근하는 방식 낮은 접근 지연시간보다는 높은 데이터 처리율에 중점 파일 저장 및 조회를 위해 스트리밍 방식으로 데이터에 접근해야 함 배치 작업과 높은 데이터 처리량을 위해 스트리밍 방식을 사용 대용량 데이터 저장 하나의 파일이 기가바이트에서 테라바이트 이상의 사이즈로 저장될 수 있게 설계 높은 데이터 전송 대역..