스크라이브 (로그 서버)

스크라이브(Scribe)는 수많은 서버로부터 실시간으로 스트리밍되는 로그 데이터를 집약시키기 위한 서버이다. 클라이언트 사이드의 수정 없이 스케일링 가능하고 확장 가능하도록, 또 임의의 머신이나 네트워크의 실패에 대해 안전하도록 설계되었다.

스크라이브는 페이스북에서 개발되어 2008년 오픈 소스로 출시되었다.

스크라이브 서버들은 방향 그래프로 정렬되며 각 서버는 그래프의 다음 서버에 관해서만 인지하고 있다. 이 네트워크 토폴로지는 서버가 커짐에 따라 팻인(fat-in) 추가 계층을 추가하는 것, 그리고 데이터센터 간에 메시지를 보내기 전에 메시지를 일괄 처리하는 것을 허용하며 이를 위해 데이터센터 토폴로지의 명시적인 이해가 필요한 코드 없이 단순한 구성만 수반된다.

스크라이브는 신뢰성을 염두에 두면서도 무거운 프로토콜과 막대한 디스크 용량을 요구하지 않도록 설계되었다. 스크라이프는 간헐적인 연결 노드 실패를 관리하기 위해 모든 노드의 디스크에 데이터를 스풀링하지만 모든 메시지에 대해 로그 파일을 동기화하지는 않는다. 이로 인해 재난적인 하드웨어 실패나 충돌 시에 약간의 데이터 손실이 발생할 가능성이 있다. 그러나 이 정도의 신뢰성은 대부분의 페이스북 용례에 적합한 편이다.

같이 보기 
 아파치 플룸
 Fluentd

각주

외부 링크 
Open Source - Facebook Developers
The real value of Scribe for open source
Scribe project on GitHub

자유 소프트웨어
페이스북 소프트웨어
2008년 소프트웨어