分布式日志收集系统:Facebook Scribe之日志收集方案

写入日志到Scribe的解决方案

1.概述

       Scribe日志收集服务器只负责收集主动写入它的日志,它本身不会去主动抓取某一个日志,所以为了把日志写入到scribe服务器,我们必须主动向 scribe服务器发送日志信息。由于scribe服务器是基于thrift框架实现的,并且thrift支持多种编程语言的通信,所以对于写入 scribe服务器的客户端实现也可以使用多种语言,这就为把写入日志的客户端集成到各种应用系统中提供了很好的支持。把写入日志到scribe服务器的功能集成到应用系统是一种可行的解决方案,但是不是唯一的解决方案,我们还可以现实一个单独的客户端,专门用来抓取应用系统生成的日志文件,然后写入到 scribe服务器。下面就针对这两种方案具体说明。[......]

阅读全文