Chuyển đến nội dung chính

An Efficient Log Management System

http://repository.vnu.edu.vn/handle/VNU_123/56824



Server monitoring is really necessary because this can help administrators to track users’ activities in order to improve user management ability, load balancing as well as to detect DDoS attacks. 
Usually, server monitoring is based on logging.
However, logging system is always considered to be expensive in term of storage, data collection, data searching and analysis.
In this paper, we introduce eLMS, an efficient and scalable log management system.
In our system, the log files can be collected from multiple servers, stored in a scalable manner, appropriately indexed and fast analysed. eLMS acts both in online and off-line modes and provides a practical web-based monitoring interface. eLMS is based on a famous open-source core called ELK including three main modules: ElasticSearch, LogStash and Kibana.
However, by using queue and streaming technique instead of uploading technique used in LogStash, eLMS is tested to be at least ten times faster than existing ELK


Title: An Efficient Log Management System
Authors: Nguyen, Van Nam
Tran, Van Cuong
Keywords: Log Files;Big Data;Streaming;Index and Search.
Issue Date: 2016
Publisher: ĐHQGHN
Series/Report no.: Vol. 32, No. 2 (2016);
Abstract: Server monitoring is really necessary because this can help administrators to track users’ activities in order to improve user management ability, load balancing as well as to detect DDoS attacks. Usually, server monitoring is based on logging. However, logging system is always considered to be expensive in term of storage, data collection, data searching and analysis. In this paper, we introduce eLMS, an efficient and scalable log management system. In our system, the log files can be collected from multiple servers, stored in a scalable manner, appropriately indexed and fast analysed. eLMS acts both in online and off-line modes and provides a practical web-based monitoring interface. eLMS is based on a famous open-source core called ELK including three main modules: ElasticSearch, LogStash and Kibana. However, by using queue and streaming technique instead of uploading technique used in LogStash, eLMS is tested to be at least ten times faster than existing ELK
Description: p. 43-48
URI: http://repository.vnu.edu.vn/handle/VNU_123/56824
ISSN: 0866-8612
Appears in Collections:Computer Science and Communication Engineering


Nhận xét

Bài đăng phổ biến từ blog này

Nghiên cứu chiết tách và chuyển hóa zerumbone trong một số cây thuốc thuộc họ Gừng (Zingiberaceae) Việt Nam và khảo sát hoạt tính gây độc tế bào ung thư

http://repository.vnu.edu.vn/handle/VNU_123/36955 Citation Vương, V. T. (2016). Nghiên cứu chiết tách và chuyển hóa zerumbone trong một số cây thuốc thuộc họ Gừng (Zingiberaceae) Việt Nam và khảo sát hoạt tính gây độc tế bào ung thư. Luận án Tiến sỹ, Đại học Quốc gia Hà Nội, Việt Nam Publisher Trường Đại học Khoa học Tự nhiên Appears in Collections: HUS - Dissertations

Phân tích, đánh giá điều kiện địa lý và tài nguyên phục vụ tổ chức lãnh thổ du lịch tỉnh Vĩnh Phúc

http://repository.vnu.edu.vn/handle/VNU_123/36956 Citation Lương, C. L. (2016). Phân tích, đánh giá điều kiện địa lý và tài nguyên phục vụ tổ chức lãnh thổ du lịch tỉnh Vĩnh Phúc. Luận án Tiến sỹ, Đại học Quốc gia Hà Nội, Việt Nam Publisher Trường Đại học Khoa học Tự nhiên Appears in Collections: HUS - Dissertations

Nghiên cứu sự tạo phức của một số nguyên tố đất hiếm với Isolơxin và thăm dò hoạt tính sinh học của chúng

http://repository.vnu.edu.vn/handle/VNU_123/37005 Keywords Hóa vô cơ, Nguyên tố hóa học, Đất hiếm, Hoạt tính sinh học Citation Lê, M. T. (2011). Nghiên cứu sự tạo phức của một số nguyên tố đất hiếm với Isolơxin và thăm dò hoạt tính sinh học của chúng. Luận án Tiến sỹ, Đại học Quốc gia Hà Nội, Việt Nam Publisher Trường Đại học Khoa học Tự nhiên Appears in Collections: HUS - Dissertations