Packer 활용 사례

Custom AMI를 제작하는 목적은 여럿이다. 그 중 몇 가지를 꼽자면 운영체제 컴포넌트 업그레이드, 모니터링 도구 설치, 보안체계에 맞는 구성 등을 배포 전에 테스트하고 검증한다.EC2 인스턴스를 초기화할 때 대용량의 바이너리를 다운로드…

Continue Reading

StreamAlert 간단 리뷰

Real-time Data Analysis and Alerting – Airbnb Engineering & Data Science airbnb/superset도 그렇고 Python 활용빈도가 높네 AWS에 의존적이다. 특정 벤더에 의존적이면 나쁘다고 보던 시절도 있지만 이제는 최대한 빨리 비지니스를 지원해서…

Continue Reading

ICYMI 웹 탐험일지 – 2017년 3월 29일

그나저나 아직도 저작권을 보호한다며 마우스 오른쪽 클릭을 막는다던가 변칙적인 수단을 쓰는 곳이 꽤 있네. 나도 바쁘고 귀찮은 지라 그런 곳의 글은 소개하지 않고 넘어갈 계획이다. 기술 https://medium.com/@deepvalidation/%EB%8B%B9%EC%8B%A0%EC%9D%98-%EA%B8%B0%EC%97%85%EC%9D%80-%EC%95%88%EB%85%95%ED%95%98%EC%8B%AD%EB%8B%88%EA%B9%8C-airbnb-%EC%9D%98-%EA%B3%A0%EA%B0%9D-%EC%B6%A9%EC%84%B1%EB%8F%84-%EC%B8%A1%EC%A0%95%EB%B2%95-7cc5dc5945b7 어라? LTR 이…

Continue Reading

Elasticsearch X-Pack Alerting 체험기

Logstash로 로그를 수집한 후 Elasticsearch와 Kibana로 분석하는 방법을 다룬 글은 많다. 그런데 이상하더라 이 말이지. 로그를 분석하고 경향을 파악하는 정도라면야 괜찮은데 심각한 오류 로그를 발견했을 때 Slack이나 이메일 등으로 알람…

Continue Reading

AWS, Kubernetes 그리고 WAF

모니터링을 지속적으로 강화하다 보니 사용자 약관에 어긋나게 행동하는 주체가 눈에 띄기 시작한다. 특정 시간대에 판매 목록을 긁어가려고 시도하는 크롤러가 대표적이다. 비정상적인 서비스 이용을 탐지한 건 좋은데 이를 어떻게 차단할지가 또…

Continue Reading
Kafka 모니터링
From https://stocksnap.io/photo/TIV258VG3N

Kafka 모니터링

Kafka 도입 이후에 점진적으로 모니터링을 개선해나간다. Kafka와 그 제반 환경에 대해 이해한만큼 모니터링을 구성하고 모니터링 시스템에서 피드백을 받아 다시 학습하고 그렇게 배운 것을 토대로 다시 모니터링을 구성한다. 그 과정을 따라…

Continue Reading
Close Menu