해킹 시도는 막았지만, 대응은 거기서 끝나지 않았다
WAF 모니터링부터 2시간 이내 보안 패치까지, 와이필드의 SecOps 대응 회고
서비스를 운영하다 보면 다양한 보안 위협과 마주하게 됩니다. 자동화된 취약점 스캔부터 특정 시스템에 대한 의도적인 접근 시도까지, 외부에 공개된 서비스는 끊임없이 공격의 대상이 됩니다.
완벽하게 공격을 예방할 수 있다면 좋겠지만 현실적인 보안의 핵심은 다른 곳에 있습니다.
공격 시도를 얼마나 빠르게 발견하고, 정확하게 분석하며, 필요한 보안 조치를 신속하게 적용할 수 있는가.
최근 와이필드에서는 자사 서비스를 대상으로 한 해킹 시도를 탐지하고 대응한 경험이 있었습니다.
다행히 공격자의 접근 시도는 성공하지 못했습니다. 하지만 우리는 접근이 실패했다는 사실만으로 대응을 마무리하지 않았습니다.
공격 과정에서 남겨진 로그를 추가로 분석하고, 공격자의 행동 패턴을 파악했으며, 보완이 필요한 부분을 찾아 2시간 이내에 추가 보안 패치를 배포했습니다.
이 경험은 우리가 구축해 온 SecOps 문화와 관측 가능성(Observability)의 가치를 다시 확인하는 계기가 되었습니다.
1. 시작은 모니터링 알람이었다
이번 해킹 시도의 첫 번째 단서는 모니터링 알람이었습니다.
우리는 WAF(Web Application Firewall) 로그와 서비스 접근 시도를 모니터링하는 과정에서 의심스러운 활동을 확인했습니다.
해당 접근 시도는 성공하지 못했지만, 보안 대응에서 중요한 것은 요청이 실패했다는 결과뿐만이 아니었습니다.
우리가 주목한 것은 공격자가 무엇을 시도했으며, 어떤 경로와 행동 패턴으로 시스템에 접근하려 했는가였습니다.
WAF 로그와 관련 접근 기록을 함께 살펴보면서 요청의 특성과 흐름을 분석했습니다.
이 과정에서 단순히 개별 요청의 허용·차단 여부를 확인하는 것을 넘어, 공격 시도에서 드러난 패턴을 바탕으로 기존 보안 체계를 다시 점검했습니다.
접근은 실패했더라도 유사한 패턴의 공격이 반복될 수 있고, 다른 조건에서는 새로운 위험 요소가 드러날 가능성도 있기 때문입니다.
공격이 실패했다고 해서 분석까지 끝나는 것은 아닙니다.
오히려 실패한 공격 시도에서도 우리가 미처 고려하지 못했던 보안 개선의 단서를 찾을 수 있습니다.
2. 발견에서 패치 배포까지, 2시간
이번 대응에서 중요했던 부분은 추가적인 보안 조치를 실제 서비스에 빠르게 적용할 수 있었다는 점입니다.
실제 보안 사고 대응 과정 (Incident Response Flow)
- 탐지(Detection)모니터링 알람과 WAF 로그를 통해 의심스러운 접근 시도를 확인했습니다.
- 분석(Analysis)추가 로그를 분석하여 공격자의 행동 패턴과 접근 목적을 검토했습니다.
- 점검(Assessment)기존 방어 체계와 애플리케이션을 점검하고 추가적으로 보완해야 할 부분을 확인했습니다.
- 대응(Response)필요한 보안 패치를 개발하고 검증한 후 실제 서비스에 배포했습니다.
빠른 대응이 가능했던 이유는 단순히 개발자가 코드를 빨리 수정했기 때문만은 아닙니다.
평소 구축해 온 모니터링 환경 덕분에 문제를 신속하게 파악할 수 있었고, 개발과 운영이 긴밀하게 연결된 업무 방식 덕분에 필요한 변경 사항을 실제 서비스에 빠르게 반영할 수 있었습니다.
보안 패치는 신속해야 하지만 동시에 안전해야 합니다. 수정 과정에서 기존 기능을 손상시키거나 새로운 취약점을 만들어서는 안 되기 때문입니다.
따라서 빠른 분석, 코드 수정, 검증, 배포가 하나의 흐름으로 이어질 수 있는 개발 문화가 중요합니다.
이번 경험에서 우리는 보안 대응 속도는 특정 도구의 성능만이 아니라 조직의 개발·운영 역량에 의해 결정된다는 사실을 다시 확인했습니다.
3. 공격자가 노리는 것, 결국 접근 키와 인증정보
이번 접근 시도를 분석하면서 특히 중요하게 살펴본 부분은 인프라 접근 키와 API 접근용 키를 비롯한 인증정보였습니다.
현대적인 클라우드 환경에서는 이러한 키가 시스템과 외부 서비스에 접근하기 위한 중요한 권한 수단으로 사용됩니다.
애플리케이션 코드에 직접적인 취약점이 없더라도 유효한 접근 키가 외부에 노출된다면 예상하지 못한 보안 문제가 발생할 수 있습니다.
예를 들어 인프라에 접근할 수 있는 인증정보나 외부 API를 호출할 수 있는 키가 유출된다면, 해당 키에 부여된 권한에 따라 비인가 접근이나 외부 서비스의 오용으로 이어질 위험이 있습니다.
이 때문에 우리는 키 관리 자체를 애플리케이션 보안의 핵심 요소로 보고 있습니다.
와이필드는 현재 접근 키를 소스 코드나 설정에 직접 입력하여 관리하거나, 인프라상에서 키 값을 직접 조회할 수 있는 형태로 노출하지 않는 방식을 지향하고 있습니다.
중요한 것은 단순히 키를 복잡하게 생성하는 데 그치지 않는 것입니다.
키가 어디에 존재하는지, 누가 접근할 수 있는지, 어떤 권한을 가지고 있는지, 그리고 불필요하게 노출될 가능성이 없는지를 함께 고려해야 합니다.
특히 운영 환경에서는 다음과 같은 원칙이 중요합니다.
- 인증정보의 노출 최소화: 코드, 로그, 설정 및 운영 환경에서 키 원문이 불필요하게 노출되지 않도록 관리합니다.
- 최소 권한 원칙: 서비스와 작업에 필요한 최소한의 접근 권한만 부여합니다.
- 접근 통제 및 감사: 인증정보 사용과 관련된 권한 및 접근 이력을 적절하게 관리합니다.
- 지속적인 검증: 키 노출 가능성이나 권한 설정의 문제를 주기적으로 점검합니다.
이는 특정 공격 한 번에 대응하기 위한 임시 조치가 아닙니다.
인증정보가 공격의 중요한 표적이 될 수 있다는 전제 아래, 처음부터 키 노출 가능성을 줄이는 구조를 설계하는 것이 중요합니다.
4. LGTM과 Faro, 보안 대응의 기반이 된 관측 가능성
보안 이벤트가 발생했을 때 빠르게 대응하려면 무엇보다 현재 서비스에서 어떤 일이 일어나고 있는지 파악할 수 있어야 합니다.
와이필드는 이러한 관측 가능성을 확보하기 위해 LGTM 스택을 기반으로 모니터링 환경을 구축하고 있습니다.
LGTM은 Loki, Grafana, Tempo, Mimir로 구성된 모니터링 및 관측 가능성 기술 스택입니다.
| 구성 요소 | 주요 역할 |
|---|---|
| Loki | 애플리케이션 및 인프라 로그 수집·분석 |
| Grafana | 모니터링 데이터 시각화 및 알림 |
| Tempo | 분산 환경에서 요청 흐름 추적 |
| Mimir | 메트릭 저장 및 시계열 데이터 분석 |
각각의 도구는 서로 다른 관점에서 시스템의 상태를 보여 줍니다.
로그는 어떤 이벤트가 발생했는지를 알려주고, 메트릭은 시스템에 어떤 변화가 있었는지를 보여 주며, 트레이스는 요청이 서비스 내부에서 어떤 경로로 처리되었는지 이해할 수 있도록 도와줍니다.
이번과 같은 보안 시도에 대응할 때도 하나의 로그만 확인하는 것보다 관련 데이터를 함께 분석할 수 있는 환경이 중요합니다.
브라우저까지 관측하는 Grafana Faro
와이필드는 여기에 더해 Grafana Faro를 활용하여 프론트엔드 영역까지 모니터링하고 있습니다.
Faro는 실제 사용자 브라우저에서 발생하는 JavaScript 오류, 성능 지표, 사용자 이벤트 등의 텔레메트리를 수집할 수 있게 해 줍니다.
이를 통해 백엔드 서버만으로는 파악하기 어려운 브라우저 측의 문제도 분석할 수 있습니다.
물론 Faro가 직접적인 해킹 차단 기능을 수행하는 것은 아닙니다. 그러나 서버 측 로그와 지표뿐 아니라 프론트엔드의 동작까지 함께 관찰할 수 있다는 점은 서비스에 발생한 문제의 범위를 이해하는 데 도움이 됩니다.
우리가 모니터링 환경에 지속적으로 투자하는 이유는 단순히 장애 알림을 받기 위해서가 아닙니다.
서비스의 동작을 충분히 이해할 수 있어야 보안 위협에도 정확하고 빠르게 대응할 수 있기 때문입니다.
5. AWS와 Google의 보안 기능을 활용한 다층 방어
모니터링이 보안 위협을 발견하고 분석하는 데 중요한 역할을 한다면, 실제 위협을 줄이는 데는 여러 단계의 방어 체계가 필요합니다.
와이필드는 AWS와 Google이 제공하는 보안 기능을 서비스 환경에 맞게 활용하며 애플리케이션과 인프라의 보안 체계를 보완하고 있습니다.
외부 요청을 제어하는 WAF와 같은 방어 수단, 클라우드 플랫폼의 접근 권한 관리, 애플리케이션 내부의 인증·인가 검증, 그리고 운영 환경의 관측 체계는 각각 서로 다른 역할을 담당합니다.
중요한 것은 이들이 독립적으로 존재하는 것이 아니라 하나의 보안 전략 안에서 상호 보완적으로 동작해야 한다는 것입니다.
이를 **다층 방어(Defense in Depth)**라고 합니다.
어느 한 계층에서 위협을 완벽히 차단한다고 가정하는 대신, 여러 계층에서 위험을 줄이고 이상 징후를 탐지할 수 있도록 설계하는 방식입니다.
이번 경험에서도 접근 시도의 성공 여부만 확인하는 데 그치지 않고, 관찰된 행동을 기반으로 추가적인 방어 조치가 필요한 부분을 점검했습니다.
이처럼 외부 위협을 관찰한 결과를 보안 정책과 애플리케이션 개선에 반영하는 과정이 중요하다고 생각합니다.
6. AI 시대에는 보안 패치 속도도 경쟁력이다
이번 경험은 AI가 빠르게 발전하는 시대에 어떤 개발 문화를 갖춰야 하는지에 대해서도 생각하게 했습니다.
AI의 발전은 소프트웨어를 개발하는 방식을 변화시키고 있습니다.
코드 분석, 수정안 작성, 테스트 코드 구성 등 다양한 개발 작업을 AI의 도움으로 더 빠르게 수행할 수 있게 되었습니다.
동시에 공격자 역시 자동화와 AI 기술을 활용하여 취약점을 탐색하고 공격 시도를 반복할 가능성이 높아지고 있습니다.
이번에 관찰한 해킹 시도가 AI 기반 공격이었다고 확인된 것은 아닙니다. 그러나 공격 기술의 발전 속도에 대응하려면 방어하는 조직의 개발 속도 역시 중요해진다는 점은 분명합니다.
이제 보안 역량을 평가할 때는 취약점을 발견하는 능력뿐 아니라 발견한 취약점을 얼마나 신속하고 안전하게 보완할 수 있는가도 중요하게 고려해야 합니다.
AI는 이러한 과정에서 개발자의 생산성을 높여 주는 도구가 될 수 있습니다.
예를 들어 의심스러운 코드의 영향 범위를 분석하거나, 수정 방안을 비교하고, 회귀 테스트를 작성하는 과정을 지원할 수 있습니다.
다만 AI가 제안한 수정 사항도 반드시 검증되어야 합니다. AI가 생성한 코드 역시 새로운 취약점이나 예상하지 못한 동작을 포함할 수 있기 때문입니다.
우리가 지향하는 것은 단순히 빠르게 코드를 작성하는 조직이 아닙니다.
문제가 발생했을 때 이를 신속하게 분석하고, 적절한 수정 사항을 안전하게 검증하며, 실제 서비스까지 빠르게 반영할 수 있는 조직입니다.
AI 기술을 이러한 개발 문화와 결합한다면 앞으로 더 빠르게 변화하는 보안 환경에도 유연하게 대응할 수 있을 것입니다.
7. 좋은 SecOps 문화는 실제 상황에서 드러난다
이번 해킹 시도에 대한 대응 과정을 돌아보면서 가장 의미 있게 생각하는 부분은 기존에 구축한 기술과 개발 문화가 실제 상황에서 작동했다는 사실입니다.
모니터링 알람으로 이상 징후를 발견했고, WAF 및 접근 로그를 분석하여 행동 패턴을 확인했으며, 접근 시도가 실패했음에도 추가적인 보안 개선을 수행했습니다.
그리고 그 결과를 2시간 이내의 보안 패치 배포로 연결할 수 있었습니다.
이 과정은 우리에게 몇 가지 중요한 교훈을 남겼습니다.
첫째, 보안은 차단에서 끝나지 않습니다. 실패한 공격 시도에서도 새로운 위험 요소와 개선 기회를 발견할 수 있습니다.
둘째, 관측 가능성은 보안 대응의 기본입니다. 충분한 로그와 지표를 확보하고 이를 분석할 수 있어야 올바른 판단을 내릴 수 있습니다.
셋째, 인증정보와 접근 키 관리가 중요합니다. 공격자가 노릴 수 있는 중요한 자산을 처음부터 안전하게 설계하고 관리해야 합니다.
넷째, SecOps는 도구보다 문화입니다. 발견된 문제를 빠르게 분석하고 검증된 수정 사항을 배포할 수 있는 개발·운영 체계가 필요합니다.
그리고 마지막으로, AI 시대에는 취약점을 발견하는 속도뿐 아니라 이를 보완하는 속도 또한 중요해질 것입니다.
마치며
보안을 잘한다는 것은 단 한 번도 공격의 대상이 되지 않는다는 의미가 아닙니다.
외부에 공개된 서비스를 운영하는 이상 다양한 공격 시도는 계속해서 발생할 수 있습니다.
우리가 만들어야 할 것은 이러한 상황에서도 공격을 빠르게 인지하고, 정확하게 분석하며, 대응 경험을 지속적인 보안 개선으로 연결할 수 있는 시스템과 문화입니다.
와이필드는 LGTM과 Faro 기반의 관측 가능성, AWS와 Google의 보안 기능을 활용한 방어 체계, 그리고 신속한 개발·배포가 가능한 SecOps 문화를 지속적으로 발전시키고 있습니다.
이번 경험은 지금까지 구축해 온 환경의 가치를 확인한 계기이자, 앞으로 더 나은 보안 체계를 만들어 갈 수 있는 중요한 학습 기회였습니다.
보안은 한 번의 패치로 완성되지 않습니다. 관찰하고, 분석하고, 개선하는 과정이 반복될 때 서비스는 더 안전해집니다.
와이필드는 앞으로도 이러한 경험을 바탕으로 더욱 안전하고 신뢰할 수 있는 서비스를 만들어 나가겠습니다.