개편 후 발생한 사이트 접속 장애

사이트 대규모 개편 작업이 완료되어 실 서버로 이전하고 몇일간 모니터링 중 이상 증상 발생합니다.

특정할 수 없는 다수의 컴퓨터에서 사이트 접속 불량 증상이 신고되기 시작하고, 컴퓨터의 O/S, IE 버전, ISP 등 어느 하나 일치하는 것 없이 정말 불특정 다수의 컴퓨터에서 사이트에 접속할 수 없다는 신고가 접수되는것 입니다.

정보팀에 있는 다양한 컴퓨터로 접속해 보니 많은 컴퓨터 중 유독 한대의 컴퓨터가 사이트에 접속할 수 없는 증상을 보이네요.

꼬박 반나절을 점검하고 테스트를 했으나 원인을 알 수 없고, 그 동안 사이트 접속 불량 신고는 계속해서 들어오고 정말 미칠 노릇이었습니다.

결국은 개편된 사이트를 분해하여 하나씩 제거하며 테스트를 해 본 결과 웹폰트를 제거하니 전국적으로 들어 오던 접속 장애 신고가 사라졌다.

이유는 알았으나 원인을 알 수 없으니 더욱 황당하고 미궁에 빠집니다.

웹서버, 네트워크 등 전반적으로 다시 점검하고 테스트 해 본 결과 신규로 웹 폰트가 적용되면서 사이트의 트래픽이 증가하였고, 이로 인해 웹 방화벽에 전반적인 과부하가 걸렸고, 과부하 심한 경우 웹 방화벽의 프로세스가 행(Hang)이 거리면서 접속에 문제가 발생한 것으로 확인이 되었네요.

방화벽 벤더도 장애 이유를 수긍하고 자사의 보안 장비를 점검하고 있으나 장애 발생 5일이 지나도록 벤더에서 정확한 장애 리포트를 제시하지 못하고 있고, 그 동안 사이트는 웹 방화벽 없이 IDS 만으로 버티고 있으니 심히 걱정이 됩니다. ^^

이 땅에 많은 전산쟁이 여러분 모든 사이트가 동일하지 않겠으나 혹시 웹 폰트를 적용 후 원인 모를 접속 장애가 증가할 경우 웹 방화벽을 제거한 뒤 한번 테스트하여 보시기 바랍니다.