Hacker News • 11일 전

Railway, 구글 클라우드 계정 차단으로 대규모 장애 발생

IMP

8/10

핵심 요약

클라우드 호스팅 플랫폼인 Railway가 상위 클라우드 제공업체인 Google Cloud의 계정 차단을 원인으로 대규모 서비스 장애를 겪고 있습니다. 이로 인해 사용자 인증 실패, 대시보드 접속 불가 등의 증상이 발생했으며, API 및 내부 네트워크 제어 등 핵심 인프라 복구를 위해 구글 측과 협력 중입니다. 현재 복구 시점(ETA)은 미확정 상태이며 지속적인 모니터링이 필요합니다.

번역된 본문

Railway 대규모 서비스 장애(Edge Network 장애) 조사 중 저희는 현재 Railway에 영향을 미치고 있는 광범위한 서비스 장애를 조사하고 있습니다. 사용자는 "no healthy upstream(정상적인 업스트림 없음)", "unconditional drop overload(무조건적 드롭 과부하)", 로그인 실패 및 대시보드에 접근할 수 없는 오류를 포함한 문제를 겪고 있을 수 있습니다. 저희는 활발히 조사 중이며, 확인되는 대로 즉시 업데이트할 예정입니다. (5월 19일 22:29 UTC)

원인 파악됨 저희는 장애의 원인을 파악했습니다. 상위 클라우드 제공업체에 대한 액세스가 복구되었으며, 문제 해결을 위해 작업 중입니다. 수정 사항이 배포될 때까지 Railway 대시보드 및 클라우드 인프라에서 실행 중인 서비스는 계속해서 영향을 받을 수 있습니다. (5월 19일 22:43 UTC)

원인 파악됨 Google Cloud가 저희의 계정을 차단하여 일부 Railway 서비스를 사용할 수 없게 되었습니다. 저희는 이 문제를 Google에 직접 에스컬레이션했습니다. Railway 플랫폼 팀은 Google Cloud에 대한 액세스 권한을 확인했으며, 모든 워크로드에 대한 액세스를 복구하기 위해 작업 중입니다. 저희는 Google Cloud에서 호스팅되는 인프라의 일부에 액세스할 수 있게 되었으며, 나머지 서비스 복구를 계속 진행하고 있습니다. 불편을 드려 대단히 죄송합니다. (5월 19일 23:37 UTC)

원인 파악됨 저희는 대시보드, API 및 내부 네트워크의 컨트롤 플레인을 구동하는 Google Cloud 인프라를 복구하기 위해 노력하고 있습니다. 저희는 Google Cloud 지원 팀과 직접적으로 소통하고 있습니다. 현재까지 예상 복구 시간(ETA)은 확정되지 않았습니다. (5월 20일 00:37 UTC)

원문 보기

원문 보기 (영어)

Railway Railway Service Disruption Major Outage Edge Network Investigating We are investigating a widespread service disruption affecting Railway. Users may be experiencing errors including "no healthy upstream", "unconditional drop overload", login failures, and inability to access the dashboard. We are actively investigating and will provide updates as soon as possible. May 19, 22:29 UTC Identified We have identified the cause of the disruption. Access to our upstream cloud provider has been restored and we are working on a fix. The Railway dashboard and services running on our cloud infrastructure may continue to be affected until the fix is deployed. May 19, 22:43 UTC Identified Google Cloud has blocked our account, making some Railway services unavailable. We have escalated this directly with Google. The Railway Platform team has since confirmed access to Google Cloud and is working on restoring access to all workloads. We have access to some of our Google Cloud–hosted infrastructure and are working to restore the rest of the service. We apologize for the disruption. May 19, 23:37 UTC Identified We are working to restore the Google Cloud infrastructure that powers our dashboard, API, and internal network's control plane. We are in direct contact with Google Cloud's support team. We do not have an ETA at this time. May 20, 00:37 UTC

클라우드 장애 인프라 Railway 구글 클라우드 서버 오류

구글 클라우드 계정 정지로 인한 Railway 전면 장애 사고 보고서(해결)

클라우드 호스팅 플랫폼인 Railway가 구글 클라우드(GCP) 측의 실수로 프로덕션 계정이 일시 정지되면서 약 8시간 동안 전체 서비스가 마비되는 대규모 장애를 겪었습니다. 이 사건은 단일 상위 클라우드 공급자의 장애나 정책 오류가 전체 플랫폼 아키텍처로 어떻게 연쇄적으로 전파될 수 있는지 보여주는 핵심 사례입니다. 이에 Railway 측은 아키텍처의 책임을 인정하고, 재발 방지를 위한 인프라 및 네트워크 제어 평면 분리 등의 조치를 약속했습니다.

클라우드 인프라 서버 장애 구글 클라우드(GCP)