Kế hoạch xây dựng trung tâm dữ liệu riêng

• Nếu bạn muốn xây dựng trung tâm dữ liệu của riêng mình

  • Railway ngay từ đầu đã xây dựng hạ tầng tính toán trên Google Cloud Platform. Tuy nhiên, điều này dẫn đến nhiều vấn đề như giá cả, mức độ dịch vụ và các ràng buộc kỹ thuật. Để giải quyết những vấn đề này, Railway đã khởi động dự án Railway Metal và xây dựng địa điểm đầu tiên tại California.

• Nếu bạn muốn xây dựng đám mây

  • Dự án Railway Metal bắt đầu vào tháng 1 năm 2024 và mất 5 tháng để lắp đặt máy chủ đầu tiên. Họ phải đảm bảo không gian và cân nhắc điện năng cùng làm mát. Trong ba lựa chọn chính, họ đã chọn Cage Colocation.

• Sức mạnh lớn đi kèm trách nhiệm lớn

  • Khi lên kế hoạch di chuyển sang trung tâm dữ liệu, cần xem xét năng lực tính toán cần thiết. Mật độ điện năng là một yếu tố quan trọng, và cần có dự phòng kép cho nguồn điện. Điện được cấp thông qua Power Distribution Unit (PDU).

• Hãy có ánh sáng

  • Kết nối mạng là yếu tố quan trọng, và họ ký hợp đồng với nhiều ISP để đảm bảo tuyến mạng tối ưu. Họ chọn ISP phù hợp cho từng khu vực và xây dựng khả năng dự phòng trên nhiều vùng.

• Lối đi, rack và hạ tầng phía trên

  • Trong trung tâm dữ liệu, các rack được sắp xếp theo hàng và cần có lối đi để luồng không khí lưu thông. Cũng cần cân nhắc kích thước rack và quản lý cáp. Điện năng và làm mát có thể là yếu tố giới hạn lớn hơn không gian.

• Rack và stack

  • Việc đi dây gọn gàng đòi hỏi rất nhiều luyện tập và cần sự trợ giúp của chuyên gia. Họ lập kế hoạch lắp đặt thông qua tài liệu cable matrix và rack elevation. Việc lắp đặt mất từ 6 đến 14 ngày.

• Đạp ga cho Metal

  • Cage đã được lắp đặt giống như một khung vẽ trống, và cần cấu hình thiết bị mạng, thiết lập router, cập nhật bản ghi RIR, v.v. Họ xây dựng một mạng dựa trên phần mềm chỉ dành cho L3 bằng FRR và SONiC.

  • Trong các bài viết tiếp theo, họ sẽ đề cập đến quá trình biến máy chủ thành một vùng Railway hoạt động đầy đủ. Họ đã phát triển hai công cụ phần mềm là Railyard và MetalCP để giúp việc thiết kế cage mới, trực quan hóa đi dây và cài đặt OS lên máy chủ trở nên dễ dàng hơn.

[GN⁺]

Ý kiến trên Hacker News

• Đặt câu hỏi vì sao gọi "colocation" là "xây dựng trung tâm dữ liệu riêng"; thực tế chỉ là lắp máy chủ vào rack
• Hồi tưởng những giai thoại thú vị từ thời Rackspace
  • Sự cố nhân viên EMC làm đổ tủ rack máy chủ trong lúc lắp đặt thiết bị lưu trữ
  • Sự cố trung tâm dữ liệu bị offline vì tài xế xe tải lên cơn đau tim
  • Trải nghiệm truyền băng thông sang tòa nhà khác bằng laser
  • Việc máy chủ bị cháy khiến phải đập vỡ cửa sổ và đi mua quạt hộp
• Nhắc đến việc công nghệ trung tâm dữ liệu đã tiến bộ rất nhiều và chia sẻ kinh nghiệm hợp tác với Facebook
• Chỉ ra vấn đề thiếu hỗ trợ khách hàng của Google
• Chia sẻ kinh nghiệm xây dựng hạ tầng cho Blekko
  • Colocation vật lý rất quan trọng để xử lý lưu lượng mạng "east west"
• Nhấn mạnh tầm quan trọng của việc tính toán công suất HVAC 'CRAC' của trung tâm dữ liệu
• Bày tỏ sự bất mãn với dịch vụ khách hàng của Google
  • So sánh với hỗ trợ khách hàng của AWS và Microsoft
• Đề cập đến sự cần thiết của các công cụ như Netbox
• Chia sẻ kinh nghiệm triển khai trung tâm dữ liệu trong giai đoạn 2003-2010
  • Nhấn mạnh tầm quan trọng của quản lý cáp và tiêu chuẩn hóa
• Nhấn mạnh tầm quan trọng của mục "WTF" trong trung tâm dữ liệu
• Chia sẻ kinh nghiệm vận hành VM thông qua colocation để tiết kiệm chi phí AWS
• Nhấn mạnh tầm quan trọng của việc sở hữu tài sản với tư cách là một công ty hạ tầng
  • Giải thích lý do Cloudflare có thể cung cấp dịch vụ miễn phí
• Nhấn mạnh tầm quan trọng của quản lý cáp
  • Đề cập đến sự cần thiết phải cẩn thận khi dùng lẫn cáp đồng và cáp quang