Chi tiết công ty

Nền tảng video độc lập lớn nhất thế giới

Thử thách

• Thiếu khả năng hiển thị trong môi trường Kubernetes
• Cần theo dõi độ trễ thấp khi di chuyển Kubernetes
• Đã đến lúc khắc phục sự cố

Lợi ích

• Giảm thời gian tạo giá trị khi di chuyển sang Kubernetes
• Đổi mới nhanh hơn nhờ hiểu biết về sức khỏe môi trường
• Tối đa hóa hiệu suất và tính khả dụng
• Tăng tốc khắc phục sự cố

Cơ sở hạ tầng

Dịch vụ web của Amazon

Dàn nhạc

Kubernetes

Tóm tắt

tỷ lệ kèo cá cược hôm nay Player là nền tảng video độc lập lớn nhất thế giới Với hơn 1 tỷ người dùng duy nhất trên toàn thế giới, tỷ lệ kèo cá cược hôm nay Player cung cấp hơn 10% video trên web và yêu cầu xử lý nhiều terabyte dữ liệu mỗi ngày

Để đổi mới nhanh hơn, công ty có trụ sở tại SaaS đã chuyển từ các ứng dụng nguyên khối chạy trên đám mây sang các dịch vụ vi mô được triển khai trong Kubernetes được lưu trữ trên đám mây AWS Công ty hiện đang vận hành 1000 nút và 100 dịch vụ trên các tài khoản của mình

Thử thách

Việc di chuyển tất cả các dịch vụ của tỷ lệ kèo cá cược hôm nay Player là một công việc quan trọng Để chuẩn bị, nhóm kỹ thuật đã xây dựng một ngăn xếp hiệu quả cao nhưng không biết cách thức hoạt động của nó Việc thiếu hình dung là một trở ngại cho việc điều tra nguyên nhân khi có sự cố xảy ra Do đó, nhóm đã làm việc để cải thiện khả năng giám sát nhằm đáp ứng tốt hơn các mục tiêu cấp độ dịch vụ (SLO) Mục tiêu cuối cùng của nỗ lực này bao gồm việc phát hiện lỗi nhanh hơn, giảm thời gian trung bình cho đến khi không thể khôi phục và tự động hóa các khía cạnh chính của giám sát ứng dụng

Có mọi thứ sẵn sàng là điều đầu tiên thu hút tôi đến với Sysdig với tư cách là một hệ thống giám sát Kubernetes và nó cũng cho phép bạn xây dựng tính bảo mật cho quy trình làm việc DevOps của mình

Lợi ích

Sysdig đã cung cấp cho nhóm tỷ lệ kèo cá cược hôm nay Player DevOps cái nhìn sâu sắc về hiệu suất dịch vụ và hướng dẫn về những gì cần đo lường trên cơ sở hạ tầng và các tầng ứng dụng bằng Kubernetes Như Kamil Sindi, Giám đốc Công nghệ tại tỷ lệ kèo cá cược hôm nay Player, giải thích:

Có mọi thứ sẵn sàng là điều ban đầu thu hút chúng tôi đến với Sysdig như một hệ thống giám sát Kubernetes và nó cũng cho phép chúng tôi xây dựng tính bảo mật trong quy trình làm việc DevOps của mình

Giảm 16% khối lượng công việc

tỷ lệ kèo cá cược hôm nay Player đã xem xét việc xây dựng giải pháp có thể quan sát của riêng mình và tiến hành phân tích ROI toàn diện so sánh lợi ích của việc xây dựng so với việc mua Công ty ước tính rằng việc xây dựng dịch vụ dùng ngay do Sysdig cung cấp nội bộ sẽ cần một nhà phát triển làm việc cả năm, cộng với bảo trì hàng tháng

Sysdig có thứ mà chúng tôi muốn xây dựng

Sindi nói

Sysdig sử dụng Bộ lọc gói Berkeley (BPF), rất dễ thiết lập và là công ty ưu tiên vùng chứa với kiến thức và hỗ trợ chuyên sâu về Kubernetes Nhờ Sysdig, chúng tôi không phải chọn Grafana và Prometheus

Vào thời điểm đó, chúng tôi có 6 nhà phát triển, nhưng bằng cách triển khai Sysdig, chúng tôi có thể giải phóng 1 trong số 6 nhà phát triển Đây là một thành công lớn, cho phép họ tập trung vào các dự án có giá trị cao khác
Hơn nữa, với Sysdig, chúng tôi không cần phải cam kết thời gian phát triển một năm nữa Bây giờ có thể quan sát toàn bộ cụm mà không cần đầu tư nhiều thời gian Lý do tôi khuyên dùng Sysdig là vì nó đặt những số liệu mạnh mẽ này trong tầm tay bạn Không cần phải suy nghĩ về những gì cần kiểm tra Sysdig cho bạn thấy những gì bạn cần chú ý

Những điều quan trọng khi di chuyển sang Kubernetes

Khi tỷ lệ kèo cá cược hôm nay Player bắt đầu di chuyển các dịch vụ quan trọng sang Kubernetes, sẽ không có chỗ cho sai sót nếu không điều đó sẽ ảnh hưởng đến khách hàng của chúng tôi Dữ liệu do Sysdig thu thập được lưu trữ và báo cáo cứ sau 10 giây Dữ liệu tức thời này rất có giá trị trong quá trình tỷ lệ kèo cá cược hôm nay Player di chuyển sang Kubernetes
Theo giải thích của Sindi

Trong khi di chuyển chậm lưu lượng truy cập, chúng tôi cần có kết quả giám sát tức thì để có thể biết ngay nếu có sự cố xảy ra Chúng ta đã từng chứng kiến ​​những hiện tượng như thất bại liên tục và thất bại của Thundering Herds vài lần trong quá khứ Sysdig rất có giá trị trong việc giúp chúng tôi nhanh chóng hiểu được điều gì đang thay đổi và có thể thích ứng Đôi khi, đó là thử nghiệm và sai sót, và tôi đã điều chỉnh nó để tìm ra giải pháp Chúng tôi cũng có thể kiểm tra sự khác biệt giữa môi trường Kubernetes và môi trường độc lập Ví dụ: có nhiều cách suy nghĩ khác nhau về cân bằng tải HTTP và cân bằng tải TCP Sysdig cực kỳ hữu ích trong việc cung cấp cho chúng tôi mức độ quan sát mà chúng tôi cần để đáp ứng các mục tiêu về hiệu suất và tính khả dụng của mình

Một số phần mềm đặc biệt nhạy cảm Ba lần di chuyển đầu tiên đã gây ra sự cố trong môi trường thử nghiệm Thùng chứa bị rơi xuống hoặc trở nên quá lớn và đồ bên trong bị lấy đi Số liệu từ các công cụ khác không cho tôi biết lý do gây ra lỗi này Tuy nhiên, sau lần thử thứ ba, nhóm DevOps đã thiết lập tính năng chụp Sysdig để ghi lại tất cả hoạt động hệ thống vào lần tiếp theo xảy ra sự cố về vùng chứa Thông tin chụp hệ thống cho thấy các kết nối CPU đang chồng chất ở chế độ nền và nhóm tỷ lệ kèo cá cược hôm nay Player đã sửa cấu hình sai trong mã Sau khi sửa xong, phần mềm di chuyển và hoạt động bình thường, không ảnh hưởng đến khách hàng

Sysdig đóng vai trò rất quan trọng trong việc phát hiện sự cố trong quá trình di chuyển của chúng tôi

Sindi nói

Đổi mới nhanh hơn nhờ khả năng quan sát sâu và xử lý sự cố nhiều lớp

Trong vài năm qua, tỷ lệ kèo cá cược hôm nay Player đã chuyển từ phát hành mã hai tuần một lần sang phát hành mã nhiều lần trong ngày Theo tiếng Sindi,

Chúng tôi thực hiện phương pháp chạy nước rút, linh hoạt và khả năng quan sát là một phần quan trọng trong đó Khả năng quan sát phong phú trên toàn bộ Kubernetes cho phép chúng tôi tối ưu hóa tốc độ phát triển lặp lại, cuối cùng cho phép chúng tôi đổi mới nhanh hơn, tập trung vào phản hồi của sản phẩm và khách hàng cũng như phân phối ứng dụng nhanh hơn

Sysdig cho phép bạn tự động giám sát các hệ thống quan trọng của mình Bạn có thể thấy số lượng nhóm, truy vấn chậm SQL, vv Sysdig không chỉ có bộ tính năng phong phú mà còn rất dễ triển khai và sử dụng Nó thực sự kỳ diệu

tiết kiệm được 1 giờ cho mỗi sự cố

Trong thế giới Kubernetes phát triển nhanh chóng, việc có quyền truy cập vào phân tích nguyên nhân gốc rễ toàn diện và các quy trình kiểm tra để điều tra và khắc phục sự cố nhanh chóng có thể tạo ra sự khác biệt giữa một vấn đề nhỏ và một vấn đề lớn có tác động đáng kể đến dịch vụ khách hàng
Cung cấp khả năng giám sát cấp hạt nhân để lưu trữ, nhờ đó, nhóm DevOps có thể xác định nhanh hơn nguyên nhân của sự cố và tìm hiểu sâu hơn để giải quyết chúng Khi xảy ra sự cố, điều đầu tiên nhóm tỷ lệ kèo cá cược hôm nay Player làm là xem bảng điều khiển giám sát Sysdig
Sindi đã nói:

Nếu bạn gặp sự cố, đặc biệt nếu sự cố đó dựa trên Kubernetes và bạn cần biết những thông tin như số lượng nhóm bạn có thể tự động nhận được từ BPF, thì bạn sẽ xem xét Sysdig Khi bạn cần thông tin chi tiết về tình trạng cụm Kubernetes, tình trạng nút, vv, đừng tìm đâu xa Bạn có thể theo dõi tình trạng của cụm bằng cách kiểm tra Sysdig

Sindi cũng đưa ra lời giải thích sau đây về cách sử dụng Sysdig thường xuyên:

Đã xảy ra sự cố cách đây vài tuần khiến các yêu cầu liên quan đến nguồn truyền thông bị trì hoãn
Tôi có thể thấy các truy vấn chậm bằng cách sử dụng Sysdig, điều này cho phép tôi thực hiện các thay đổi đối với một trong các truy vấn SQL của mình Sysdig là một công cụ quan trọng giúp tự động hiển thị các truy vấn chậm, giúp chúng tôi tiết kiệm được ít nhất một giờ Thời gian hoạt động rất quan trọng đối với chúng tôi và chúng tôi hoạt động với thời gian hoạt động trên 99,9% Mỗi phút đều có giá trị, vì vậy, bất kỳ công cụ nào có thể tiết kiệm dù chỉ 10 phút khi xảy ra sự cố đều vô cùng có giá trị và chúng tôi rất coi trọng điều đó

Sysdig là một phần thiết yếu trong môi trường đám mây AWS của tỷ lệ kèo cá cược hôm nay Player Đối với tỷ lệ kèo cá cược hôm nay Player, thời gian là tất cả Thông tin chuyên sâu vượt trội của Sysdig cho phép công ty tiếp tục dẫn đầu thị trường video, đảm bảo khách hàng có thể tải và xem video không bị chậm trễ

Khả năng quan sát phong phú trên nền tảng Kubernetes cho phép chúng tôi tối ưu hóa tốc độ phát triển lặp lại, cuối cùng là giúp chúng tôi đổi mới nhanh hơn, tập trung vào phản hồi của sản phẩm và khách hàng, cũng như cung cấp ứng dụng nhanh hơn

Để biết chi tiết