Series Vận hành thực chiến là các bản hậu kiểm sự cố thật trên Cloud VPS và Kubernetes theo khung triệu chứng – điều tra – nguyên nhân gốc – khắc phục – phòng ngừa: OOM, PHP-FPM treo, MySQL chậm, cache rò session, WAF ...
Nếu phải gói mọi bài học của ba series (Cloud VPS ba tầng, Kubernetes cho Website AI trên Linode, và các sự cố vận hành) vào một trang, chúng tôi chọn một checklist bảo trì hạ tầng. Phần lớn sự cố tro...
Một kiến trúc rất hay gặp khi hệ thống lớn dần: ứng dụng trung tâm và các website vệ tinh nằm chung một mạng private, nhưng gọi API cho nhau qua domain public, tức là đi vòng ra Internet, qua Cloudfla...
Tài liệu này phân tích hai tình huống điển hình trên hai hạ tầng khác nhau. Trên Cloud VPS, một lượt quét SEO nội bộ làm một website thương mại điện tử trả hàng loạt lỗi 500, kéo theo Redis dùng chung...
Một máy MySQL ngoài cluster của cụm Kubernetes Website AI (một VPS trên Linode) ngừng trả lời. Prometheus ghi lại chính xác thời điểm đó, up chuyển từ 1 sang 0, nhưng không một cảnh báo Prometheus nào...
Có một loại vấn đề vận hành rất khó thấy: chạy âm thầm, không làm sập website nào, nhưng đốt tài nguyên mỗi ngày và chôn mất tín hiệu thật. Tài liệu này nói về hai trường hợp điển hình cùng họ. Thứ nh...
Khi một máy MySQL phục vụ cụm Kubernetes trở nên nhỏ so với lượng dữ liệu nó gánh, phương án hợp lý là gộp MySQL: rút máy đó ra, chuyển các website đang dùng nó sang những máy còn lại. Pipeline có thể...
Một website thương mại điện tử chạy Laravel Octane trên một minion trả 502 vì kernel đã giết tiến trình FrankenPHP của site do hết RAM. Chuyện một site hết RAM thì không lạ. Điều đáng nói là trong một...
Một website Website AI trên cluster LKE của Linode trả 503 lúc có lúc không. Không có đợt sập dài nào, chỉ là thỉnh thoảng trang không mở được, một lúc sau lại bình thường. kubectl cho thấy pod duy nh...
Một tình huống hay gặp trên Website AI: quản trị viên không upload ảnh được vào trình soạn thảo. Một file JPEG vài MB nhưng độ phân giải rất lớn (khoảng 30 megapixel), lần thì nhận lỗi 419, lần thì 50...
Ứng dụng di động của một khách hàng không cập nhật được hồ sơ người dùng và không xoá được giao dịch: mọi request PUT, DELETE đều nhận 403. Đây là một ca WAF chặn nhầm kinh điển trên balancer chạy Cor...
Một tình huống khó chịu trên Cloud VPS: dashboard Grafana báo cùng lúc nhiều máy "CPU gần 100%" hoặc mất hẳn dữ liệu giám sát, gồm cả balancer, máy database và minion. Lượng truy cập không tăng, không...
Một cấu hình fastcgi_cache chạy tốt trên site nội dung thuần rất dễ bị chép sang site khác. Với một site thương mại điện tử có giỏ hàng, chính cấu hình đó có thể gây hai lỗ hổng: một cái làm rò sessio...
Một lỗi cấu hình rất phổ biến trên các minion chạy nhiều site: file cấu hình có khai fastcgi_cache_key và fastcgi_cache_valid, nhưng không có fastcgi_cache_path và directive fastcgi_cache. Cache trang...
Đã hiển thị toàn bộ bài viết
