Series Vận hành thực chiến là các bản hậu kiểm sự cố thật trên Cloud VPS và Kubernetes theo khung triệu chứng – điều tra – nguyên nhân gốc – khắc phục – phòng ngừa: OOM, PHP-FPM treo, MySQL chậm, cache rò session, WAF ...
Một website Website AI trên cluster LKE của Linode trả 503 lúc có lúc không. Không có đợt sập dài nào, chỉ là thỉnh thoảng trang không mở được, một lúc sau lại bình thường. kubectl cho thấy pod duy nh...
Một tình huống hay gặp trên Website AI: quản trị viên không upload ảnh được vào trình soạn thảo. Một file JPEG vài MB nhưng độ phân giải rất lớn (khoảng 30 megapixel), lần thì nhận lỗi 419, lần thì 50...
Ứng dụng di động của một khách hàng không cập nhật được hồ sơ người dùng và không xoá được giao dịch: mọi request PUT, DELETE đều nhận 403. Đây là một ca WAF chặn nhầm kinh điển trên balancer chạy Cor...
Một tình huống khó chịu trên Cloud VPS: dashboard Grafana báo cùng lúc nhiều máy "CPU gần 100%" hoặc mất hẳn dữ liệu giám sát, gồm cả balancer, máy database và minion. Lượng truy cập không tăng, không...
Một cấu hình fastcgi_cache chạy tốt trên site nội dung thuần rất dễ bị chép sang site khác. Với một site thương mại điện tử có giỏ hàng, chính cấu hình đó có thể gây hai lỗ hổng: một cái làm rò sessio...
Một lỗi cấu hình rất phổ biến trên các minion chạy nhiều site: file cấu hình có khai fastcgi_cache_key và fastcgi_cache_valid, nhưng không có fastcgi_cache_path và directive fastcgi_cache. Cache trang...
Một cụm Kubernetes chạy hàng trăm website thường đi tới tình trạng này sau một thời gian: trên giấy cụm gần đầy, scheduler thấy phần lớn RAM đã được đặt chỗ, có node gần chạm trần, trong khi tổng CPU...
Chuyển các site trên minion từ pool PHP-FPM www dùng chung sang mỗi site một pool riêng là bước nên làm để chấm dứt lỗi max_children. Lý do và cách làm có trong bài Mỗi website một PHP-FPM pool: chấm...
Một website thương mại điện tử đột nhiên trả 502 ngay lập tức cho mọi khách, còn error.log trên balancer ghi liên tục hàng chục dòng no live upstreams mỗi giây. Điều đáng chú ý: nhóm upstream của site...
Trên một minion chạy vài website Laravel Octane, tất cả các site cùng trả 502 Bad Gateway trong gần một phút rồi tự sống lại. Chỉ một site thật sự hết bộ nhớ, các site còn lại không có gì bất thường n...
Một máy database nhỏ dùng chung cho vài website, trong đó có một ứng dụng quản lý bán hàng. Đầu giờ làm việc, nhân viên mở trang đơn hàng thì quay mãi không xong, còn máy database chạy CPU 100% liền m...
Bảng đã có index đúng cột, vậy mà một câu SQL "bài viết liên quan" vẫn treo hàng chục giây, processlist đầy câu chồng lên nhau, load của máy database vọt lên ba chữ số. Đây là tình huống điển hình khi...
Một tình huống hay gặp trên Cloud VPS database cấu hình nhỏ: dashboard báo RAM đứng yên ở mức báo động ngày này qua ngày khác. Máy chưa sập, website vẫn chạy, nhưng với 1 GB RAM và không có swap, chỉ...
Đã hiển thị toàn bộ bài viết
