عیب‌یابی CrashLoopBackOff و OOMKilled در Kubernetes؛ از شواهد تا رفع علت

ابزارهای لازم را روی کامپیوتر یا سروری آماده کنید که فرمان‌های مدیریتی را از آن اجرا می‌کنید. پیش از تأیید، فهرست تغییر بسته‌ها را بخوانید؛ داخل کانتینر برنامه ابزار نصب نکنید. کلاستر، سرویس و باینری‌های اصلی باید از قبل با نسخهٔ مورد تأیید موجود باشند. پنل‌های بعد را در Bash اجرا کنید. نصب بسته روی همین میزبان تغییر ایجاد می‌کند، اما سرور برنامهٔ تازه‌ای راه نمی‌اندازد.

از kubectl لینوکسیِ موجود استفاده کنید که اختلاف آن با همهٔ نسخه‌های API Server حداکثر یک نسخهٔ فرعی باشد. پیش از ادامه نسخهٔ سرور را در کانتکست مجاز ببینید. برای این عیب‌یابی kubelet یا kubeadm نصب نکنید و مخزن بستهٔ کلاینت را بازنویسی نکنید.

sudo apt-get update
sudo apt-get install --no-install-recommends ca-certificates curl bash coreutils
cat /etc/os-release
command -v bash curl timeout
command -v kubectl
kubectl version --client --output=yaml

نام کانتکست در همهٔ فرمان‌ها صریح آمده تا بررسی ناخواسته روی کلاستر دیگری انجام نشود. آدرس سرور و فضای نام را با محدودهٔ بررسی توافق‌شده تطبیق دهید؛ شباهت نام Pod کافی نیست. تنظیمات فرم فقط در همین زبانهٔ مرورگر می‌مانند و جای واردکردن رمز یا توکن نیستند.

kubectl config get-contexts 'lab'
kubectl --context='lab' get namespace 'academy-lab'
kubectl --context='lab' auth can-i get pods -n 'academy-lab'
kubectl --context='lab' -n 'academy-lab' get pod 'api-example' -o wide

به ستون STATUS اکتفا نکنید. وضعیت فعلی و آخرین وضعیت پایان‌یافتهٔ هر کانتینر را کنار هم بخوانید. کد خروج ۱۳۷ به‌تنهایی کمبود حافظه را ثابت نمی‌کند؛ دریافت SIGKILL هم می‌تواند همین کد را ایجاد کند. دلیل ثبت‌شدهٔ توقف، سقف منابع، وضعیت نود و زمان حادثه باید یکدیگر را تأیید کنند. با اجرای دوباره ممکن است تنها لاگ قبلیِ در دسترس از بین برود.

kubectl --context='lab' -n 'academy-lab' get pod 'api-example' -o jsonpath='{range .status.containerStatuses[*]}{.name}{"\nstate="}{.state}{"\nlastState="}{.lastState}{"\nrestarts="}{.restartCount}{"\n\n"}{end}'
kubectl --context='lab' -n 'academy-lab' describe pod 'api-example'
kubectl --context='lab' -n 'academy-lab' get pod 'api-example' -o jsonpath='{range .status.initContainerStatuses[*]}{.name}{"\nstate="}{.state}{"\nlastState="}{.lastState}{"\nrestarts="}{.restartCount}{"\n"}{end}'

ابتدا بخش محدودی از لاگ را همراه زمان هر پیام بخوانید. گزینهٔ previous فقط اجرای متوقف‌شدهٔ پیشین را برمی‌گرداند و آرشیو همهٔ اجراها نیست. اگر دیگر در دسترس نبود، به سامانهٔ لاگ مورد تأیید مراجعه کنید؛ نبود لاگ به معنای نبود خطا نیست. خطای نهایی را با زمان توقف و انتشار نسخهٔ تازه مقایسه کنید.

kubectl --context='lab' -n 'academy-lab' logs 'api-example' -c 'app' --previous --timestamps --tail=200
kubectl --context='lab' -n 'academy-lab' logs 'api-example' -c 'app' --timestamps --tail=200