WIUNIX ACADEMY
autovacuum در PostgreSQL؛ تشخیص عقبافتادگی پاکسازی و خطر wraparound
صفحهٔ 2 از 3؛ قبل از ادامه، مراحل قبلی و چیزهایی رو که لازم داری مرور کن.
آموزش متناسب با محیط تو
کجا اجرا میکنی؟
سیستمعامل و نسخهٔ سرورت رو انتخاب کن تا مراحل، دستورها و راهحلهای همون محیط رو ببینی.
آموزش متناسب با مقادیر تو
تنظیمات این آموزش
مقادیر نمونه رو با مشخصات سرورت عوض کن تا متن و دستورها با هم تغییر کنن. رمز، کلید خصوصی و توکن اینجا وارد نکن. مقدارها فقط توی همین زبانه میمونن و به سرور یا لینک اشتراکگذاری فرستاده نمیشن. قبل از اجرا، DNS، گواهیها و تنظیمات دسترسی شبکه رو روی سرورت بررسی کن.
اگر آیپی، دامنه یا پورتهای نمونه با سرورت فرق دارن، بخش تنظیمات پایین رو باز کن. مقدارها رو عوض کن و «اعمال در آموزش» رو بزن؛ بعد دستورهای تازه رو کپی کن.
تنظیم مقادیر برای محیط من4 مقدار قابلتغییر
قدم بعدی
جدول قدیمی و TOAST کنارش رو پیدا کنیم
داخل دیتابیس مورد بررسی، سراغ جدولها و materialized viewهایی میریم که واقعاً داده ذخیره میکنن؛ کاتالوگها هم در این فهرست هستن. مقدارهای بزرگ ممکنه در جدول TOAST نگهداری بشن و سن آن جدول از جدول اصلی بیشتر باشه. نام schema و جدول رو با هم ثبت کن تا شیء همنامی رو اشتباه نگیری.
این فهرست اول XID رو مرتب میکنه. اگر مشکل از MXID است، سن multixact جدول اصلی و TOAST رو هم جدا دنبال کن و بر اساسشان اولویت بده. والد یک جدول پارتیشنبندیشده دادهٔ عادی خودش رو نداره؛ باید پارتیشنهای واقعی رو بررسی کنیم. قدیمیبودن کاتالوگ یا چند رابطه، برنامهٔ نگهداری سراسری دیتابیس لازم داره و با کار تکجدولی آخر آموزش بسته نمیشه.
همان نشست ثابت psql برای مشاهده
SELECT n.nspname, c.relname,
age(c.relfrozenxid) AS heap_xid_age,
age(t.relfrozenxid) AS toast_xid_age,
greatest(age(c.relfrozenxid),age(t.relfrozenxid)) AS oldest_xid_age,
mxid_age(c.relminmxid) AS heap_mxid_age,
mxid_age(t.relminmxid) AS toast_mxid_age,
pg_size_pretty(pg_total_relation_size(c.oid)) AS total_size,
c.reloptions
FROM pg_class c JOIN pg_namespace n ON n.oid=c.relnamespace
LEFT JOIN pg_class t ON t.oid=c.reltoastrelid
WHERE c.relkind IN ('r','m') AND c.relfrozenxid <> '0'::xid
ORDER BY greatest(age(c.relfrozenxid),age(t.relfrozenxid)) DESC
LIMIT 30;یک رابطهٔ ذخیرهشده با نام دقیق پیدا میکنی و سن TOAST پشت سن جدول اصلی پنهان نمیمونه.
قدم بعدی
تغییرات جدول رو کنار سابقهٔ پاکسازی بخونیم
حالا میبینیم حجم تغییرات جدول چه نسبتی با نگهداری انجامشده داره. n_dead_tup تخمینه؛ نه تعداد دقیق ردیف قابل حذف رو میگه و نه فضای قابل آزادشدن رو. ممکنه snapshot قدیمی هنوز به نسخههای قبلی ردیف نیاز داشته باشه. از طرف دیگه، کمبودن این عدد دلیل نمیشه جدول به freeze نیاز نداشته باشه.
چند مشاهده رو همراه با بار کاری و زمان reset آمار مقایسه کن. جدول پر از INSERT هم ممکنه vacuum بخواد. از این شمارندهها بهتنهایی نمیشه نتیجه گرفت زمانبندی خراب شده یا باید VACUUM FULL اجرا کنیم.
همان نشست ثابت psql برای مشاهده
SELECT schemaname,relname,n_live_tup,n_dead_tup,
last_vacuum,last_autovacuum,vacuum_count,autovacuum_count,
n_ins_since_vacuum
FROM pg_stat_user_tables
ORDER BY n_dead_tup DESC LIMIT 20;جدولهای پرتغییر و زمان پایان نگهداری دیده میشن، بدون اینکه آمار مشترک رو reset کنیم.
قدم بعدی
ببینیم چه چیزی افق پاکسازی رو عقب نگه داشته
vacuum نمیتونه نسخهای از ردیف رو دور بریزه که یک snapshot قدیمی هنوز ممکنه لازم داشته باشه. قدیمیترین نیازِ باقیمونده، مرزی برای جلوآمدن پاکسازی میگذاره. تراکنش باز قدیمی، تراکنش prepared، replication slot و بازخورد standby از چیزهایی هستن که برای پیدا کردن این مانع بررسی میکنیم. اول هویت و سن این موارد رو میگیریم؛ لازم نیست متن کامل SQL دیگران رو که ممکنه دادهٔ خصوصی داشته باشه چاپ کنیم.
برای تراکنش قدیمی با مسئول برنامه هماهنگ کن. تراکنش prepared زیر نظر هماهنگکنندهٔ commit دو مرحلهای است و تصمیم خودسرانه دربارهاش میتونه سازگاری کار برنامه رو بشکنه. slot هم ممکنه تاریخچهٔ موردنیاز یک مصرفکنندهٔ خاموش رو حفظ کرده باشه. حذفش گاهی به راهاندازی دوبارهٔ مصرفکننده یا از دسترفتن تاریخچهٔ لازم منتهی میشه. از روی این فهرست، نشستها رو قطع نکن و تراکنش prepared یا slot رو حذف نکن.
همان نشست ثابت psql برای مشاهده
SELECT pid,usename,application_name,backend_type,state,
clock_timestamp()-xact_start AS transaction_duration,
age(backend_xid) AS xid_age,age(backend_xmin) AS xmin_age,
wait_event_type,wait_event
FROM pg_stat_activity
WHERE backend_xid IS NOT NULL OR backend_xmin IS NOT NULL
ORDER BY age(backend_xmin) DESC NULLS LAST LIMIT 30;
SELECT gid,prepared,owner,database,age(transaction) AS xid_age
FROM pg_prepared_xacts ORDER BY age(transaction) DESC;
SELECT slot_name,slot_type,database,active,active_pid,
age(xmin) AS xmin_age,age(catalog_xmin) AS catalog_xmin_age,
wal_status
FROM pg_replication_slots ORDER BY age(catalog_xmin) DESC NULLS LAST;برای هر مورد مشکوک هویت و مسئول پیگیری داری؛ هنوز هیچ تراکنش یا مصرفکنندهای تغییر نکرده.
قدم بعدی
فرق کار در حال اجرا و انتظار رو ببینیم
وضعیت vacuum همین دیتابیس رو میخونیم. اگر blocking_pids خالی نباشه، باید قفل و نگهدارندهاش رو بررسی کنیم. خالیبودن کل خروجی هم میتونه فقط یعنی همین لحظه vacuumی در حال اجرا نیست؛ یک اجرای کوتاه ممکنه بین دو مشاهده تمام شده باشه.
اسکن heap فقط یک بخش از کاره. تعداد بلوک اسکنشده درصد زمان کل رو نشون نمیده و پردازش index ممکنه چند دور تکرار بشه. مرحله، انتظار و چند مشاهدهٔ پشتسرهم رو کنار هم بخون. worker جلوگیری از wraparound رو فقط به خاطر هزینهاش لغو نکن؛ فشار I/O یا کمبود ظرفیت شاهد جدا لازم داره.
همان نشست ثابت psql برای مشاهده
SELECT p.pid,p.datname,p.relid,p.phase,
p.heap_blks_total,p.heap_blks_scanned,p.heap_blks_vacuumed,
p.index_vacuum_count,a.backend_type,a.wait_event_type,a.wait_event,
pg_blocking_pids(p.pid) AS blocking_pids
FROM pg_stat_progress_vacuum p
LEFT JOIN pg_stat_activity a USING(pid)
WHERE p.datid=(SELECT oid FROM pg_database WHERE datname=current_database())
ORDER BY p.pid;میفهمی الان اسکن یا مرحلهٔ دیگهای اجرا میشه، انتظار قفل داریم، یا فعلاً workerی دیده نمیشه.
قدم بعدی
قبل از اقدام، جدول دقیق رو ثبت کنیم
در فرم مقادیر نمونه، schema و یک جدول عادی یا materialized view موجود رو انتخاب و اعمال کن. مقدارهای اولیه فقط جای نام جدول خودت هستن؛ آموزش جدول نمونهای نمیسازه. نتیجهٔ فقطخواندنی پایین رو همراه درخواست نگهداری نگه دار.
قبل از کار اختیاری بعدی، با مسئول سرویس دربارهٔ فشار قابلقبول I/O و WAL، اثر روی replica، فضای آزاد و زمان نگهداری توافق کن. اگر افق قدیمی رو پیدا کردی، اول از مسیر مسئول خودش رسیدگی کن. vacuum یک جدول، سن دیتابیس رو پایین نمیآره اگر کاتالوگ یا پارتیشن یا رابطهٔ قدیمیتری باقی مونده باشه.
همان نشست ثابت psql برای مشاهده
\set target_schema 'public'
\set target_table 'orders'
SELECT c.oid,c.relkind,n.nspname,c.relname,c.reloptions,
age(c.relfrozenxid) AS xid_age,mxid_age(c.relminmxid) AS mxid_age,
age(t.relfrozenxid) AS toast_xid_age,
mxid_age(t.relminmxid) AS toast_mxid_age
FROM pg_class c JOIN pg_namespace n ON n.oid=c.relnamespace
LEFT JOIN pg_class t ON t.oid=c.reltoastrelid
WHERE n.nspname=:'target_schema' AND c.relname=:'target_table';دقیقاً همان رابطهٔ ذخیرهشدهٔ مصوب دیده میشه. خروجی خالی یا نوع غیرمنتظره یعنی ادامه نده.
قدم بعدی
نشست نگهداری رو جدا باز کنیم
فقط وقتی ادامه بده که مسئول سرویس این جدول مشخص رو تأیید کرده و کلاستر در وضعیت توقف اضطراری نیست. در ترمینال دوم، پروفایل نگهداری رو باز کن؛ مطمئن شو به همان دیتابیس و سرور primary رسیده. ترمینال مشاهده رو برای دیدن پیشرفت باز نگه دار.
نام پروفایل بهتنهایی مقصد یا مجوز رو ثابت نمیکنه. اگر فقط حساب فقطخواندنی داری، نتیجهٔ تشخیص رو تحویل مسئول دیتابیس بده تا اقدام مشخص رو انجام بده.
ترمینال دوم روی میزبان مدیریت
/usr/pgsql-18/bin/psql -X -v ON_ERROR_STOP=1 'service=academy_vacuum_maintain'نشست مستقیم دوم برای کار نگهداری مصوب آماده است و نشست مشاهده همچنان فقطخواندنی مونده.