وبلاگ نت‌آرامآموزش، تجربه و راهکارهای زیرساخت

کار زمان‌بندی‌شده هم‌زمان دو بار اجرا می‌شود؛ قفل و خروجی قابل بررسی

تشخیص هم‌پوشانی کار زمان‌بندی‌شده، ساخت قفل امن flock و آزمایش رفتار آن در لینوکس.

انتشار:
توسط تیم فنی نت‌آرام
۵ دقیقه زمان مطالعه
۰ دیدگاه
محتوای تخصصی، ساده و کاربردی
هماهنگ با هویت حرفه‌ای نت‌آرام
بازگشت به لیست مقالات
تصویر شاخص مقاله کار زمان‌بندی‌شده هم‌زمان دو بار اجرا می‌شود؛ قفل و خروجی قابل بررسی در وبلاگ نت‌آرام
محتوای آموزشی وبلاگ نت‌آرام
برنامه‌ای هر دقیقه اجرا می‌شود، اما گاهی اجرای آن دو دقیقه طول می‌کشد. در نتیجه نوبت بعدی شروع می‌شود در حالی که نوبت قبلی هنوز تمام نشده است. بسته به برنامه، این وضعیت ممکن است پردازش تکراری، فشار سرور یا نوشتن هم‌زمان داده ایجاد کند.
در یک سرور لینوکسی می‌توان از flock برای جلوگیری از ورود هم‌زمان فرایندهای همکار به یک بخش استفاده کرد. این قفل جایگزین طراحی درست تراکنش یا جلوگیری از پردازش دوباره پس از خطا نیست. ابتدا رفتار کار را می‌سنجیم و نمونه بی‌خطر را جداگانه امتحان می‌کنیم.

۱. مطمئن شوید واقعاً هم‌پوشانی دارید

زمان شروع و پایان هر اجرا را در گزارش برنامه، همراه شناسه اجرای غیرمحرمانه ثبت کنید. برای دیدن زمان‌بندی حساب جاری و پردازش‌های مرتبط می‌توانید از این دستورهای فقط‌خواندنی استفاده کنید:
کد / دستورcrontab -l pgrep -af 'example-job' command -v flock
نام نمونه را با بخشی مشخص از نام برنامه خود عوض کنید. crontab -l فقط جدول حساب جاری را نشان می‌دهد؛ کار ممکن است در حساب دیگر یا systemd timer تعریف شده باشد. pgrep یک عکس لحظه‌ای است و به تنهایی تکرار دائمی را ثابت نمی‌کند. دستور سوم مسیر flock را در صورت نصب نمایش می‌دهد.
اگر دو زمان شروع پیش از پایان اجرای قبلی ثبت شده‌اند، احتمال هم‌پوشانی وجود دارد. اگر برنامه خیلی طولانی شده، علت کندی را هم برطرف کنید؛ قفل تنها جلوی اجرای هم‌زمان را می‌گیرد و به خودی خود کار را سریع نمی‌کند.

۲. قفل را بدون لمس برنامه واقعی آزمایش کنید

در دو پنجره ترمینال با همان حساب، ابتدا پنجره اول را اجرا کنید:
کد / دستورflock -n /tmp/netaram-flock-demo.lock sh -c 'echo first-start; sleep 20; echo first-end'
در کمتر از ۲۰ ثانیه، در پنجره دوم اجرا کنید:
کد / دستورflock -n /tmp/netaram-flock-demo.lock sh -c 'echo second-start' echo "exit=$?"
پنجره اول قفل را هنگام خوابیدن نگه می‌دارد. گزینه -n در پنجره دوم منتظر نمی‌ماند؛ اگر قفل در دست دیگری باشد، متن second-start نباید چاپ شود و خروجی فرمان ناموفق است. پس از پایان پنجره اول، فرمان دوم را دوباره بزنید؛ این بار باید متن چاپ شود. این یک آزمایش محلی است و روی job واقعی اثری ندارد.
مسیر موقت نمونه فقط برای فهم رفتار است. در محیط چندکاربره، مسیر قابل دستکاری عمومی و نام قابل حدس می‌تواند خطرآفرین باشد؛ برای job واقعی پوشه قفل متعلق به حساب اجرای کار و با دسترسی کنترل‌شده انتخاب کنید.

۳. برای cron مسیر و خروجی مشخص بگذارید

فرض کنید مدیر از قبل پوشه امن /var/lib/myjob/locks را برای حساب اجرای کار ساخته و برنامه واقعی در /usr/local/bin/myjob قرار دارد. پس از جایگزینی مسیرها و بررسی دسترسی، یک نمونه خط cron چنین است:
کد / دستور* * * * * /usr/bin/flock -n /var/lib/myjob/locks/job.lock /usr/local/bin/myjob
مسیر flock را از خروجی command -v بگیرید؛ در بعضی سیستم‌ها متفاوت است. برنامه و پوشه قفل باید برای حساب اجرای cron قابل دسترسی باشند. محیط cron با ترمینال شما فرق دارد: مسیر اجرایی، متغیرهای لازم و پوشه کاری برنامه را صریح تنظیم کنید. خروجی استاندارد و خطا را به سامانه گزارش مناسب خود بفرستید و رازها را در لاگ ننویسید.
با -n اجرای جدید در زمان مشغول‌بودن قفل کنار گذاشته می‌شود؛ بعداً خودکار صف نمی‌شود. اگر هر اجرا باید حتماً انجام شود، سیستم صف یا زمان‌بندی مناسب و برنامه بازیابی لازم دارید. برای تمایز خطای قفل از خطای خود برنامه می‌توانید طبق نسخه نصب‌شده از گزینه کد تعارض و ثبت نتیجه استفاده کنید؛ خروجی هر دو حالت را در محیط آزمایشی ببینید.

۴. مرز قفل و خطاهای رایج

همه اجراهای همان کار باید از همان فایل قفل و روش یکسان استفاده کنند. اجرای مستقیم برنامه بدون flock از قفل پیروی نمی‌کند. فایل قفل را هنگام فعال‌بودن job حذف یا جایگزین نکنید؛ ممکن است اجرای بعدی فایل تازه‌ای بسازد و دو قفل مستقل ایجاد شود. پس از قطع فرایند، قفل هسته معمولاً با بسته‌شدن توصیفگرهای مربوط آزاد می‌شود؛ باقی‌ماندن نام فایل به تنهایی به معنی قفل فعال نیست.
اگر کار در چند سرور یا کانتینر با فایل‌سیستم جدا اجرا می‌شود، فایل محلی مشترک نیست و قفل سراسری ایجاد نمی‌کند. برای آن معماری از قفل یا صف توزیع‌شده با رفتار مشخص در قطع ارتباط استفاده کنید. رفتار فایل‌سیستم‌های شبکه‌ای نیز به نوع و تنظیم آن‌ها وابسته است.

۵. پس از اعمال چگونه مطمئن شویم؟

در محیط آزمایشی دو اجرای کنترل‌شده نزدیک به هم شروع کنید و ببینید فقط یکی وارد بخش اصلی می‌شود. سپس پایان موفق، خطای واقعی برنامه و اجرای بعد از آزادشدن قفل را جداگانه بررسی کنید. اگر دائم همه نوبت‌ها رد می‌شوند، مدت اجرای اول و گیرکردن برنامه را بررسی کنید؛ حذف فایل قفل پاسخ ایمن به فرایند گیرکرده نیست.
برای بررسی تفاوت ترتیب راه‌اندازی سرویس پس از بوت، راهنمای سرویس و شبکه systemd را بخوانید. جزئیات مدیریت سرور نت‌آرام و رفتار قفل فایل در راهنمای لینوکس نیز در دسترس است.
اشتراک‌گذاری:
لینکدینتلگرامایکس

دیدگاه‌ها (۰)

دیدگاه‌های تاییدشده و پاسخ‌های تیم نت‌آرام