راه‌اندازی لاگ سرور با استفاده از داکر

سلام قبلا در مورد مانیتورینگ تو این پست صبحت کردیم. اینجا می‌خواهیم طبق قراری که داشتیم در مورد لاگ سرور یا همون لاگینگ باهم صحبت کنیم. مانیتورینگ و لاگینگ چشم و گوش ما برای دیدن سرورها و سرویس‌های خودمون هستند. اگر به این موارد به خوبی دقت نکنیم همواره با مشکلاتی روبه‌رو خواهیم بود که تشخیص آن‌ها برای ما خیلی سخت و دشوار خواهد بود.

لاگ یکی از مهمترین ارکان نگهداری و ارائه سرویس می‌باشد. هر سرویس و سیستمی با انتشار یک سری لاگ از خودش داره با ما صحبت می‌کنه و ما رو از وضعیت خودش آگاه می‌کنه و با بررسی لاگ درست، به خوبی می‌توان مشکلات سرویس‌ها را پیدا کرد و آن‌ها را برطرف کرد.

قبلا در نظرسنجی سال ۹۹ سایت داکرمی ازتون پرسیده بودم که کدام سناریوهای داکر رو دوست دارید که پیاده‌سازی کنم و مانیتورینک و لاگینگ رتبه‌ی ۵ را بدست آورده بود. از این رو در این پست سناریوی لاگینگ و در پست دیگری سناریوی مانیتورینگ رو خدمتتون توضیح خواهم داد.

چرا به لاگ سرور نیاز داریم:

لاگ سرور یکی از موارد خیلی مهم در نگهداری سرویس و سرور می‌باشد. زیرا لاگ یک موضوع بسیار حیاتی و مهم می‌باشد و همواره باید حواسمون به لاگ‌ها باشد. خیلی مهمه که ما لاگ‌های خودمان را داخل یک سرویس دیگه جمع‌آوری کنیم. زیرا اگر از کلاسترینگ و HA داریم استفاده می‌کنیم یعنی اینکه ما از یک سرویس چند تا داریم و آن‌ها دارن همزمان به درخواست‌های رسیده پاسخ می‌دهند. از این رو برای پیدا کردن یک مشکل، مدام باید در سرورهای مختلف لاگین کنیم و لاگ‌‌های آن‌ها را بررسی کنیم؛ در صورتی که با لاگ‌سرور به راحتی داخل یک سری داشبورد و پنل می‌توانیم لاگ‌ها را مشاهده کنیم. از سوی دیگه نکته‌ی امنیتی وجود داره که حتما باید لاگ‌ها به صورت نزدیک real time به سرورهای دیگه ارسال شود تا همواره یک نسخه‌‌ای از لاگ‌های ما در سرور دیگه‌ای ذخیره شود. پس لاگ سرور یکی از ملزومات سامانه‌ی نگهداری سرویس می‌باشد.

سرویسی که برای لاگ‌ سرور در نظر گرفتم سرویس loki می‌باشد که برای شرکت خوب grafana است. این پروژه بعد از استقبال و عملکرد خوب پروژه‌ی prometheus با الهام از آن ایجاد و پیاده‌سازی شد. این دوتا پروژه خیلی کاربردی و عالی هستند و کنار همدیگر تمام نیازهای مانیتورینگ و لاگینگ ما را پوشش می‌دهند. راه‌اندازی ابتدایی به شدت سریع و راحته و قابلیت توسعه و پیاده‌سازی انواع امکانات پیچیده رو به خوبی در اختیار ما قرار می‌دهد. مجموعه‌ی لاگ سرور ما دارای اجزای زیر می‌باشد:

• سرویس Promtail: برای ارسال لاگ‌ها از جاهای مختلف برای ذخیره در loki استفاده می‌شود.
• سرویس Grafana: برای Visualize کردن متریک‌ها و لاگ‌ها می‌باشد. برامون گراف‌های خیلی خوبی می‌کشد.
• سرویس Loki: تمامی لاگ‌ها را در خود ذخیره و برای استفاده‌ی ما آماده می‌کند.
• سرویس Traefik: به عنوان reverse proxy برای ایجاد دسترسی وب به سرویس‌های مانیتورینگ لازم است.

نحوه‌ی کار این سرویس به این صورت می‌باشد که سرویس یا سرور ما لاگ‌ها را ایجاد می‌کنند و سرویس Promtail با توجه به کانفیگی که دارد لاگ‌ها را به سمت سرور loki ما ارسال می‌کند. در لاگ سرورها به این سرویس‌ها که لاگ را ارسال می‌کنند forwarder می‌گویند.

لاگ‌ها داخل سرویس loki ذخیره می‌شوند و با استفاده از سرویس grafana این لاگ‌ها رو به خوبی می‌تونیم با لیبل‌های مختلف که در کانفیگ‌ها قرار داده شده است بررسی و مشاهده کنیم.

را‌ه‌اندازی سرویس لاگینگ:

کامپوننت‌های مورد استفاده‌ی سرویس رو بالاتر توضیح دادم. حالا کامپوز فایل مربوط به این سرویس را دانلود و آن را راه‌اندازی می‌کنیم.

قبلا در اینجا در مورد کامپوز‌فایل و نحوه‌ی نوشتن آن صحبت کردیم که می‌توانید آن را بررسی کنید.

کامپوز‌فایل به همراه کانفیگ‌‌فایل‌های مورد نیاز را از اینجا همانند دستور زیر دریافت کنید.