گاه نوشته های مهدی بیاضی

tail -f /dev/mind > blog

گاه نوشته های مهدی بیاضی

tail -f /dev/mind > blog

طبقه بندی موضوعی

۲ مطلب با کلمه‌ی کلیدی «Python» ثبت شده است

در زمان های نه چندان دور تعداد سرور ها و کل زیر ساخت معمولا کوچک و کم بود. سازمان یا سرویس های بسیار اندکی تعداد سرور هایشان از چند ده تا بیشتر می شد اما با پیشرفت فوق العاده عجیب و سریع اینترنت و سرویس ها، نیاز به استفاده از سرور های بیشتر در بستر و زیر ساخت احساس شد. الان سرویس ها و نرم افزارهای تحت وب بسیاری دارای میلیون ها کاربر بوده و بعضی داده هایی با حجم های بسیار زیاد (چندین پتابایت) ذخیره و روزانه به هزاران و حتی میلیون ها کاربر سرویس دهی می کنند.

ادمین ها قبلا با روش های ساده ای مثل ssh به یک سرور متصل و دستوراتی رو اجرا می کردند اما مشخص هست که با اضافه شدن تعداد سرور، بحث مدیریت این سرور ها سخت و سخت تر می شه.

هر نرم افزار تحت وب برای راه اندازی و سرویس دهی نیاز به یک سری زیرساخت و بستر داره که اکثرا آشنایی دارید با این موارد. به طور کلی مدیریت زیرساخت در یک سرویس تحت وب موارد زیر می تونه باشه

  • سخت افزار و شبکه
  • تنظیم و نصب سیستم ابری (کلود یا Cloud) و سیستم های مجازی (vm)
  • سیستم عامل و نرم افزار (نصب، تنظیم و به روز رسانی)
  • وظایف و دستورات زمانبندی شده (پشیبان گیری، حذف لاگ، تنظیم ساعت و ...)
  • دستورات و وظایف دستی (نصب نرم افزار، ریست و ...)
  • مانیتورینگ
  • و ...

خوب همین دلایل و نیاز به روشی سریع و مطمئن برای مدیریت سرور ها باعث ایجاد نرم افزار هایی خاص برای این کار شد. نرم افزار هایی مثل puppet. ابزار puppet با استفاده از زبان روبی (Ruby) نوشته شده و یکی از نرم افزار های خوب برای مدیریت مرکزی نصب، تنظیمات و نگهداری سیستم عامل و نرم افزار های چندین سرور هست.

ابزار های پایتونی هم هستند که البته به نسبت پاپت محدود تر بودند و مثلا برای اجرای یک سری دستورات از طریق ssh کاربرد داشتند مثل Fabric.

سال ۲۰۱۱ ابزاری معرفی شد به اسم salt. این یک پروژه پایتونی بود که به منظور مدیریت متمرکز سرور ها ایجاد شد و به زودی طرفداران بسیاری پیدا کرد. مدت ها از پروژه های بسیار فعال github بود (رکورد بیشترین تعداد توسعه دهنده در سال ۲۰۱۲) و توسعه وحستناکی روش انجام شد ! تقریبا هر روز کلی بهبود و کد جدید بهش اضافه می شد تا اینکه تبدیل شد به یک ابزار بسیار قوی و مناسب.

از Salt یا همون SaltStack برای ۲ منظور مهم استفاده می شه.

  1. سیستم مرکزی برای مدیریت تنظیمات
  2. اجرای از راه دور دستورات

اما ویژگی های منحصر به فرد ابزار Salt:

Scale

  • توانایی مدیریت ده ها هزار سرور
  • سیستم Message بر اساس ZeroMQ
  • اتصالات همزمان و اجرای موازی دستورات
  • استفاده از MessagePack
  • عدم استفاده از ssh که بسیار کند تر هست

امنیت

  • سیستم اعتبار سنجی با استفاده از کلید عمومی
  • رمز نگاری پیغام ها و دستورات ارسالی با استفاده از AES

ویژگی های برجسته

  • معماری ساده
  • نصب آسان
  • تنظیمات آسان
  • امکان توسعه و ماژول نویسی
  • سرور داخلی قایل
  • عدم وابستگی به ابزار یا نرم افزار های دیگر

سایت رسمی

آدرس Github

مستندات پروژه

۰ موافقین ۲ مخالفین ۰ ۱۱ آبان ۹۲ ، ۱۸:۳۱
مهدی بیاضی

یکی از زمینه های مهم و در حال پیشرفت علم نرم افزار و برنامه نویسی توسعه نرم افزار های تحت شبکه هست. یعنی توسعه برنامه های سرور یا کلاینت که باهم یا با یک مجموعه دیگه در ارتباط باشند. 

دیزل نام یک ابزار پایتونی برای توسعه نرم افزار های تحت شبکه می باشد. با کمک این ابزار می شه برنامه های سرور یا کلاینتی نوشت که با پروتکل های TCP یا َUDP کار کنند. از ویژگی های بارز این ابزار استفاده از تکنولوژی Non-blocking I/O هست که قدرت پردازشی و توسعه بسیار زیاد در عین استفاده کم از منابع رو فراهم می کنه. با این ابزار و در حالت معمول می شه برنامه هایی نوشت که در یک سرور تا ۱۰ هزار کانکشن همزمان و باز قابل پردازش باشه. همچمین در این حالت به ازای هر اتصال یا socjet باز حدودا ۱۴ کیلوبایت حافظه رم اشغال می شه که رقم بسیار خوبی هست. 


Python Diesel


یکی از جالب ترین چیز هایی که من توی Diesel دیدم سادگی اون هست. بخش زیادی از این سادگی و روان بودن رو مدیون پایتون شاید باشه اما خود ماژول هم خوب پیاده شده و بسیاری از پیچیدگی رو داخل خودش حفظ می کنه. معمولا بهینه بودن یا performance و پردازش یا حجم اطلاعات نسبتی هم جهت با پیچیدگی کد و نرم افزار داره. اما در این ابزار تا حد زیادی این پیچیدگی از بین برده شده و برنامه نویس فقط درگیر مشکل و کد سرویس می شه نه بحث های شبکه و توسعه نرم افزار تحت شبکه.

این ابزار بصورت پیش فرض داخل خودش چندین کلاینت از پیش نوشته شده هم داره که می شه به مواردی چون کلاینت MongoDB, Redis, Riak و ... اشاره کرد. همیچنین در این ابزار از تکنولوژی ها و پروتکل هایی چون WSGI, WebSockets, ZeroMQ, HTTP/1.1 و ... هم پشتیبانی می شه.


یک مثال ساده از یک سرور با استفاده از پایتون و دیزل:


# tcp_holla_server.py
import diesel

def holla_back(addr):
    while True:
        message = diesel.until_eol()
        shouted_message = message.upper()
        diesel.send(shouted_message)
 diesel.quickstart(diesel.Service(holla_back, 4321)) 


سایت رسمی Diesel

مستندات پروژه Diesel

سورس پروژه در GitHub

۰ موافقین ۲ مخالفین ۰ ۱۴ شهریور ۹۱ ، ۱۰:۴۹
مهدی بیاضی