طراحی، تجهیز، برق، سرمایش و چیدمان فیزیکی یک دیتاسنتر کوچک برای آموزش و سرویسدهی هوش مصنوعی
نقطه آغاز هر زیرساخت هوش مصنوعی، یک فضای فیزیکی مناسب است. این فضا قرار است میزبان تجهیزاتی باشد که مجموعاً چند صد کیلوگرم وزن دارند، گرمایی معادل چند کیلووات تولید میکنند، و باید ۲۴ ساعته و ۷ روز هفته بدون توقف کار کنند. انتخاب نادرست این فضا — مثلاً یک اتاق کوچک بدون تهویه یا یک زیرزمین مرطوب — میتواند کل پروژه را از همان ابتدا با شکست مواجه کند.
بر اساس زیرساختی که در این مجموعه مقالات طراحی میکنیم — شامل ۴ سرور HPE DL380 Gen12، یک Storage فلش، یک Storage پشتیبان، و تجهیزات جانبی — حداقل فضای مورد نیاز ۳۰ متر مربع است. اما اگر به دنبال راحتی، فضای رشد آینده، و امکان سرویسدهی بدون مزاحمت هستید، ۵۰ متر مربع انتخاب بهتری است.
برای چیدمان فشرده ۲ رک، بدون فضای رشد. اگر دقیق برنامهریزی کنید، جواب میدهد — اما بعداً برای اضافه کردن تجهیزات جدید به مشکل میخورید.
شامل ۳۰ متر اتاق سرور اصلی + ۱۰ متر اتاق مانیتورینگ + ۵ متر انبار قطعات + ۵ متر فضای عبور. این گزینه امکان رشد و توسعه را فراهم میکند.
برای تیمهای بزرگتر، آزمایشگاه AI، و استقرار چند رک اضافی. این گزینه مخصوص شرکتهای در حال رشد است.
کف اتاق سرور باید تحمل وزن تجهیزات را داشته باشد. یک رک کامل با سرورهای سنگین میتواند تا ۸۰۰ کیلوگرم وزن داشته باشد. اگر کف ساختمان معمولی است، حتماً از صفحه توزیع بار زیر رکها استفاده کنید. دیوارها باید ضد حریق باشند و درب اتاق حداقل ۹۰ سانتیمتر عرض داشته باشد تا رکها به راحتی وارد شوند. امنیت فیزیکی نیز حیاتی است: قفل دیجیتال یا بیومتریک، دوربین مداربسته، و کنترل دسترسی.
رک (Rack) یک قاب فلزی استاندارد است که تجهیزات سرور را در خود جای میدهد. عرض استاندارد رکها ۱۹ اینچ است و ارتفاع آنها با واحد U (معادل ۴.۴۵ سانتیمتر) اندازهگیری میشود. رایجترین رکها 42U هستند (ارتفاع حدود ۲ متر) اما برای فضاهای کوتاهتر، رکهای 36U و 24U نیز موجودند.
| نوع رک | ارتفاع | ظرفیت | مناسب برای |
|---|---|---|---|
| 42U | ۲۰۰ سانتیمتر | ۲ عدد سرور 4U + Storage + UPS | سقف ۳ متری |
| 36U | ۱۷۵ سانتیمتر | ۱ سرور 4U + Storage + UPS | سقف ۲.۵ متری |
| 24U | ۱۲۰ سانتیمتر | ۱ سرور 4U + تجهیزات سبک | سقف کوتاه |
برای زیرساخت ما که شامل ۴ سرور AI (هر کدام 4U)، یک Storage فلش (4U)، یک Storage پشتیبان (4U)، UPS (4-6U)، و سوئیچهای شبکه (2-4U) است، مجموعاً حدود ۲۶-۳۰U فضا لازم داریم. بنابراین دو رک 42U بهترین انتخاب است — یکی برای سرورها و Storage، دیگری برای UPS، شبکه و فضای رشد.
سرورهای هوش مصنوعی — به ویژه آنهایی که به GPU مجهزند — گرمای فوقالعادهای تولید میکنند. یک سرور DL380 Gen12 با ۴ عدد GPU پرقدرت میتواند تا ۴.۵ کیلووات گرما تولید کند. چهار سرور یعنی ۱۸ کیلووات گرما — معادل ۱۸ بخاری برقی! بدون سیستم سرمایش مناسب، این گرما در چند ساعت تمام تجهیزات را نابود میکند.
| تجهیز | تعداد | توان هر واحد | جمع |
|---|---|---|---|
| سرور DL380 Gen12 | ۴ | ۲.۵-۴.۵ کیلووات | ۱۰-۱۸ کیلووات |
| Storage فلش | ۱ | ۱-۲ کیلووات | ۱-۲ کیلووات |
| Storage پشتیبان | ۱ | ۲-۴ کیلووات | ۲-۴ کیلووات |
| سوئیچ و تجهیزات جانبی | — | — | ۱-۲ کیلووات |
| جمع کل | ۱۴-۲۶ کیلووات | ||
با اعمال ضریب اطمینان ۱.۳، ظرفیت سرمایش مورد نیاز ۱۸-۳۴ کیلووات است. برای این منظور، دو دستگاه داکت اسپلیت ۳۰ هزار BTU (هر کدام ۹ کیلووات) به همراه یک دستگاه یدک توصیه میشود.
رطوبت ایدهآل برای اتاق سرور بین ۴۰ تا ۵۵ درصد است. رطوبت کمتر از ۳۰٪ باعث الکتریسیته ساکن میشود و رطوبت بالای ۶۰٪ خطر خوردگی قطعات را افزایش میدهد. کولرهای گازی رطوبت را کنترل نمیکنند — بنابراین باید رطوبتساز و رطوبتگیر جداگانه نصب کنید.
برق سه فاز اولین نیاز اتاق سرور است. مصرف کل زیرساخت ما حدود ۳۰ کیلووات است که با برق تک فاز معمولی (حداکثر ۵ کیلووات) غیرممکن است. برای تأمین برق پایدار، سه لایه حفاظتی لازم داریم:
منبع اصلی — برق سه فاز ۳۸۰ ولت با آمپر مناسب (حداقل ۶۰ آمپر)
برای قطعیهای کوتاه (۱-۳ ساعت) — ۳۲ تا ۶۴ باتری ۱۰۰ آمپر
برای قطعیهای بلندمدت — Iveco با ATS خودکار و توان واقعی ۴۵ کیلووات
پشتیبان سوخت — ۵ تا ۱۴ روز کارکرد مداوم ژنراتور
| # | اقلام | تعداد | حدود قیمت (تومان) |
|---|---|---|---|
| ۱ | رک 42U استاندارد | ۲ | ۵۰-۱۰۰ میلیون |
| ۲ | داکت اسپلیت ۳۰ هزار BTU | ۳ | ۱۵۰-۲۷۰ میلیون |
| ۳ | UPS آنلاین ۵۰ کیلووات | ۱ | ۱-۱.۸ میلیارد |
| ۴ | باتری ۱۲ ولت ۱۰۰ آمپر | ۳۲-۶۴ | ۲۰۰-۶۰۰ میلیون |
| ۵ | ژنراتور گازسوز ۷۲ کاوا | ۱ | ۱-۱.۵ میلیارد |
| ۶ | مخزن LPG ۱۰۰۰ لیتری | ۱ | ۱۵۰-۲۵۰ میلیون |
| ۷ | رطوبتساز التراسونیک | ۱ | ۵-۱۵ میلیون |
| ۸ | رطوبتگیر ۳۰ لیتری | ۱ | ۲۰-۴۰ میلیون |
| ۹ | سنسور دما و رطوبت | ۴ | ۱۰-۲۰ میلیون |
| ۱۰ | سوئیچ شبکه 10GbE | ۲ | ۲۰-۴۰ میلیون |
| ۱۱ | سینی کابل و تجهیزات کابلکشی | — | ۱۰-۲۰ میلیون |
| ۱۲ | دوربین مداربسته | ۲-۴ | ۱۰-۲۰ میلیون |
| ۱۳ | قفل بیومتریک | ۱ | ۱۵-۳۰ میلیون |
| ۱۴ | سیستم اعلام حریق | ۱ | ۱۰-۳۰ میلیون |
| جمع تقریبی | ۲.۵-۵ میلیارد تومان | ||
اتاق سرور زیربنای فیزیکی کل پروژه هوش مصنوعی است. بدون فضای مناسب، سرمایش کافی، برق پایدار و امنیت فیزیکی، هیچ سرور و مدل AI نمیتواند کار کند. در این مقاله، تمام اجزای لازم برای راهاندازی یک اتاق سرور حرفهای با ظرفیت ۴ سرور AI + Storage + زیرساخت کامل را بررسی کردیم.
در مقالات بعدی، به سراغ تجهیزات سرور — از جمله پردازندههای Xeon، کارتهای GPU مدل L40S، حافظههای NVMe و کانفیگ دقیق RAID — خواهیم رفت. سپس وارد دنیای هوش مصنوعی میشویم: از آموزش مدلهای 7B تا معماری MoE، Multimodal و Dense Model.
اتاق سرور فقط یک اتاق نیست — قلب تپنده زیرساخت AI است. وقتی این مقاله را به پایان رساندید و اتاق را آماده کردید، آمادهاید که به سراغ مقاله بعدی برویم: انتخاب سرورهای AI — از پردازنده تا GPU.