½´ÆÛ¸¶ÀÌÅ©·ÎÄÄÇ»ÅÍ(Super Micro Computer, Inc.(SMCI), ÀÌÇÏ ½´ÆÛ¸¶ÀÌÅ©·Î)´Â 22ÀÏ º»»ç ¹ßÇ¥¸¦ Àοë, ½´ÆÛŬ·¯½ºÅÍ Æ÷Æ®Æú¸®¿À¿¡ ¿£ºñµð¾Æ ºí·¢À£ Ç÷§ÆûÀ» žÀçÇÑ ¿£µåÅõ¿£µå AI µ¥ÀÌÅͼ¾ÅÍ ¼Ö·ç¼ÇÀ» Ãß°¡Çß´Ù.
»õ·Î¿î ½´ÆÛŬ·¯½ºÅÍ´Â ¼ö³Ã½Ä ·¢ ³» ¿£ºñµð¾Æ HGX B200 8-GPU ½Ã½ºÅÛ ¼ö¸¦ Å©°Ô ´Ã·È´Ù.
ÀÌ·Î ÀÎÇØ ±âÁ¸¿¡ ¾÷°è ÃÖ°í ¼öÁØÀ» ÀÚ¶ûÇÏ´ø ¼ö³Ã½Ä ¿£ºñµð¾Æ HGX H100 ¹× H200 ±â¹Ý ½´ÆÛ¸¶ÀÌÅ©·Î ½´ÆÛŬ·¯½ºÅÍ ´ëºñ GPU ÄÄÇ»Æà ÁýÀûµµ°¡ ´ëÆø Çâ»óµÆ´Ù.
¶ÇÇÑ, ½´ÆÛ¸¶ÀÌÅ©·Î´Â ¿£ºñµð¾Æ È£ÆÛ ½Ã½ºÅÛ Æ÷Æ®Æú¸®¿À¸¦ °ÈÇØ ±Þ¼Óµµ·Î Áõ°¡ÇÏ°í ÀÖ´Â HPC ¾ÖÇø®ÄÉÀ̼ǰú ´ëÁßÀûÀÎ ¿£ÅÍÇÁ¶óÀÌÁî AIÀÇ °¡¼Ó ÄÄÇ»Æà µµÀÔ¿¡ ´ëÀÀÇÏ°í ÀÖ´Ù.
Âû½º ¸®¾Ó(Charles Liang) ½´ÆÛ¸¶ÀÌÅ©·Î »çÀå °â CEO´Â “½´ÆÛ¸¶ÀÌÅ©·Î´Â ¼¼°è ÃÖ´ë ±Ô¸ðÀÇ ¼ö³Ã½Ä AI µ¥ÀÌÅͼ¾ÅÍ ÇÁ·ÎÁ§Æ®¿¡ ±â¿©ÇÒ ¼ö ÀÖ´Â Àü¹®¼º, ¹èÆ÷ ¼Óµµ, ±×¸®°í ¹è¼Û ¿ª·®À» Áö´Ï°í ÀÖ´Ù”¶ó¸ç “ÃÖ±Ù, ½´ÆÛ¸¶ÀÌÅ©·Î¿Í ¿£ºñµð¾Æ°¡ GPU 10¸¸°³ ±Ô¸ðÀÇ AI µ¥ÀÌÅͼ¾Å͸¦ ¼º°øÀûÀ¸·Î ±¸ÃàÇß´Ù”°í ¸»Çß´Ù.
±×´Â ÀÌ¾î “½´ÆÛ¸¶ÀÌÅ©·Î ½´ÆÛŬ·¯½ºÅÍ´Â Á÷Á¢¾×ü³Ã°¢(Direct Liquid Cooling; DLC)ÀÇ È¿À²¼ºÀ» ÅëÇØ Àü·Â ¼ö¿ä·®À» ÁÙÀδÙ. ÀÌÁ¦ ¿©±â¿¡ ¿£ºñµð¾Æ ºí·¢À£ Ç÷§ÆûÀ» »ç¿ëÇÏ´Â ¼Ö·ç¼ÇÀÌ Ãß°¡µÆ´Ù”¸ç “½´ÆÛ¸¶ÀÌÅ©·ÎÀÇ ºôµù ºí·Ï ¹æ¹ý·ÐÀ» ÅëÇØ ºü¸£°Ô ¿£ºñµð¾Æ HGX B200 8-GPU ¼¹ö¸¦ ¼³°èÇÒ ¼ö ÀÖÀ¸¸ç, ÀÌ´Â ¼ö³Ã½Ä°ú °ø³Ã½Ä ³Ã°¢ ¸ðµÎ °¡´ÉÇÏ´Ù. ½´ÆÛŬ·¯½ºÅÍ´Â Àü·Ê ¾ø´Â ÁýÀûµµ, ¼º´É ±×¸®°í È¿À²¼ºÀ» Á¦°øÇÏ°í, ´õ¿í Çâ»óµÈ AI ÄÄÇ»Æà ¼Ö·ç¼ÇÀ¸·Î ³ª¾Æ°¡´Â ±æÀ» ¿°í ÀÖ´Ù. ½´ÆÛ¸¶ÀÌÅ©·Î Ŭ·¯½ºÅÍ´Â Á÷Á¢¾×ü³Ã°¢À» ÅëÇØ µ¥ÀÌÅͼ¾ÅÍ Àü¹ÝÀÇ ¼º´ÉÀº Çâ»ó½ÃÅ°°í Àü·Â ¼Òºñ¸¦ ÁÙÀÌ¸ç ¿î¿µ ºñ¿ë Àý°¨ È¿°ú¸¦ Á¦°øÇÑ´Ù”°í ¼³¸íÇß´Ù.
¡ß½´ÆÛ¸¶ÀÌÅ©·Î ¿£ºñµð¾Æ HGX B200 ¼¹ö = ¾÷±×·¹ÀÌµå µÈ ½´ÆÛŬ·¯½ºÅÍ È®Àå °¡´É ÀåÄ¡´Â Çõ½ÅÀûÀÎ ¼öÁ÷ ³Ã°¢ ºÐ¹è ¸Å´ÏÆúµå(CDM)¸¦ °®Ãá ·¢ ½ºÄÉÀÏ ¼³°è¸¦ ±â¹ÝÀ¸·Î, ´ÜÀÏ ·¢¿¡ ´õ ¸¹Àº ÄÄÇ»Æà ³ëµå¸¦ žÀçÇÒ ¼ö ÀÖ´Ù.
»õ·Ó°Ô °³¹ßµÈ °íÈ¿À² ³Ã°¢ÆÇ°ú °í±Þ È£½º ¼³°è·Î ¼ö³Ã½Ä ½Ã½ºÅÛÀÇ È¿À²¼ºÀÌ ÇÑÃþ ´õ Çâ»óµÆÀ¸¸ç, ´ë±Ô¸ð ¹èÆ÷¸¦ À§ÇÑ »õ·Î¿î ÀÎ-¶óÀÎ(in-row) ÀÌÁßÈ ³Ã°¢ ºÐ¹è ÀåÄ¡(CDU) ¿É¼Çµµ Ãß°¡·Î Á¦°øµÈ´Ù.
±âÁ¸ÀÇ °ø³Ã½Ä µ¥ÀÌÅͼ¾Å͵µ »õ·Î¿î °ø³Ã½Ä ³Ã°¢ ½Ã½ºÅÛ ¼¨½Ã¸¦ žÀçÇÑ ¿£ºñµð¾Æ HGX B200 8-GPU ½Ã½ºÅÛÀ» ÅëÇØ ¼º´É°ú È¿À²À» ±Ø´ëÈÇÒ ¼ö ÀÖ´Ù.
»õ·Î¿î ½´ÆÛ¸¶ÀÌÅ©·Î ¿£ºñµð¾Æ HGX B200 8-GPU ¼¹ö´Â ÀÌÀü ¼¼´ëº¸´Ù ´Ù¾çÇÑ »çÇ×ÀÌ ¾÷±×·¹À̵åµÆ´Ù. ¿ °ü¸® ¹× Àü·Â °ø±ÞÀÌ °ÈµÆÀ¸¸ç, µà¾ó 500W ÀÎÅÚ Á¦¿Â6(8800MT/sÀÇ DDR5 MRDIMM Æ÷ÇÔ) ¶Ç´Â AMD EPYCTM 9005 ½Ã¸®Áî ÇÁ·Î¼¼¼¸¦ Áö¿øÇÑ´Ù.
¶ÇÇÑ, »õ·Ó°Ô ¼³°èµÈ °ø³Ã½Ä 10U Æû ÆÑÅÍ´Â ¿Àüµµ Çìµå·ëÀÌ È®ÀåµÈ ¼¨½Ã¸¦ žÀçÇØ 1000W TDP ºí·¢À£ GPU 8°³¸¦ ¼ö¿ëÇÒ ¼ö ÀÖ´Ù.
ÀÌ ¼¹ö´Â GPU¿Í NIC(¿£ºñµð¾Æ ºí·çÇʵå-3 ½´ÆÛ´Ð ¶Ç´Â ¿£ºñµð¾Æ Ä¿³ØÆ®X-7)°¡ 1´ë1 ºñÀ²·Î ¼³°èµÅ °í¼º´É ÄÄÇ»Æà ȯ°æ¿¡¼ È®À强À» Á¦°øÇÑ´Ù.
¶ÇÇÑ, ¼¹ö´ç 2°³ÀÇ ¿£ºñµð¾Æ ºí·çÇʵå-3 DPU°¡ Æ÷ÇԵŠAI ½ºÅ丮Áö¿ÍÀÇ µ¥ÀÌÅÍ Ã³¸®¸¦ È¿À²ÀûÀ¸·Î °£¼ÒÈÇÑ´Ù.
½´ÆÛ¸¶ÀÌÅ©·Î´Â »õ·Ó°Ô ¹ßÇ¥µÈ ¿£ºñµð¾Æ GB200 NVL4 ½´ÆÛĨ°ú GB200 NVL72 ´ÜÀÏ ·¢ ¿¢»ç½ºÄÉÀÏ ÄÄÇ»Å͸¦ ºñ·ÔÇØ ¸ðµç ¿£ºñµð¾Æ GB200 ±×·¹À̽º ºí·¢À£ ½´ÆÛĨ¿¡ ÃÖÀûÈµÈ ¼¹ö¸¦ Á¦°øÇÑ´Ù.
½´ÆÛ¸¶ÀÌÅ©·ÎÀÇ ¿£ºñµð¾Æ MGX ¼³°è ¶óÀξ÷Àº ¿£ºñµð¾Æ GB200 ±×·¹À̽º ºí·¢À£ NVL4 ½´ÆÛĨÀ» Áö¿øÇÒ ¿¹Á¤ÀÌ´Ù.
ÀÌ ½´ÆÛĨÀº À¶ÇÕÇü HPC¿Í AIÀÇ ¹Ì·¡¸¦ ¿©´Â ÇÙ½É ±â¼ú·Î, NVLink-C2C ±â¼úÀ» ÅëÇØ 2°³ÀÇ ¿£ºñµð¾Æ ±×·¹À̽º CPU¿Í ÅëÇÕµÈ 4°³ÀÇ ºí·¢À£ GPU¸¦ ¿¬°áÇØ Çõ½ÅÀûÀÎ ¼º´ÉÀ» ¹ßÈÖÇÑ´Ù.
¶ÇÇÑ, ½´ÆÛ¸¶ÀÌÅ©·ÎÀÇ ¼ö³Ã½Ä ¿£ºñµð¾Æ MGX ¸ðµâÇü ¼¹ö¿Í ȣȯµÇ¸ç, °úÇÐÀû ÄÄÇ»ÆÃ, ±×·¡ÇÁ ½Å°æ¸Á(GNN) ÇнÀ, Ãß·Ð ¾ÖÇø®ÄÉÀ̼ǿ¡¼ ÀÌÀü ¼¼´ë ´ëºñ ÃÖ´ë 2¹èÀÇ ¼º´ÉÀ» Á¦°øÇÑ´Ù.
½´ÆÛ¸¶ÀÌÅ©·Î ¿£µåÅõ¿£µå ¼ö³Ã½Ä ¼Ö·ç¼ÇÀÌ Å¾ÀçµÈ ¿£ºñµð¾Æ GB200 NVL72 ½´ÆÛŬ·¯½ºÅÍ´Â ½´ÆÛŬ¶ó¿ìµå ÄÄÆ÷Àú(Super Cloud Composer; SCC) ¼ÒÇÁÆ®¿þ¾î¿Í ÇÔ²² ´ÜÀÏ ·¢¿¡¼ ¿¢»ç½ºÄÉÀÏ ½´ÆÛÄÄÇ»Å͸¦ ±¸ÇöÇÑ´Ù.
À̶§ SCC´Â ¼ö³Ã½Ä µ¥ÀÌÅͼ¾Å͸¦ À§ÇÑ ¸ð´ÏÅ͸µ ¹× °ü¸® ±â´ÉÀ» Á¦°øÇÑ´Ù.
5¼¼´ë ¿£ºñµð¾Æ ¿£ºñ¸µÅ© ¹× ¿£ºñ¸µÅ© ½ºÀ§Ä¡·Î ¿¬°áµÈ 72°³ÀÇ ¿£ºñµð¾Æ ºí·¢À£ GPU¿Í 36°³ÀÇ ¿£ºñµð¾Æ ±×·¹À̽º CPU´Â ´ë±Ô¸ð HBM3e ¸Þ¸ð¸® Ç®À» °®Ãá ÇϳªÀÇ °·ÂÇÑ GPUó·³ ÀÛµ¿Çϸç, 130TB/sÀÇ GPU Åë½Å ´ë¿ªÆø°ú ºü¸¥ ¹ÝÀÀ ¼Óµµ¸¦ Áö¿øÇÑ´Ù.
¿£ºñµð¾Æ H200 NVLÀ» »ç¿ëÇÏ´Â ½´ÆÛ¸¶ÀÌÅ©·ÎÀÇ 5U PCIe °¡¼Ó ÄÄÇ»Æà ¼¹ö´Â À¯¿¬ÇÑ ±¸¼ºÀÌ ¿ä±¸µÇ´Â ÀúÀü·Â °ø³Ã½Ä ¿£ÅÍÇÁ¶óÀÌÁî ·¢ ¼³°è¿¡ ÀÌ»óÀûÀ̸ç, ±Ô¸ð¿Í »ó°ü¾øÀÌ ¸¹Àº AI ¹× HPC ¿öÅ©·ÎµåÀÇ °¡¼ÓÀ» Áö¿øÇÑ´Ù.
¿£ºñµð¾Æ ¿£ºñ¸µÅ©·Î ÃÖ´ë 4°³ÀÇ GPU°¡ ¿¬°áµÆÀ¸¸ç, HBM3eÀ» ÅëÇØ ¸Þ¸ð¸® ¿ë·®Àº 1.5¹è, ´ë¿ªÆøÀº 1.2¹è Áõ°¡Çß´Ù.
À̸¦ ÅëÇØ ¿£ºñµð¾Æ H200 NVLÀº ´ë±Ô¸ð ¾ð¾î ¸ðµ¨(LLM)À» ¸î ½Ã°£ ³»·Î ¹Ì¼¼ Á¶Á¤ÇÒ ¼ö ÀÖÀ¸¸ç, ÀÌÀü ¼¼´ë ´ëºñ ÃÖ´ë 1.7¹è ºü¸¥ LLM Ãß·Ð ¼º´ÉÀ» Áö¿øÇÑ´Ù.
¶ÇÇÑ, H200 NVL¿¡´Â AI °³¹ß ¹× ¹èÆ÷¸¦ À§ÇÑ Å¬¶ó¿ìµå ±â¹Ý ¼ÒÇÁÆ®¿þ¾î Ç÷§Æû, ¿£ºñµð¾Æ AI ¿£ÅÍÇÁ¶óÀÌÁî¿¡ ´ëÇÑ 5³â ±¸µ¶±ÇÀÌ Æ÷ÇԵŠÀÖ´Ù.
½´ÆÛ¸¶ÀÌÅ©·ÎÀÇ X14 ¹× H14 5U PCIe °¡¼Ó ÄÄÇ»Æà ¼¹ö´Â ¿£ºñ¸µÅ© ±â¼úÀ» È°¿ëÇØ ÃÖ´ë µÎ °³ÀÇ 4¿þÀÌ ¿£ºñµð¾Æ H200 NVL ½Ã½ºÅÛ, Áï ÃÑ 8°³ÀÇ GPU¸¦ Áö¿øÇÑ´Ù.
À̸¦ ÅëÇØ 4-GPU ¿£ºñ¸µÅ© µµ¸ÞÀδç ÃÖ´ë 564GBÀÇ HBM3e ¸Þ¸ð¸® Ç®°ú 900GB/sÀÇ GPU °£ »óÈ£ ¿¬°á ¼º´ÉÀ» Á¦°øÇÑ´Ù.
»õ·Î¿î PCIe °¡¼Ó ÄÄÇ»Æà ¼¹ö´Â ÃÖ´ë 10°³ÀÇ PCIe GPU¸¦ Áö¿øÇϸç, ÃֽŠÀÎÅÚ Á¦¿Â6 ¶Ç´Â AMD EPYC 9005 ½Ã¸®Áî ÇÁ·Î¼¼¼¸¦ žÀçÇØ HPC ¹× AI ¾ÖÇø®ÄÉÀ̼ǿ¡ À¯¿¬ÇÏ°í ´Ù¾çÇÑ ¿É¼ÇÀ» Á¦°øÇÑ´Ù.
<±èµ¿±â ±âÀÚ>kdk@bikorea.net < ÀúÀÛ±ÇÀÚ © BI KOREA ¹«´ÜÀüÀç ¹× Àç¹èÆ÷±ÝÁö > |