¸Ê¾ËÅ×Å©³î·¯Áö½º(Áö»çÀå ±èÁ¡¹è www.mapr.com, ÀÌÇÏ ¸Ê¾Ë)°¡ ÀÚ»çÀÇ ¹«·á ÇÏµÓ ¿Âµð¸Çµå ±³À° ÇÁ·Î±×·¥¿¡‘¾ÆÆÄÄ¡ ½ºÆÄÅ©(Apache Spark)’ °úÁ¤À» °³¼³Çß´Ù.
¾ÆÆÄÄ¡ ½ºÆÄÅ© °úÁ¤ÀÇ ¾ÆÆÄÄ¡ ½ºÆÄÅ© ¿¡¼¾¼È(Apache Spark Essentials) ÇÁ·Î±×·¥Àº °³¹ßÀÚµéÀÌ ÇÏµÓ È¯°æ¿¡¼ ½ºÆÄÅ© ±â¹ÝÀÇ ¾ÖÇø®ÄÉÀ̼ÇÀ» °³¹ßÇϱâ À§ÇÑ ±âÃÊ °úÁ¤À» Á¦°øÇÑ´Ù.
‘¾ÆÆÄÄ¡ ½ºÆÄÅ© ¿¡¼¾¼È’ ÇÁ·Î±×·¥Àº ºòµ¥ÀÌÅÍ ¾ÖÇø®ÄÉÀÌ¼Ç °³¹ßÀ» À§ÇÑ ¾ÆÆÄÄ¡ ½ºÆÄÅ©ÀÇ ÁÖ¿ä ÀÌÁ¡À» ¼Ò°³ÇÑ´Ù. º»
ÀÌ ÇÁ·Î±×·¥ÀÇ Ã¹ °úÁ¤À¸·Î °³¹ßÀÚ´Â µ¥ÀÌÅ͸¦ ·Îµå ¹× °Ë»çÇϱâ À§ÇØ ½ºÆÄÅ© ÀÎÅÍ·ºÆ¼ºê ½©(Interative Shell)À» »ç¿ëÇÑ´Ù.
¶ÇÇÑ ¼ö°»ýÀÌ È¥ÀÚ ½ºÆÄÅ© ¾ÖÇø®ÄÉÀ̼ÇÀ» °³¹ßÇÏ°í Ãâ½ÃÇÒ ¼ö ÀÖµµ·Ï ´Ù¾çÇÑ ½ºÆÄÅ©¿ë ¹èÆ÷(deployment) ¸ðµå¸¦ Áö¿øÇÑ´Ù.
¼ö°ÀÚ´Â ±âÃÊÀûÀÎ ÇÚÁî¿Â ½Ç½ÀÀ» ÅëÇØ ´Ù¾çÇÑ ½Ã³ª¸®¿À¸¦ °æÇèÇÏ°í °³³äÀ» ½ÀµæÇÒ ¼ö ÀÖ´Ù.
µÎ ¹ø° ¹«·á ½ºÆÄÅ© ÇÁ·Î±×·¥ ¾ÆÆÄÄ¡ ½ºÆÄÅ© ¾ÖÇø®ÄÉÀÌ¼Ç °³¹ß ¹× ¸ð´ÏÅÍ(Build and Monitor Apache Spark Applications)´Â RDDs(Resilient Distributed Datasets) ó¸®, ½ºÆÄÅ© SQL ¹× µ¥ÀÌÅÍÇÁ·¹ÀÓ(DataFrames) È°¿ë, ½ºÆÄÅ© ½ÇÇà ¸ðµ¨ÀÇ ÀÌÇØ µî°ú °ü·ÃµÈ ³»¿ëÀ¸·Î ±¸¼ºµÅ ÀÖ´Ù.
¸Ê¾ËÀÇ ¹«·á ÇÏµÓ ¿Âµð¸Çµå ±³À° ÇÁ·Î±×·¥ÀÇ ¼ö°»ý¿¡°Ô´Â 500´Þ·¯ »ó´çÀÇ ±¸±Û Ŭ¶ó¿ìµå Ç÷§Æû ¼ºñ½º(Google Cloud Platform) ÀÌ¿ë±âȸ°¡ Á¦°øµÈ´Ù.
¼ö°»ýÀº ÀÌ¿Í °°Àº ÇýÅÃÀ» ÅëÇØ º°µµÀÇ ºñ¿ë ¾øÀÌ ±¸±ÛÀÌ Á¦°øÇϴ Ŭ¶ó¿ìµå ÀÎÇÁ¶ó¸¦ È°¿ëÇØ ½ºÆÄÅ© ÄÚ½º ½Ç½À °úÁ¤À» °æÇèÇÒ ¼ö ÀÖ´Ù.
5¸¸¸í ÀÌ»óÀÇ Àü¹®°¡µéÀÌ ÀÌ¹Ì µî·ÏÀ» ¸¶Ä£ ¸Ê¾ËÀÇ ¹«·á ÇÏµÓ ¿Âµð¸Çµå ±³À° ÇÁ·Î±×·¥Àº µ¥ÀÌÅÍ Àü¹®°¡µéÀ» À§ÇÑ Èï¹Ì·Ó°í Á÷°üÀûÀÎ °ÀÇ½Ä ±³À°, ÇÚÁî¿Â ¼¼¼Ç, ½Ç½À ¹× ÄûÁî µî ´Ù¾çÇÑ Ä¿¸®Å§·³À¸·Î ±¸¼ºµÆ´Ù.
¶ÇÇÑ °³¹ßÀÚ, µ¥ÀÌÅÍ ¾Ö³Î¸®½ºÆ®, °ü¸®ÀÚ¸¦ À§ÇÑ °¢°¢ÀÇ ÀÎÁõ ½ÃÇèÀ» Á¦°øÇÏ°í ÀÖ´Ù.
µ¥ÀÌºê ¿¹½ºÆ丣¼¾(Dave Jespersen) ¸Ê¾Ë ¿ùµå¿ÍÀÌµå ¼ºñ½º ºÎ¹® ºÎ»çÀåÀº “Àüü ½ºÆÄÅ© ½ºÅÃÀ» Áö¿øÇÏ´Â ¸Ê¾ËÀº ¸¹Àº °í°´ÀÇ ¿äû¿¡ µû¶ó ½ºÆÄÅ© °úÁ¤À» °³¼³ÇÏ°Ô µÆÀ¸¸ç, ÀÌ ÇÁ·Î±×·¥Àº °³¹ßÀÚ ¹× ¿£ÅÍÇÁ¶óÀÌÁî ¾ÆÅ°ÅØÆ®¿¡°Ô ÇÏµÓ ¹× ½ºÆÄÅ© ºòµ¥ÀÌÅÍ ¾ÖÇø®ÄÉÀ̼ÇÀÇ Æø³ÐÀº ¼±ÅñÇ, ÀÔÁõµÈ ½Å·Ú¼º ¹× ¼º´ÉÀ» Á¦°øÇÑ´Ù”°í ¸»Çß´Ù.
»õ·Î¿î ½ºÆÄÅ© ±³À° °úÁ¤ ¹× ¹«·á ÇÏµÓ ¿Âµð¸Çµå ±³À° ÇÁ·Î±×·¥ÀÇ ½Åû ¹× º¸´Ù ÀÚ¼¼ÇÑ ³»¿ëÀº À¥»çÀÌÆ®(https://www.mapr.com/services/mapr-academy/big-data-hadoop-online-training?cid=abpr)¸¦ ÅëÇØ È®ÀÎ °¡´ÉÇÏ´Ù.
<±èµ¿±â ±âÀÚ>kdk@bikorea.net < ÀúÀÛ±ÇÀÚ © BI KOREA ¹«´ÜÀüÀç ¹× Àç¹èÆ÷±ÝÁö > |