ÆóÒµ¼¶ÏîÄ¿ÇéÐδʵ¼ù
ÔÚ×ÏÌÙׯ԰Sparkʵ¼ùÊÓÆµ¿ªÆª²¿·Ö£¬¹¤³ÌʦÑÝʾÁË»ùÓÚÔÆÔÉú¼Ü¹¹µÄ¼¯Èº°²Åżƻ®¡£ÊÓÆµÏêϸչʾÁËÔõÑùͨ¹ýKubernetes±àÅÅʵÏÖµ¯ÐÔ×ÊÔ´µ÷Àí£¬Õâ¶Ô´¦Öóͷ£º£Á¿µçÉÌÉúÒâÈÕÖ¾¾ßÓÐÒªº¦×÷Óá£ÖµµÃ×¢ÖØµÄÊÇ£¬ÆóÒµ¼¶°²ÅűØÐè¹Ø×¢ÍøÂçÍØÆËÓÅ»¯£¬ÓÈÆäÊÇÔÚ´¦Öóͷ£ÊµÊ±Êý¾ÝÁ÷ʱ£¬¹ýʧµÄÍøÂçÉèÖûᵼÖÂRDD£¨µ¯ÐÔÂþÑÜʽÊý¾Ý¼¯£©´«ÊäЧÂʽµµÍ50%ÒÔÉÏ¡£
½¹µãÅÌËãÄ£×ÓʵÏÖÆÊÎö
ÊÓÆµÖÐÖØµãÆÊÎöÁËDataFrame APIÓëSpark SQLµÄÁªºÏÓ¦ÓÃģʽ¡£Í¨¹ýÂÃÓÎÐÐÒµÓû§»Ïñ¹¹½¨°¸Àý£¬ÑÝʾÁËÔõÑù½«ÔʼÈÕ־ת»¯Îª½á¹¹»¯Êý¾Ý×ʲú¡£ÊÖÒÕÖ°Ô±ÐèÒªÌØÊâ×¢ÖØÄÚ´æÖÎÀíÕ½ÂÔ£¬µ±´¦Öóͷ£PB¼¶Éç½»ÍøÂçÊý¾Ýʱ£¬²»¶ÔÀíµÄÐòÁл¯·½·¨»áʹʹÃüÖ´ÐÐʱ¼ä³É±¶ÔöÌí¡£ÔõÑùÑ¡ÔñºÏÊʵÄshuffleÕ½ÂÔ£¿ÕâÐèҪƾ֤Êý¾ÝÌØÕ÷¶¯Ì¬µ÷½â·ÖÇøËã·¨¡£
ʵʱÊý¾Ý´¦Öóͷ£¼Ü¹¹ÓÅ»¯
Õë¶ÔÎïÁªÍøÊµÊ±¼à¿Ø³¡¾°£¬½ÌѧÊÓÆµ±ÈÕÕÁËStructured StreamingÓë¾É°æDStreamµÄЧÄܲî±ð¡£ÔÚ³µÁªÍø³¡¾°µÄѹÁ¦²âÊÔÖУ¬ÓÅ»¯ºóµÄ΢Åú´Î´¦Öóͷ£½«ÑÓ³Ù½µµÍÖÁ300ºÁÃëÒÔÄÚ¡£ÕâÀïÐèҪСÐÄÊý¾ÝÇãбÎÊÌ⣬µ±´«¸ÐÆ÷ÂþÑܲ»¾ùʱ£¬½¨Òé½ÓÄÉˮӡ»úÖÆÅäºÏ״̬´æ´¢Õ½ÂÔÀ´Æ½ºâ¸÷½Úµã¸ºÔØ¡£
ÆóÒµ¼¶Çå¾²¼Ó¹Ì¼Æ»®
½ðÈÚ¼¶Ó¦ÓõÄÌØÊâÐèÇ󲿷֣¬ÊÓÆµÑÝʾÁËKerberosÈÏÖ¤¼¯³ÉÓëHDFS¼ÓÃÜ´æ´¢¼Æ»®¡£ÌØÊâÊÇÔÚ´¦Öóͷ£Óû§Òþ˽Êý¾Ýʱ£¬±ØÐèÆôÓö¯Ì¬Êý¾ÝÑÚÂ빦Ч¡£¿ª·¢ÕßÔÚ¾ÙÐлá¼û¿ØÖÆÉèÖÃʱ£¬Òª×¢ÖØ×èÖ¹ACL£¨»á¼û¿ØÖÆÁÐ±í£©µÄÌ«¹ýÊÚȨ£¬Õâ¿ÉÄÜÒý·¢ÑÏÖØµÄÊý¾Ýй¶Σº¦¡£
µä·¶¹ýʧ³¡¾°Éî¶ÈÆÊÎö
½ÌѧÊÓÆµÓÃ20·ÖÖÓרÃÅÆÊÎöÁËÊ®´ó³£¼û¹ýʧģʽ£¬ÆäÖÐJVMÄÚ´æÒç³öÎÊÌâ×îΪÖÂÃü¡£ÔÚijÎïÁ÷ÆóÒµµÄʵ¼ùÖУ¬¹ýʧÉèÖÃexecutor¶ÑÄÚ´æµ¼Ö¼¯ÈºÕûÌåå´»ú¡£ÊÓÆµ¸ø³öÁËGC£¨À¬»ø½ÓÄÉ£©µ÷ÓŹ«Ê½£ºÄÚ´æ·ÖÅÉ=·ÖÇøÊý¡Á1.5GB¡£Í¬Ê±Ç¿µ÷Òª°´ÆÚ¼à¿ØstorageÄÚ´æÕ¼±È£¬±ÜÃ⻺´æÊý¾ÝÕ¼Óùý¶àÅÌËã×ÊÔ´¡£
»úеѧϰģ×Ó°²ÅÅʵ¼ù
ÔÚÍÆ¼öϵͳ°¸ÀýÖУ¬¹¤³ÌʦÑÝʾÁËML PipelineÓëPySparkµÄÕûºÏÓ¦Óá£Õë¶Ô¹ã¸æµã»÷ÂÊÕ¹ÍûʹÃü£¬ÊÓÆµ½¨Òé½ÓÄÉÌØÕ÷½»Ö¯ÊÖÒÕÌáÉýÄ£×ÓAUCÖµ0.15¸öµã¡£µ«ÐèСÐÄÄ£×ÓÆ¯ÒÆÎÊÌ⣬±ØÐèÉèÖÃ×Ô¶¯»¯Ä£×ÓÖØÑµÁ·»úÖÆ£¬ÕâÔÚµçÉÌ´ó´Ùʱ´úÓÈΪÖ÷Òª¡£Õ¹Ê¾ÁËÔõÑùͨ¹ýAlluxio¼ÓËÙÌØÕ÷¶ÁÈ¡£¬Ê¹Åú´¦Öóͷ£Ê¹ÃüºÄʱïÔÌ60%¡£
×ÏÌÙׯ԰Sparkʵ¼ùÊÓÆµÏµÍ³ÐÔµØÕ¹Ê¾ÁËÆóÒµ¼¶Ó¦ÓõÄÊÖÒÕʵÏÖ·¾¶£¬´Ó»ù´¡ÇéÐÎÉèÖõ½¸ß½×Ä£×Ó°²ÅŲã²ãµÝ½ø¡£¿ª·¢ÕßÓ¦ÖØµã¹Ø×¢ÊÓÆµÖÐÖØ¸´Ç¿µ÷µÄ¼¯Èºµ÷ÓŹæÔòºÍÊý¾ÝÇå¾²¹æ·¶£¬Í¬Ê±Ð¡ÐÄÒþ²ØµÄÐÔÄÜÏÝÚå¡£ÕÆÎÕÕâЩ½¹µãÒªµã£¬²Å»ªÕæÕýʩչSpark¿ò¼ÜÔÚÆóÒµÊý×Ö»¯×ªÐÍÖеÄÕ½ÂÔ¼ÛÖµ¡£
Ò»¡¢Ãâ·ÑCRMϵͳµÄ½¹µã¼ÛÖµÓëÑ¡Ôñ±ê×¼
¿Í»§¹ØÏµÖÎÀíϵͳ£¨CRM£©×÷ΪÏÖ´úÆóÒµµÄÊý×ÖÖÐÊ࣬ÆäÃâ·Ñ°æ±¾ÔÚ¹¦Ð§ÍêÕûÐÔ·½ÃæÒÑÄÜÖª×ãÖÐСÆóÒµµÄ½¹µãÐèÇó¡£ÒÔSalesforce EssentialsΪ´ú±íµÄÍâÑóƽ̨Ìṩ3Óû§Ãâ·ÑÌײͣ¬Ö§³ÖÁªÏµÈËÖÎÀí¡¢ÏúÊÛÁ÷³Ì¸ú×ٵȻù´¡¹¦Ð§¡£¶øº£ÄÚ³§ÉÌÈç¼òµÀÔÆCRM£¬Ôò¸ü×¢ÖØÍâµØ»¯Ð§ÀÍ£¬ÄÚÖÃÌõÔ¼ÉóÅú¡¢¶©µ¥ÖÎÀíµÈÌØÉ«Ä£¿é¡£Ñ¡ÔñʱÐèÖØµã¿¼²ìÊý¾Ý´æ´¢ÈÝÁ¿¡¢Òƶ¯¶ËÊÊÅäÐÔÒÔ¼°µÚÈý·½Ó¦Óü¯³ÉÄÜÁ¦£¬ÌØÊâÊÇAPI½Ó¿ÚµÄ¿ª·Åˮƽֱ½ÓÓ°ÏìºóÐøÏµÍ³À©Õ¹ÐÔ¡£
¶þ¡¢¹ú¼ÊÎå´óÃâ·ÑCRMƽ̨ºáÏò±ÈÕÕ
HubSpot CRMÒÔÎÞÏÞÖÆÓû§ÊýÖ§³ÖÖø³Æ£¬ÆäÖ±¹ÛµÄÏúÊ۹ܵÀ¿ÉÊÓ»¯¹¤¾ßÓÈÆäÊʺÏÊ×´´ÍŶӡ£Zoho CRMÃâ·Ñ°æµÄ×î´óÁÁµãÔÚÓÚ°üÀ¨10¸ö×Ô¶¯»¯ÊÂÇéÁ÷³ÌÉèÖÃȨÏÞ£¬Õâ¶ÔÏ£Íû½¨Éè±ê×¼»¯ÏúÊÛÁ÷³ÌµÄÆóÒµ¼«¾ßÎüÒýÁ¦¡£ÖµµÃ¹Ø×¢µÄÊÇ£¬Bitrix24²»µ«Ìṩ¿Í»§ÖÎÀí¹¦Ð§£¬»¹ÕûºÏÁËÐͬ°ì¹«Ì×¼þ£¬ÕâÖÖ"All-in-One"µÄÉè¼ÆÔõÑùƽºâ¹¦Ð§Éî¶ÈÓëÒ×ÓÃÐÔ£¿FreshsalesºÍSuiteCRM»®·ÖÔÚAIÏúÊÛÕ¹ÍûÓ뿪Դ×Ô½ç˵·½ÃæÕ¹ÏÖ³öÆæÒìÓÅÊÆ£¬ÆóÒµ¿Éƾ֤ÊÖÒÕʵÁ¦¾ÙÐÐÆ¥ÅäÑ¡Ôñ¡£
Èý¡¢º£ÄÚÁìÏȵÄÃâ·ÑCRM½â¾ö¼Æ»®ÆÊÎö
°¢ÀïÔÆCRMÒÀÍÐÉú̬ÓÅÊÆ£¬ÊµÏÖÓëÌÔ±¦Âô¼ÒÖÐÐĵÄÊý¾ÝÎÞ·ì¶Ô½Ó£¬ÌØÊâÊʺϵçÉÌÆóÒµ¡£·×ÏíÏú¿ÍÃâ·Ñ°æÔÚÏúÊÛÐÐΪÖÎÀí·½ÃæÌåÏÖÍ»³ö£¬ÄÚÖõÄGPSÍâÇÚ´ò¿¨¹¦Ð§ÓÐÓýâ¾öÍŶÓÖÎÀíÍ´µã¡£¶øÆóҵ΢ÐÅ×Ô´øµÄ¿Í»§ÁªÏµ¹¦Ð§£¬Ëä·Ç¹Å°åCRMϵͳ£¬µ«ÆäÓë΢ÐÅÉú̬µÄÉî¶ÈÈںϴøÀ´ÁËÆæÒìµÄÉç½»»¯¿Í»§ÖÎÀíÌåÑé¡£¹ØÓÚÐèÒªÉî¶È¶¨ÖƵÄÖÐСÆóÒµ£¬Îò¿ÕCRMµÄ¿ªÔ´ÌØÕ÷ÔÊÐí×ÔÖ÷ÐÞ¸Äϵͳ´úÂ룬ÕâÖÖÎÞаÐÔÊÇ·ñÖµµÃͶÈëÊÖÒÕ±¾Ç®£¿
ËÄ¡¢Ãâ·Ñ°æ¹¦Ð§ÏÞÖÆÓëÉý¼¶Õ½ÂÔ
´ó¶¼Ãâ·ÑCRMÍøÕ¾Í¨¹ý¶ÔÓû§ÊýÄ¿¡¢´æ´¢¿Õ¼ä»ò¸ß¼¶¹¦Ð§µÄÏÞÖÆÀ´Ö¸µ¼¸¶·ÑÉý¼¶¡£SalesforceÃâ·Ñ°æ½ö°üÀ¨»ù´¡±¨±í¹¦Ð§£¬¶ø½ø½×µÄÊý¾ÝÆÊÎöÄ£¿éÐèÒª¶©Ôĸ¶·ÑÌײ͡£ÏÖʵ²Ù×÷ÖУ¬ÆóÒµ¿É½ÓÄÉ"»ìÏý°²ÅÅ"Õ½ÂÔ£º½¹µãÍŶÓʹÓÃÃâ·Ñ°æ±¾£¬ÎªÖÎÀí²ãµ¥¶À¹ºÖø¶·ÑÕ˺ŻñÈ¡BIÉÌÒµÖÇÄÜÆÊÎöµÈ¸ß¼¶¹¦Ð§¡£Í¬Ê±Òª×¢ÖØÃâ·ÑЧÀÍÏÞÆÚ£¬²¿·Öƽ̨ÈçZohoµÄÃâ·ÑÌײÍÊôÓÚÓÀÊÀÃâ·Ñ£¬¶øHubSpotµÈÔòÉ趨Á˹¦Ð§Ê¹ÓÃʱÏÞ¡£
Îå¡¢ÐÐÒµ³¡¾°»¯Ó¦ÓÃʵ¼ù°¸Àý
ij¿ç¾³µçÉ̹«Ë¾Í¨¹ýHubSpot CRM½¨Éè¶àÓïÑÔ¿Í»§Êý¾Ý¿â£¬Ê¹ÓÃÓʼþ×Ô¶¯»¯¹¦Ð§½«Ñ¯ÅÌת»¯ÂÊÌáÉý27%¡£º£ÄÚij½ÌÓý»ú¹¹Ê¹ÓüòµÀÔÆ´î½¨ÕÐÉúÖÎÀíϵͳ£¬ÊµÏÖ´ÓÏßË÷»ñÈ¡µ½¿Î³Ì½»¸¶µÄÈ«Á÷³ÌÊý×Ö»¯¡£ÕâЩ°¸ÀýÕ¹ÏÖµÄÒªº¦ÀÖ³ÉÒªËØÊÇʲô£¿Ö÷ÒªÔÚÓÚǰÆÚ׼ȷµÄÁ÷³ÌÊáÀíºÍϵͳ¹¦Ð§ÉèÖõľ«×¼Æ¥Å䣬½ÌÓýÅàѵÐÐÒµÌØÊâÐèÒªÊÔÌý¿ÎÔ¤Ô¼ºÍ¿Î³ÌÆÀ¼ÛÖÎÀíÄ£¿éµÄÖ§³Ö¡£
Ñ¡ÔñºÏÊʵÄÃâ·ÑCRMÍøÕ¾ÐèÒª×ۺϿ¼Á¿ÆóÒµËù´¦Éú³¤½×¶ÎºÍÊý×Ö»¯»ù´¡¡£¹ú¼Êƽ̨ÔÚϵͳ³ÉÊì¶È·½ÃæÁìÏÈ£¬¶øº£ÄÚ½â¾ö¼Æ»®ÔÚ±¾ÍÁÊÊÅäÐÔÉϸüʤһ³ï¡£½¨ÒéÆóÒµ´Ó10ÈËÒÔÏÂÍŶÓ×îÏÈÊÔÓã¬ÖصãÑéÖ¤¿Í»§ÐÅÏ¢¼¯ÖÐÖÎÀí¡¢ÏúÊÛ©¶·¿ÉÊÓ»¯ºÍÍŶÓÐ×÷ЧÂÊÕâÈý¸ö½¹µã¼ÛÖµµã£¬Æ¾Ö¤ÏÖʵʹÓ÷´ÏìÖð²½¹¹½¨ÍêÕûµÄ¿Í»§ÖÎÀíϵͳ¡£