¡°ÔÙ´óµÄÄÑÌ⣬ÎÒÃǶ¼ÓÂÓÚÌôÕ½£¬ÔÚÎÒÃÇAGµçͶÌüÈËÑÛÀûÓбÈÈ˸ü¸ßµÄɽ·å£¬Ã»ÓбȽŸüÔ¶µÄ·£¡¡±
ÕâÊÇãɹ¤¶Ô¡°AGµçͶÌü¾«Éñ¡±µÄÃ÷È·¡£
»ÕÉÌÒøÐÐÓªÒµÖÇÄÜÆÊÎöÔÆƽ̨ÏîĿ˾Àí ãɹ¤
2020Äê6ÔÂ4ÈÕ£¬ÕýÔÚʵÑé»ÕÉÌÒøÐÐÓªÒµÖÇÄÜÆÊÎöÔÆƽ̨µÄÏîÄ¿×éͻȻ½Óµ½¡°Íø´ûʵʱÊý¾Ý¿ÉÊÓ»¯Õ¹ÏÖ¡±µÄÐÂÔöÐèÇ󣬲¢ÇÒ½»¸¶Ê±¼äºÜÊǽôÆÈ£¬¿Í»§ÒªÇóÒ»ÖÜÖ®ÄÚÍê³É¿ª·¢ÊÂÇé¡£
Æäʱ×÷ΪÏîĿ˾ÀíµÄãɹ¤£¬¸ÐӦѹÁ¦É½´ó£º¡°Õâ¸öÐèÇóÉæ¼°µ½¶àÏîÖØ´óÊÖÒÕ£¬ÈçOGG¡¢kafka¡¢StreamµÈ£¬ËäÈ»ÎÒÃÇÏîÄ¿×é¶ÔÕâЩÊÖÒÕµÄÔËÓÃÒÑÓи»ºñµÄÂÄÀú£¬µ«ÒªÏëÔÚÕâô¶ÌµÄʱ¼äÄÚÈÚ»áÒâ»á£¬ÊµÏÖÖØ´óµÄÓªÒµÐèÇó£¬ÌôÕ½ÕվɺܴóµÄ¡£¡±
²»Ä«Êتϰ¡¢ÓÂÓÚÁ¢ÒìÊÇAGµçͶÌü¿Æ¼¼ÔÚÐÐÒµÀïµÄ±êÇ©¡£Õâ´ÎÏîÄ¿½ÓÄÉȫеÄʵÏÖÒªÁ죬ʱ¼ä½ôʹÃüÖØ£¬µ«Öª×ã¿Í»§ÐèÇóÊǵÚÒ»ÒªÎñ£¡ãɹ¤Ñ¸ËÙÕÙ¼¯ÏîÄ¿³ÉÔ±¿ª»á£¬ÌÖÂÛÐèÇóÂäµØµÄ¿ÉÐÐÐԼƻ®¡£ÏîÄ¿×éÔÍýÏëͨ¹ýstreamjobʵÏÖʵʱָ±êʵʱÅÌË㣬µ«ÓÉÓÚÐз½stream΢ÅúЧÀÍÆ÷δ°²ÅÅ£¬Ö»ÄܸÄÓÃsmartbiǰ̨ҳÃæʵÏÖ¡£¾ÓɶàÂÖÆÀ¹ÀºÍÆÊÎöºó£¬ÕÅ×ܽ¨Òé½ÓÄÉOGG¡¢kafka¡¢Stream¡¢inceptor¡¢smartbiµÈ×é¼þºÍÊÖÒÕ¡£
´óÆ«Ïò¶¨ÁË£¬½ÓÏÂÀ´¾ÍÊÇÔõÑù¿ÐÏÂÕâ¿é¡°Ó²¹ÇÍ·¡±£¡
Ö»¹Ü¸÷·½¶¼ÒÑе÷×ÊÔ´¶ÔÕâ¸öÏîÄ¿¾ÙÐÐÖ§³Ö£¬µ«ãɹ¤Ã÷È·Õû¸öÏîÄ¿¿ª·¢×îÖÕÕվɵÿ¿ËûÃÇ×Ô¼º¹¥¿ËÒªº¦ÄÑÌâµã¡£
¡°ÄÇʱ¼ä¾ÍÊÇÒ»¸öÂÝÐýÍƽøµÄÀú³Ì£¬¸÷È˶¼Äóö´ó²¿·Ö¾«Éñ¿à˼ڤÏëÖظ´ÍÆÑÝ¡£Óöµ½ÎÊÌ⣬°Ù˼²»µÃÆä½âʱ£¬ÎÒÃǾÍһֱʵÑé»òÕßÌÖ½Ìר¼Ò£¬ÓÐÁËÍ»ÆÆ£¬ÎÒÃǾ³£Ð˷ܵò»¿É×ÔÒÑ£¬Á¬ºô¡®Æ¯ÁÁ¡¯£¡¡±
ãɹ¤ÐÎÈÝÕâ¶ÎÄÑÍüµÄÂÄÀúʱ£¬ÓÃÁËÒ»¸ö´Ê¡ª¡ª²»·ÅÆú¡£
ΪÁ˸ÏÏîÄ¿½ø¶È£¬ÏîÄ¿×é³ÉÔ±ÄÇʱÿÍí¶¼¼Ó°àµ½10µãÒÔºó¡£ãɹ¤¼ÒÀëÉÏ°àËùÔÚ½ÏÔ¶£¬ÒòÒßÇéÓ°ÏìÆäʱ²»¿É³Ë×ø¹«½»£¬Ö»ÄÜ»¨ÉÏ4¸öСʱÆïµçÆ¿³µÍù·µ¡£ÌìÌì×ß³ö°ì¹«´óÂ¥£¬¿´×ÅÒõÉɵÄÌì¿ÕºÍµãµãÐǹ⣬ãɹ¤ÎÞÊý´ÎÔÚÐÄÀï¶Ô×Ô¼ºËµ¡°ÔÙ¼á³Öһϣ¡¡±¡£
ÉíÌåµÄÆ£ÀͺÍÄÔÁ¦µÄÏûºÄÕÕ¾ÉÆä´Î£¬×îÈÃãɹ¤¸ÐÓ¦ÐÄÌÛµÄÊÇÿ´Î¼Ó°àʱ½Óµ½º¢×ӵĵ绰¡£ÊÖ»úÄÇÍ·£¬º¢×ÓÒ»ÉùÉùµØ½Ð×Å£º¡°°Ö°Ö£¬°Ö°Ö£¬Äã¿ì»Ø¼Ò£¬ÎÒÏëÄãÁË¡±£¬ÍùÍùÕâʱ¼ä£¬ËûµÄÑÛÀᶼ»áËæ×ÅÇéÐ÷µÄ¾öµÌ¶ø²»ÊÜ¿ØÖƵØÁ÷ÏÂÀ´¡£
¡°Õâ¸öʱ¼äÐÄÀïÕæÄÑÊÜ°¡£¡ÕæµÄºÜÄÑȥƽºâÊÂÇéÓëÉúÑÄ£¬µ«ÎÒÃÇÿСÎÒ˽¼Ò²»¶¼ÊÇÒ»±ßÁ÷ÀáÒ»±ßÍçÇ¿£¬Ò»±ßÒ¹ÍíÍ´¿ÞÒ»±ßÇåÔç¸Ï·Â𣿡±ÉíÐĵÄË«ÖØѹÁ¦Ã»Óл÷¿åãɹ¤ºÍÕû¸öÏîÄ¿×éµÄ¶·Ö¼Òë׼ʱ½»¸¶Ê¹ÃüµÄ¿ÌÒ⣬ËùÓÐÈ˶¼×¨×¢µØͶÈëµ½Ö÷ÒªµÄÏîÄ¿¿ª·¢ÖС£
ÏîÄ¿×é³ÉÔ±ÊÂÇé¼ôÓ°
Ô½Æð¾¢Ô½ÐÒÔË£¬Ò»¸ö¸öÄѵã½ÓÁ¬±»¹¥¿Ë£¬¸÷È˶¼ºÜÐÀο×Ô¼ºµÄÆð¾¢Ã»Óб»¹¼¸º£¬ÕâÒ»Çж¼ÖµÁË£¡
2020Äê7ÔÂ9ÈÕ£¬»ÕÉÌÒøÐÐÓªÒµÖÇÄÜÆÊÎöÔÆƽ̨ÏîÄ¿×éսʤÖÖÖÖÄÑÌ⣬ÖÕÓÚʵÏÖ¡°Íø´ûʵʱÊý¾ÝÕ¹ÏÖ¡±ÐèÇóͶ²ú¡£Õâ¸öÏîÄ¿ÖúÁ¦»ÕÉÌÒøÐÐÊ×´ÎʵÏÖʵʱ´óÊý¾Ý¿ÉÊÓ»¯Õ¹ÏÖ£¬²¢±»Ïà¹ØÏòµ¼µ¥¶ÀÃüÃûΪ¡°ÌìÑÛʵʱƽ̨¡±£¬¿ÉνÒâÒåÖØ´ó¡£¹ØÓÚÏîÄ¿×é¹¥¼á¿ËÄÑ¡¢´Ó²»·ÅÆúµÄ¾«Éñ£¬»ÕÉÌÒøÐÐÒ²¸øÓèÁ˺ܸߵÄÆÀ¼Û¡£
¾ÓÉÕâ´ÎÌôÕ½£¬ãɹ¤¶ÔAGµçͶÌü¾«ÉñµÄÃ÷È·¸üÉîÁËÒ»²½£º¡°ÎÒÃÇ×öʲ»ÅÂÌôÕ½£¬ÔÚÄÑÌâÑÛÇ°¸üÄÜÒý·¢AGµçͶÌüÁ¢ÒìÁ¦£¬ÕâÖÖ¾«ÉñÊÇÎÒÃÇÿ¸öAGµçͶÌüÈË×îÃû¹óµÄ²Æ²ú£¬Ò²ÊÇÎÒÃÇÄÜÅ¡³ÉÒ»¹ÉÉþÃæÁÙÄÑÌâµÄʵÁ¦ÈªÔ´¡£¡±
ÖµµÃÇìÐÒ£¬Ð§¹ûÔÆÔÆÍêÉÆ£¬µ«ÎÒÃǸüÓ¦¸ÃÃú¿ÌµÄÊÇÕâ¸öÀú³Ì£¬ÄÚÀï½½ÖþÁËÌ«¶àAGµçͶÌüÈ˵ÄÐÄѪ¡¢Öǻۺͺ¹Ë®£¬¼¸¶à´ÎÏÝÈëÀ§¾Ö¡¢¼¸¶à´Î°Ùתǧ»Ø¡¢¼¸¶à¸ö²»ÃßÒ¹¡¡