ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄÔËÓª¼Ü¹¹ÆÊÎö
ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄµ×²ã¼Ü¹¹½ÓÄÉÂþÑÜÊ½ÔÆÅÌËãÊÖÒÕ£¬Í¨¹ý¹¹½¨×ÊÔ´³Ø»¯ÖÎÀíϵͳ£¬ÊµÏÖÁËÈÕ¾ù200Íò´ÎµÄЧÀÍÇëÇó´¦Öóͷ£ÄÜÁ¦¡£Æ½Ì¨Ö÷Òª°üÀ¨Èý´ó½¹µãÄ£¿é£º×Ô¶¯»¯ÅÀ³æÊý¾ÝÊÕÂÞϵͳ¡¢»ùÓÚÓïÒåʶ±ðµÄÖÇÄÜ·ÖÀàÒýÇæ¡¢¶àÖÕ¶Ëͬ²½µÄ½»»¥½çÃæ¡£ÕâÖÖÊÖÒսṹÔõÑù°ü¹ÜÓû§¿ìËÙ»ñÈ¡¾«×¼×ÊѶ£¿Òªº¦ÔÚÓÚÆä×ÔÖ÷Ñз¢µÄÓïÒåÆÊÎöËã·¨£¬Äܹ»×¼È·Ê¶±ðÓû§ËÑË÷Òâͼ²¢Æ¥ÅäÉî¶È¹ØÁª×ÊÔ´¡£
±ÊÖ±ÁìÓòÊý¾ÝÊÕÂÞϵͳÆÊÎö
ƽ̨µÄÊý¾ÝÊÕÂÞÍøÂçÁýÕÖ43¸öÐÐÒµÁìÓò£¬°²ÅÅÁ˰üÀ¨¶¯Ì¬ÍøÒ³×¥È¡£¨dynamic web scraping£©ºÍAPI½Ó¿Ú¶Ô½ÓµÄË«ÖØÊÕÂÞ»úÖÆ¡£Ïà½ÏÓÚ¹Å°å»ÆÒ³ÍøÕ¾£¬ÌÇÐÄ»ÆÒ³ÍøÕ¾ÌØÊâÉèÖÃÁËʵʱÐÔÑé֤ģ¿é£¬¶ÔËùÓÐÈëפ×ÊÔ´µÄÓÐÓÃÐÔ¾ÙÐзÖÖÓ¼¶¼à¿Ø¡£Óû§ÔÚËÑË÷ÉÌÎñЧÀÍ×ÊԴʱ£¬ÏµÍ³»áÓÅÏÈչʾ¾ÓÉÈýÖØÑéÖ¤£¨¹¤É̹ҺÅÑéÖ¤¡¢Ð§ÀÍÆÀ¼ÛÑéÖ¤¡¢ÉúÒâÊý¾ÝÑéÖ¤£©µÄÓÅÖÊÉ̼ÒÐÅÏ¢¡£
ÖÇÄÜÍÆËÍËã·¨µÄÊÂÇé»úÖÆ
Õë¶ÔÓû§µÄ¸öÐÔ»¯ÐèÇó£¬ÌÇÐÄ»ÆÒ³ÍøÕ¾¿ª·¢ÁËÐÐΪ¹ì¼£ÆÊÎöϵͳ¡£¸Ãϵͳͨ¹ý¼ÍÈÎÃü»§µÄµã»÷·¾¶¡¢Í£Áôʱ³¤ºÍ¼ìË÷Òªº¦´Ê£¬½¨ÉèÁ˰üÀ¨136¸öά¶ÈµÄÓû§»ÏñÄ£×Ó¡£µ±Óû§ËÑË÷"Ö´·¨×ÉѯЧÀÍ"ʱ£¬Æ½Ì¨²»µ«ÏÔʾ»ù±¾Ãû¼£¬»¹»áÖÇÄÜÍÆË͹ØÁªµÄÎÄÊéÄ£°åÏÂÔØ¡¢ÔÚÏß×ÉѯÈë¿ÚµÈÑÓÉìЧÀÍ¡£ÕâÖÖ¾«×¼Æ¥ÅäÔõÑùÌáÉýÓû§Ð§ÂÊ£¿Êý¾ÝÏÔʾʹÓÃÖÇÄÜÍÆ¼ö¹¦Ð§µÄÓû§ÉúÒâת»¯ÂÊÌáÉý57%¡£
½»»¥ÌåÑéµÄÓÅ»¯Â·¾¶
ÔÚ½çÃæÉè¼Æ·½Ã棬ÌÇÐÄ»ÆÒ³ÍøÕ¾½ÓÄɽ¥½øÊ½ÍøÒ³Ó¦Óã¨PWA£©ÊÖÒÕ£¬È·±£¸÷ÖÕ¶Ë×°±¸µÄÒ»Ö²Ù×÷ÌåÑé¡£ËÑË÷¹¦Ð§ÉèÖÃÁËÓïÒôÊäÈ롢ͼƬʶ±ðºÍÄ£ºýÅÌÎÊÈýÖÖ½»»¥Ä£Ê½£¬ÌØÊâÊÇÁ¢ÒìµÄÊÓ¾õËÑË÷¹¦Ð§£¬Ö§³ÖÓû§Ö±½ÓÅÄÉãÓªÒµÖ´ÕÕ»ñÈ¡ÆóÒµÏêÇé¡£Õë¶ÔÍíÄêÓû§ÈºÌå£¬Æ½Ì¨ÌØÊ⿪·¢ÁËÓïÒôµ¼º½ÏµÍ³ºÍ·Å´ó¾µ¹¤¾ß£¬Ê¹Ð§ÀÍÁýÕÖ¸üÆÕ±éÈËȺ¡£
ÉÌÒµ¼ÛÖµÓëÉú³¤Ô¶¾°
ÌÇÐÄ»ÆÒ³ÍøÕ¾Í¨¹ý¹¹½¨B¶Ë£¨ÆóÒµ¶Ë£©ÓëC¶Ë£¨Óû§¶Ë£©µÄË«Ïò¸³ÄÜģʽ£¬ÐγÉÁËÆæÒìµÄÉÌÒµÉú̬ϵͳ¡£ÆóÒµ»áÔ±¿ÉÏíÊܰüÀ¨Êý¾ÝÆÊÎö±¨¸æ¡¢¾«×¼¿Í»§ÍÆËÍÔÚÄÚµÄÔöֵЧÀÍ£¬¶øÍ¨Ë×Óû§ÔòÄÜÃâ·Ñ»ñÈ¡¾ÓÉÑÏ¿áɸѡµÄÓÅÖÊ×ÊÔ´¡£Ëæ×ÅÆ½Ì¨½ÓÈëÇø¿éÁ´´æÖ¤ÊÖÒÕ£¬ËùÓÐÉúÒâ¼Í¼ºÍЧÀÍÆÀ¼Û¶¼½«ÊµÏÖ²»¿É¸Ä¶¯´æÖü£¬Õ⽫ÔõÑùÔöÇ¿Óû§ÐÅÈζȣ¿×îÐÂÊý¾ÝÏÔʾƽ̨Óû§Áô´æÂÊÒÑ´ï82%¡£
ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄÁ¢ÒìÉú³¤Ä£Ê½£¬ÎªÐÐÒµ×ÊÔ´ÕûºÏЧÀÍÊ÷Á¢ÁËȫбê¸Ë¡£Í¨¹ýÊÖÒÕÁ¢ÒìÓëЧÀÍÓÅ»¯µÄË«ÖØÇý¶¯£¬¸Ãƽ̨²»µ«½â¾öÁ˹ŰåÐÅÏ¢¼ìË÷ÖеĵÍЧÎÊÌ⣬¸ü¹¹½¨ÁËÏßÉÏÏßÏÂÈںϵÄÊý×Ö»¯Ð§ÀÍÉú̬¡£Î´À´Ëæ×ÅÈ˹¤ÖÇÄÜÊÖÒÕµÄÒ»Á¬µü´ú£¬Æ½Ì¨½«ÔÚЧÀ;«×¼¶ÈºÍ³¡¾°ÁýÕÖά¶ÈʵÏÖ¸ü´óÍ»ÆÆ£¬Ò»Á¬Àο¿ÆäÔÚרҵÃÅ»§ÁìÓòµÄÁìÏÈְλ¡£ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄÔËÓª¼Ü¹¹ÆÊÎö
ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄµ×²ã¼Ü¹¹½ÓÄÉÂþÑÜÊ½ÔÆÅÌËãÊÖÒÕ£¬Í¨¹ý¹¹½¨×ÊÔ´³Ø»¯ÖÎÀíϵͳ£¬ÊµÏÖÁËÈÕ¾ù200Íò´ÎµÄЧÀÍÇëÇó´¦Öóͷ£ÄÜÁ¦¡£Æ½Ì¨Ö÷Òª°üÀ¨Èý´ó½¹µãÄ£¿é£º×Ô¶¯»¯ÅÀ³æÊý¾ÝÊÕÂÞϵͳ¡¢»ùÓÚÓïÒåʶ±ðµÄÖÇÄÜ·ÖÀàÒýÇæ¡¢¶àÖÕ¶Ëͬ²½µÄ½»»¥½çÃæ¡£ÕâÖÖÊÖÒսṹÔõÑù°ü¹ÜÓû§¿ìËÙ»ñÈ¡¾«×¼×ÊѶ£¿Òªº¦ÔÚÓÚÆä×ÔÖ÷Ñз¢µÄÓïÒåÆÊÎöËã·¨£¬Äܹ»×¼È·Ê¶±ðÓû§ËÑË÷Òâͼ²¢Æ¥ÅäÉî¶È¹ØÁª×ÊÔ´¡£
±ÊÖ±ÁìÓòÊý¾ÝÊÕÂÞϵͳÆÊÎö
ƽ̨µÄÊý¾ÝÊÕÂÞÍøÂçÁýÕÖ43¸öÐÐÒµÁìÓò£¬°²ÅÅÁ˰üÀ¨¶¯Ì¬ÍøÒ³×¥È¡£¨dynamic web scraping£©ºÍAPI½Ó¿Ú¶Ô½ÓµÄË«ÖØÊÕÂÞ»úÖÆ¡£Ïà½ÏÓÚ¹Å°å»ÆÒ³ÍøÕ¾£¬ÌÇÐÄ»ÆÒ³ÍøÕ¾ÌØÊâÉèÖÃÁËʵʱÐÔÑé֤ģ¿é£¬¶ÔËùÓÐÈëפ×ÊÔ´µÄÓÐÓÃÐÔ¾ÙÐзÖÖÓ¼¶¼à¿Ø¡£Óû§ÔÚËÑË÷ÉÌÎñЧÀÍ×ÊԴʱ£¬ÏµÍ³»áÓÅÏÈչʾ¾ÓÉÈýÖØÑéÖ¤£¨¹¤É̹ҺÅÑéÖ¤¡¢Ð§ÀÍÆÀ¼ÛÑéÖ¤¡¢ÉúÒâÊý¾ÝÑéÖ¤£©µÄÓÅÖÊÉ̼ÒÐÅÏ¢¡£
ÖÇÄÜÍÆËÍËã·¨µÄÊÂÇé»úÖÆ
Õë¶ÔÓû§µÄ¸öÐÔ»¯ÐèÇó£¬ÌÇÐÄ»ÆÒ³ÍøÕ¾¿ª·¢ÁËÐÐΪ¹ì¼£ÆÊÎöϵͳ¡£¸Ãϵͳͨ¹ý¼ÍÈÎÃü»§µÄµã»÷·¾¶¡¢Í£Áôʱ³¤ºÍ¼ìË÷Òªº¦´Ê£¬½¨ÉèÁ˰üÀ¨136¸öά¶ÈµÄÓû§»ÏñÄ£×Ó¡£µ±Óû§ËÑË÷"Ö´·¨×ÉѯЧÀÍ"ʱ£¬Æ½Ì¨²»µ«ÏÔʾ»ù±¾Ãû¼£¬»¹»áÖÇÄÜÍÆË͹ØÁªµÄÎÄÊéÄ£°åÏÂÔØ¡¢ÔÚÏß×ÉѯÈë¿ÚµÈÑÓÉìЧÀÍ¡£ÕâÖÖ¾«×¼Æ¥ÅäÔõÑùÌáÉýÓû§Ð§ÂÊ£¿Êý¾ÝÏÔʾʹÓÃÖÇÄÜÍÆ¼ö¹¦Ð§µÄÓû§ÉúÒâת»¯ÂÊÌáÉý57%¡£
½»»¥ÌåÑéµÄÓÅ»¯Â·¾¶
ÔÚ½çÃæÉè¼Æ·½Ã棬ÌÇÐÄ»ÆÒ³ÍøÕ¾½ÓÄɽ¥½øÊ½ÍøÒ³Ó¦Óã¨PWA£©ÊÖÒÕ£¬È·±£¸÷ÖÕ¶Ë×°±¸µÄÒ»Ö²Ù×÷ÌåÑé¡£ËÑË÷¹¦Ð§ÉèÖÃÁËÓïÒôÊäÈ롢ͼƬʶ±ðºÍÄ£ºýÅÌÎÊÈýÖÖ½»»¥Ä£Ê½£¬ÌØÊâÊÇÁ¢ÒìµÄÊÓ¾õËÑË÷¹¦Ð§£¬Ö§³ÖÓû§Ö±½ÓÅÄÉãÓªÒµÖ´ÕÕ»ñÈ¡ÆóÒµÏêÇé¡£Õë¶ÔÍíÄêÓû§ÈºÌå£¬Æ½Ì¨ÌØÊ⿪·¢ÁËÓïÒôµ¼º½ÏµÍ³ºÍ·Å´ó¾µ¹¤¾ß£¬Ê¹Ð§ÀÍÁýÕÖ¸üÆÕ±éÈËȺ¡£
ÉÌÒµ¼ÛÖµÓëÉú³¤Ô¶¾°
ÌÇÐÄ»ÆÒ³ÍøÕ¾Í¨¹ý¹¹½¨B¶Ë£¨ÆóÒµ¶Ë£©ÓëC¶Ë£¨Óû§¶Ë£©µÄË«Ïò¸³ÄÜģʽ£¬ÐγÉÁËÆæÒìµÄÉÌÒµÉú̬ϵͳ¡£ÆóÒµ»áÔ±¿ÉÏíÊܰüÀ¨Êý¾ÝÆÊÎö±¨¸æ¡¢¾«×¼¿Í»§ÍÆËÍÔÚÄÚµÄÔöֵЧÀÍ£¬¶øÍ¨Ë×Óû§ÔòÄÜÃâ·Ñ»ñÈ¡¾ÓÉÑÏ¿áɸѡµÄÓÅÖÊ×ÊÔ´¡£Ëæ×ÅÆ½Ì¨½ÓÈëÇø¿éÁ´´æÖ¤ÊÖÒÕ£¬ËùÓÐÉúÒâ¼Í¼ºÍЧÀÍÆÀ¼Û¶¼½«ÊµÏÖ²»¿É¸Ä¶¯´æÖü£¬Õ⽫ÔõÑùÔöÇ¿Óû§ÐÅÈζȣ¿×îÐÂÊý¾ÝÏÔʾƽ̨Óû§Áô´æÂÊÒÑ´ï82%¡£
ÌÇÐÄ»ÆÒ³ÍøÕ¾µÄÁ¢ÒìÉú³¤Ä£Ê½£¬ÎªÐÐÒµ×ÊÔ´ÕûºÏЧÀÍÊ÷Á¢ÁËȫбê¸Ë¡£Í¨¹ýÊÖÒÕÁ¢ÒìÓëЧÀÍÓÅ»¯µÄË«ÖØÇý¶¯£¬¸Ãƽ̨²»µ«½â¾öÁ˹ŰåÐÅÏ¢¼ìË÷ÖеĵÍЧÎÊÌ⣬¸ü¹¹½¨ÁËÏßÉÏÏßÏÂÈںϵÄÊý×Ö»¯Ð§ÀÍÉú̬¡£Î´À´Ëæ×ÅÈ˹¤ÖÇÄÜÊÖÒÕµÄÒ»Á¬µü´ú£¬Æ½Ì¨½«ÔÚЧÀ;«×¼¶ÈºÍ³¡¾°ÁýÕÖά¶ÈʵÏÖ¸ü´óÍ»ÆÆ£¬Ò»Á¬Àο¿ÆäÔÚרҵÃÅ»§ÁìÓòµÄÁìÏÈְλ¡£