ÖðÈÕÐÂÖª£¡º£½Ç×êʯȫ½âËø¾ç±¾¡ª¡ª´Ó¶¯Ì¬µ½¾²Ì¬µÄÉî¶ÈÆÊÎö£¨ÉÏÆª£©ÔÚÏÖÔÚÕâ¸öÐÅÏ¢±¬Õ¨µÄʱ´ú£¬ÕÆÎÕ¸ßЧ¡¢¾«×¼µÄÊý¾Ý½âËøÊÖÒÕ³ÉΪÁËÐÐÒµµÄ½¹µã¾ºÕùÁ¦¡£¶øÔÚÖڶ๤¾ßºÍÊÖÒÕÖУ¬º£½Ç×êʯ¾ç±¾ÒÔÆäǿʢµÄ½âËøÄÜÁ¦ºÍÎÞаµÄÓ¦Óó¡¾°£¬Ó®µÃÁËÖî¶à¿ª·¢ÕߺÍÐÅÏ¢Ç徲ר¼ÒµÄ¹Ø×¢¡£
±¾ÆªÎÄÕ½«´øÄãÖÜÈ«Ïàʶº£½Ç×êʯ¾ç±¾µÄ»ùÀ´Ô´Àí¡¢ÊÖÒռܹ¹£¬¼°ÆäÔÚ²î±ð³¡¾°ÏµÄÏêϸӦÓ㬴Ӷ¯Ì¬Êý¾Ýµ½¾²Ì¬ÐÅÏ¢µÄÈ«Á÷³Ì£¬ÊµÏÖÕæÕýÒâÒåÉϵÄÖÜÈ«ÕÆÎÕ¡£
Ò»¡¢º£½Ç×êʯ¾ç±¾¼ò½éº£½Ç×êʯ¾ç±¾£¬¹ËÃû˼Ò壬ÊÇÒ»Ì×Ö¼ÔÚÆÆ½âº£½Ç×êʯϵͳÖÐÊý¾Ý±£»¤»úÖÆµÄ×Ô¶¯»¯¾ç±¾¹¤¾ß¡£ËüÄܹ»Ä£ÄâÓû§ÐÐΪ¡¢ÈƹýÑéÖ¤¡¢ÌáÈ¡Òþ²ØÐÅÏ¢£¬ÉõÖÁʵÏÖÕ˺ÅÅúÁ¿²Ù×÷¡£Í¨¹ýÔÚºǫ́ģÄâÕæÊµ²Ù×÷£¬ÕâÑùµÄ¾ç±¾¼«´óµØÌá¸ßÁËÊý¾Ý´¦Öóͷ£µÄЧÂÊ£¬ïÔÌÁËÈ˹¤²Ù×÷µÄ·±Ëö¡£
µ«ÖµµÃ×¢ÖØµÄÊÇ£¬ÎÞÂÛÊÖÒÕ¶àǿʢ£¬Ã¿Ò»¶Î¾ç±¾µÄ±³ºó¶¼°üÀ¨×ÅÖØ´óµÄÂß¼¹ØÏµºÍ¶àÌõÀíµÄÑéÖ¤»úÖÆ¡£¶¯Ì¬Êý¾ÝµÄת±ä¡¢ÑéÖ¤ÂëµÄ·ºÆð¡¢»á¼ûƵÂʵÄÏÞÖÆµÈ£¬¶¼ÊǾ籾Éè¼Æ±ØÐè˼Á¿µÄÒòËØ¡£ÓÈÆäÊÇÔÚÃæÁÙ·´ÅÀ³æºÍ·´¾ç±¾»úÖÆÊ±£¬ÔõÑùÇÉÃîµØÈÆ¹ýÏÞÖÆ£¬¼á³Ö¾ç±¾µÄÎȹÌÔËÐУ¬ÊÇÿ¸ö¿ª·¢ÕßÐèÒªÃæÁÙµÄÄÑÌâ¡£
¶þ¡¢¶¯Ì¬µ½¾²Ì¬µÄת±ä˼Ð÷´Ó¶¯Ì¬µ½¾²Ì¬£¬¼òÆÓÃ÷È·¾ÍÊǽ«Ò»Ö±×ª±äµÄÏÖ³¡Êý¾ÝºÍ½»»¥ÐÐΪ£¬×ª»¯Îª¿É¿Ø¡¢¾²Ö¹¡¢¿ÉÆÊÎöµÄ¾²Ì¬ÐÅÏ¢¡£ÕâÒ»µãÔÚÊý¾ÝÊÕÂÞ¡¢Î£º¦ÆÀ¹À¡¢ÄÚÈÝÆÊÎöµÈ¶à¸öÁìÓò¶¼¾ßÓÐÖØ´óÒâÒå¡£
Ïêϸ¶øÑÔ£¬¶¯Ì¬Êý¾Ý°üÀ¨ÍøÒ³ÊµÊ±ÄÚÈÝ¡¢½»»¥ÐÐΪ¡¢µ¯´°ÑéÖ¤¡¢ÑéÖ¤Âë¡¢ÇëÇóƵÂʵȡ£Ò»µ©ÕÆÎÕÕâЩת±ä¼ÍÂÉ£¬¾Í¿ÉÒÔͨ¹ý¾ç±¾ÊµÏÖ×Ô¶¯»¯Ä£Ä⣬»ñµÃ¶ÔÓ¦µÄ¾²Ì¬¿ìÕÕ£¬ÉõÖÁ·´ÏòÆÊÎö³öÒþ²ØµÄ¹æÔò¡£
ºÃ±È£¬ÍøÒ³ÉϵÄijЩͼƬ»òÄÚÈÝÊǶ¯Ì¬¼ÓÔØµÄ£¬Í¨¹ý´¿´âµÄ¾²Ì¬×¥È¡ÎÞ·¨»ñÈ¡ÍêÕûÐÅÏ¢¡£´Ëʱ£¬¾ç±¾»áʹÓÃÄ£ÄâÇëÇó¡¢ÑÓʱ¼ÓÔØ¡¢Ajax×èµ²µÈÊÖÒÕ£¬²¶»ñµ½Ò³Ãæ±³ºóÕæÊµÔËÐеĶ¯Ì¬Êý¾Ý£¬ÔÙÁ¬Ïµ¾²Ì¬ÆÊÎö£¬¾ÍÄÜ»ñµÃÔ½·¢ÍêÕû¡¢×¼È·µÄÊý¾Ý¿ìÕÕ¡£
Èý¡¢½¹µãÊÖÒÕÏê½â(1)Ä£ÄâÓû§ÐÐΪ£ºÊ¹Óþ籾ģÄâÊó±êµã»÷¡¢»¬¶¯¡¢ÊäÈëµÈ²Ù×÷£¬ÈƹýÒ³ÃæµÄÐÐΪÑéÖ¤£¬¼á³ÖÎ±ÕæÊµ×´Ì¬£¬×èÖ¹´¥·¢·´ÅÀ»úÖÆ¡£ÕâÒ»²½ÒªÇó¶ÔÒ³Ãæ½á¹¹µÄÉî¶ÈÃ÷È·£¬ÕÆÎÕÊÂÎñ´¥·¢ºÍÏìÓ¦»úÖÆ¡£
(2)ÑéÖ¤ÂëÆÆ½â£ºÑéÖ¤ÂëÒ»Ö±ÊDZ£»¤ÏµÍ³µÄÖ÷Òª»·½Ú¡£º£½Ç×êʯ¾ç±¾Ò»Ö±ÒýÈëÐÂÊÖÒÕ£¬ÈçOCRʶ±ð¡¢Í¼ÏñÔ¤´¦Öóͷ£¡¢¶þÖµ»¯µÈÊֶΣ¬ÅäºÏ×Ô½çËµÆÆ½âÁ÷³Ì£¬Ìá¸ßÑéÖ¤Âëʶ±ðµÄÀÖ³ÉÂÊ¡£
(3)ÇëÇóαװÓëÊðÀí£ºÊ¹ÓÃËæ»úUser-Agent¡¢IPÊðÀí³Ø¡¢ÇëÇóÑÓʱµÈ·½·¨£¬Ä£Äâ¶àÓû§¡¢¶àËùÔÚ»á¼û£¬±ÜÃâ±»·â½û»ò¼ì²âµ½Òì³£¡£
(4)¶¯Ì¬Êý¾Ý²¶»ñ£ºÔËÓÃ×¥°ü¹¤¾ß£¬ÆÊÎöÍøÒ³ÇëÇó£¬ÌáÈ¡API½Ó¿Ú£¬¼à¿Ø¶¯Ì¬ÄÚÈݼÓÔØÀú³Ì¡£Á¬ÏµÇëÇó×èµ²ºÍÄ£ÄâÏìÓ¦ÊÖÒÕ£¬¿ÉÒÔÓÐÓÿØÖÆÐÅÏ¢µÄÁ÷³ö¡£
(5)¾²Ì¬ÆÊÎöÓë´æ´¢£º½«ÊÕÂÞµ½µÄ¶¯Ì¬Êý¾ÝÕûÀí³É½á¹¹»¯ÐÅÏ¢£¬´æÈëÊý¾Ý¿â»òÎļþϵͳ£¬ÎªºóÐøÆÊÎöÌṩ֧³Ö¡£
ËÄ¡¢Ó¦Óó¡¾°¼°Ç±ÔÚ¼ÛÖµº£½Ç×êʯ¾ç±¾µÄÓ¦Óó¡¾°¼«Îª¸»ºñ¡£ÎÞÂÛÊÇÊý¾ÝÊÕÂÞ¡¢ÄÚÈÝÍÚ¾ò£¬ÕÕ¾É×Ô¶¯»¯¼à¿Ø¡¢Î£º¦ÆÊÎö£¬Ëü¶¼ÄÜÊ©Õ¹ÖØ×ÅÊöÓá£ÀýÈ磬ÔÚÊг¡µ÷ÑÐÖпìËÙÕûÀí¾ºÕùµÐÊÖÐÅÏ¢£¬ÔÚÄÚÈÝÆ½Ì¨ÊµÏÖ¿ìËÙÄÚÈÝÊÕÂÞ£¬ÔÚÐÅÏ¢Çå¾²Öмì²âDZÔÚΣº¦µã¡£
È»¶øÒ²ÒªÒâʶµ½ÊÖÒÕµÄË«Èн£ÌØÕ÷¡£Õýµ±ºÏ¹æµÄʹÓã¬ÊÇÈ·±£ÊÖÒÕ¿µ½¡Éú³¤µÄÌõ¼þ¡£Ðí¶àÆóÒµºÍСÎÒ˽¼ÒÔÚʵÑéʹÓþ籾ʱ£¬ÐèÒªÃ÷È·µ×Ïߣ¬×èÖ¹´¥ÅöÖ´·¨ºìÏß¡£
Îå¡¢ÃæÁÙµÄÌôÕ½ÓëδÀ´Õ¹ÍûÔÚÒ»Á¬×·Çó¸ü¸ßЧÂʺ͸üÇ¿ÒþÄäÐԵķÉÏ£¬º£½Ç×êʯ¾ç±¾ÃæÁÙÖî¶àÌôÕ½¡£·´ÅÀ»úÖÆ¡¢¶¯Ì¬ÑéÖ¤Âë¡¢ÐÐΪʶ±ð¡¢IP·â½û¡¡Ã¿Ò»´Î¶Ô¿¹¶¼ÍÆÏÂÊÖÒÕµÄÒ»Ö±Ñݽø¡£
δÀ´£¬ÕâЩ¾ç±¾ÓÐÍû½èÖúÈ˹¤ÖÇÄÜ¡¢»úеѧϰ¡¢Í¼Ïñʶ±ðµÈÐÂÐËÊÖÒÕ£¬±äµÃÔ½·¢ÖÇÄÜ¡¢Òþ²Ø¡¢Ç¿Ê¢¡£ÐÐÒµ¶ÔÊý¾Ý±£»¤µÄî¿ÏµÒ²»áÈÕÒæÔöÇ¿£¬¾ç±¾µÄʹÓó¡¾°½«Ç÷ÓںϹ滯¡£
×÷Ϊ¿ª·¢Õß»ò´ÓÒµÕߣ¬Òªº¦ÊÇÔÚ¼á³ÖÊÖÒÕÃôÈñ¶È¼òÖ±±£²Ù×÷µÄÕýµ±ÐÔºÍÇå¾²ÐÔ¡£ÉîÈëÏàʶÊÖÒÕÔÀí£¬ºÏÀíÍýÏëÓ¦Óó¡¾°£¬²Å»ªÔÚÕâ¸ö¶¯Ì¬×ª±äµÄÁìÓòÖУ¬Õ¾ÎȽŸú¡£
ÖðÈÕÐÂÖª£¡º£½Ç×êʯȫ½âËø¾ç±¾¡ª¡ª´Ó¶¯Ì¬µ½¾²Ì¬µÄÉî¶ÈÆÊÎö£¨ÏÂÆª£©¼ÌÉÏÆªÏêϸ½â˵Á˺£½Ç×êʯ¾ç±¾µÄ»ùÀ´Ô´Àí¡¢ÊÖÒռܹ¹ºÍÓ¦Óó¡¾°ºó£¬±¾²¿·Ö½«¾Û½¹ÓÚÏêϸʵ¼ùÖеIJÙ×÷ϸ½Ú¡¢ÓÅ»¯Õ½ÂÔ£¬ÒÔ¼°Î´À´Éú³¤Ç÷ÊÆ¡£Ï£ÍûÄܰïÄãÔÚÏÖʵʹÓÃÖÐÓÎÈÐÓÐÓ࣬ʵÏÖÄ¿µÄµÄ×î´ó»¯¡£
Áù¡¢Êµ²Ù¼¼ÇÉÓëÓÅ»¯Õ½ÂÔ(1)¾ç±¾ÎȹÌÐÔÌáÉýÔÚ×Ô¶¯»¯¾ç±¾ÖУ¬ÎȹÌÐÔ¾ø¶ÔÊÇÒªº¦¡£Í¨¹ý¶¯Ì¬¼ì²âÒ³Ãæ½á¹¹×ª±ä£¬Ê¹ÓÃÎÞаµÄÔªËØ¶¨Î»Õ½ÂÔ£¨ÈçCSSÑ¡ÔñÆ÷¡¢XPathµÈ£©£¬Á¬ÏµÒì³£²¶»ñ»úÖÆ£¬È·±£ÔÚÍøÒ³½á¹¹±ä»»Ê±£¬¾ç±¾ÈÔÄÜÎȹÌÔËÐС£
(2)°´ÆÚ¸üÐÂÓëά»¤ÍøÒ³ÄÚÈݺͷ´ÅÀ»úÖÆËæÊ±¿ÉÄܱ¬·¢×ª±ä£¬°´ÆÚ¼ì²é¾ç±¾µÄÓÐÓÃÐÔ£¬ÊǼá³ÖЧÂʵÄÐëÒª²½·¥¡£Ê¹Óð汾ÖÎÀí¹¤¾ß£¬½«¾ç±¾µÄ²î±ð°æ±¾¾ÙÐб¸·ÝºÍ×·×Ù£¬Àû±ã¿ìËÙ»Ö¸´¡£
(3)¶àʹÃü²¢·¢´¦Öóͷ£½ÓÄɶàÀú³Ì¡¢¶àÏ̻߳òÂþÑÜʽ¼Ü¹¹£¬ÌáÉý¾ç±¾µÄ²¢·¢ÄÜÁ¦¡£ÔÚ°ü¹ÜÎȹÌÐÔµÄʵÏÖ¸ßЧµÄÊý¾ÝÊÕÂÞ¡£ºÏÀíÉèÖÃÇëÇó¾àÀ룬×èÖ¹Òò¹ý¿ìÇëÇó¶ø±»·â¡£
(4)Ä£Äâ×ÔÈ»ÐÐΪÌí¼ÓËæ»úÑÓʱ¡¢Êó±êÒÆ¶¯¹ì¼£¡¢ÐÐΪÇл»µÈÄ£ÄâÈËÀà²Ù×÷µÄϸ½Ú£¬½µµÍ±»Ê¶±ðΪ»úеµÄΣº¦¡£Á¬ÏµÐÐΪѧϰµÄÊÖÒÕ£¬Öð²½ÓÅ»¯¾ç±¾²Ù×÷µÄ¡°×ÔÈ»¶È¡±¡£
Æß¡¢Êý¾ÝÆÊÎöÓ뾲̬»¯¼¼Çɽ«¶¯Ì¬Êý¾Ýת»¯Îª¾²Ì¬ÐÅÏ¢ºó£¬ÏÂÒ»²½¾ÍÊǸßЧ´æ´¢ºÍÆÊÎö¡£³£ÓõÄÒªÁì°üÀ¨£º
ʹÓùØÏµÐÍÊý¾Ý¿â»òNoSQL´æ´¢´ó×ڽṹ»¯»ò°ë½á¹¹»¯Êý¾Ý¡£Ê¹ÓÃPythonµÈ¹¤¾ß¾ÙÐÐÊý¾Ýϴ媡¢È¥ÖØ¡¢¹ØÁªÆÊÎö¡£Á¬ÏµÊý¾Ý¿ÉÊÓ»¯¹¤¾ß£¬¿ìËÙ¶´²ìÊý¾Ý±³ºóµÄ¼ÍÂÉ¡£
¾²Ì¬ÐÅÏ¢µÄ¼ÛÖµÔÚÓÚÉî¶ÈÆÊÎöºÍÒ»Á¬Ê¹Ó᣺ñȣ¬Í¨¹ýÊý¾ÝµÄʱ¼äÏߣ¬ÊÓ²ìij¸öÄÚÈݵÄת±äÇ÷ÊÆ£¬´Ó¶øÓÅ»¯Õ½ÂÔ¡£
°Ë¡¢Ö´·¨Â×ÀíÓëÒþ˽±£»¤ÔÚ×·ÇóÊÖÒÕ¼«ÖµıØÐèÃæÁÙÖ´·¨ºÍÂ×ÀíµÄ½çÏß¡£ºÏÀí¹æ±ÜÃô¸ÐÐÅÏ¢µÄÊÕÂÞ£¬×èÖ¹ÇÖռСÎÒ˽¼ÒÒþ˽£¬×ñÊØÊý¾Ý±£»¤¹æÔò¡£½¨ÒéÔÚÕýµ±ºÏ¹æµÄ¹æÄ£ÄÚ£¬Ê¹Óþ籾ʵÏÖ×Ô¶¯»¯¡¢ÓÅ»¯Á÷³Ì¡£
¡°ºÚÆáºÚµÄÊÖÒÕ¡±Ò²¿ÉÒÔ³ÉΪ¡°ÊØ»¤ÕßµÄÀûÆ÷¡±¡£Ã÷ȷÿһÐдúÂë±³ºóµÄÔðÈΣ¬²Å»ªÔÚÊÖÒյĺ£ÑóÖÐ×ÔÓɺ½ÐС£
¾Å¡¢Î´À´µÄÉú³¤Æ«ÏòδÀ´µÄº£½Ç×êʯ¾ç±¾£¬½«»áÈںϸü¶àÇ°ÑØÊÖÒÕ¡£È˹¤ÖÇÄÜ´øÀ´µÄ×ÔÖ÷ѧϰÄÜÁ¦£¬¿ÉÒÔÈþ籾¸üÖǻۡ¢¸üÒþ²Ø£»ÔÆÅÌËãºÍ´óÊý¾Ý£¬Ôò¸¶ÓëËüÃǸüÇ¿µÄ´¦Öóͷ£ÄÜÁ¦¡£
¿¹¼ì²âºÍ·´·´ÅÀÊÖÒÕ½«Ò»Ö±½ø»¯£¬·´ÖƲ½·¥Ò²»áÈÕÒæÖØ´ó¡£Á¬Ïµ»úеѧϰµÄÐÐΪģÄ⣬½«³ÉΪ½¹µã¾ºÕùÁ¦¡£
ÐÐÒµµÄÉú³¤Ò²½«´ßÉúÔ½·¢¸»ºñ¡¢¶àÑùµÄ¾ç±¾½â¾ö¼Æ»®¡£²»µ«½ö¾ÖÏÞÓÚÊý¾ÝÆÆ½â£¬¶øÊÇÏòÖÇÄÜ»¯¡¢ÖÜÈ«»¯¡¢ºÏ¹æ»¯Æ«ÏòÉú³¤£¬ÎªÐÐÒµ´øÀ´¸ü´ó¼ÛÖµ¡£
Ê®¡¢×ܽả½Ç×êʯȫ½âËø¾ç±¾£¬´Ó¶¯Ì¬µ½¾²Ì¬µÄÈ«Àú³Ì£¬¼ÈÊÇÊÖÒյĽÏÁ¿£¬Ò²ÊÇÁ¢ÒìµÄÌåÏÖ¡£´ÓÄ£ÄâÓû§ÐÐΪ£¬µ½ÆÆ½âÑéÖ¤Â룬ÔÙµ½Êý¾Ý´æ´¢ÆÊÎö£¬Ã¿Ò»²½¶¼Ç£¶¯×ÅÐÐÒµµÄδÀ´¡£×÷Ϊ´ÓÒµÕߣ¬¼á³Öѧϰ£¬ÕÆÎÕ×îÐÂÊÖÒÕ£¬ºÏÀíʹÓù¤¾ß£¬²Å»ªÕ¾ÔÚ¾ÞÈ˵ļç°òÉÏ£¬¿´µÃ¸üÔ¶¡£
Õâ¸öÌìÏ£¬ÓÀÔ¶ÊôÓÚÄÇЩһֱ̽Ë÷¡¢Ò»Ö±Á¢ÒìµÄÈË¡£ÆÚ´ýÄãÔÚº£½Ç×êʯµÄÌìÏÂÀÕÒµ½ÊôÓÚ×Ô¼ºµÄһƬÀ¶ÌìÁÉÀ«¿Õ¼ä¡£Î´À´ÎÞÏÞ¾«²Ê£¬¾ÍÔÚÄãµÄÊÖÖС£