ÔÚÈ˹¤ÖÇÄÜ£¨AI£©Ò»Ö±ÑݽøµÄÀ˳±ÖУ¬ÎÊ´ðϵͳ×÷ΪÆä½¹µãÓ¦ÓÃÖ®Ò»£¬ÎüÒýÁËÖÚ¶à¿ÆÑлú¹¹ºÍÆóÒµµÄ¹Ø×¢¡£Ëæ×ÅÈË»ú½»»¥³¡¾°µÄÈÕÒæ¸»ºñ£¬¹Å°åµÄÎÊ´ðÄ£×ÓÔÚÃæÁÙÖØ´ó¡¢¶à±äµÄÓᄈʱ£¬ÌåÏÖ³öÖî¶à¾ÖÏÞ¡£ÎªÁË´òÔìÔ½·¢ÖÇÄÜ¡¢×¼È·¡¢¿É¿¿µÄÎÊ´ðϵͳ£¬Ñо¿ÕßÃÇØ½ÐèÒ»¸ö±ê×¼»¯µÄÆÀ²âƽ̨£¬À´È¨ºâÄ£×ÓÔÚÃ÷È·ÏßË÷¡¢ÕÆÎÕÓï¾³ºÍÍÆÀíÄÜÁ¦·½ÃæµÄÕæÊµË®Æ½¡£
ÕýÊÇÔÚÕâÑùµÄ´óÅä¾°Ï£¬¡°CG-BENCH£ºCLUE-GROUNDEDQUESTIONANSWERINGBENCHMARK¡±Ó¦Ô˶øÉú£¬³ÉÎªÍÆ¶¯ÎÊ´ðÊÖÒÕÍ»ÆÆµÄÒªº¦¹¤¾ß¡£
CG-BENCHµÄ½¹µãÁ¢ÒìÔÚÓÚËüÒÔÏßË÷£¨clues£©Îª»ù´¡£¬Ç¿µ÷Ä£×ÓÔÚÃ÷È·ÉÏÏÂÎÄÏßË÷µÄ¾ÙÐÐÉîÈëÍÆÀí£¬´Ó¶øµÃ³ö׼ȷÃյס£Õâ²î±ðÓڹŰåµÄÎÊ´ðÆÀ¼ÛÒªÁ죬ºóÕß¶à¹Ø×¢×ÖÃæÆ¥Åä»ò¼òÆÓµÄÊÂʵ»ØÒ䣬¶øºöÂÔÁËÃ÷È·ÉîÌõÀíÓï¾³µÄÖ÷ÒªÐÔ¡£CG-BENCHÉè¼ÆÁ˸»ºñ¶àÑùµÄ³¡¾°£¬º¸ÇÁËÒ»Ñùƽ³£ÎÊ´ð¡¢×¨ÒµÁìÓòÎÊ´ðÉõÖÁÖØ´óÍÆÀíÌ⣬ȷ±£Ä£×ÓÔÚ²î±ðÄѶȺÍÀàÐ͵ÄʹÃüÖоùÄÜÌåÏÖ³öÕæÊµµÄÄÜÁ¦¡£
ÔÚÕâһƽ̨ÉÏ£¬Ä£×Ó±»¸¶ÓëÁËеÄÌôÕ½¡ª¡ª²»µ«ÒªÊ¶±ðÎÊÌâÖеÄÒªº¦´Ê£¬¸üҪͨ¹ýÏßË÷Ã÷È·ÎÊÌâ±³ºóµÄDZ̨´ÊºÍÒþº¬ÐÅÏ¢¡£ÕâÒ»Àú³ÌÀàËÆÓÚÈËÀàÔÚ½â´ðijЩÒÉÄÑÎÊÌâʱ£¬ÍùÍùÐèÒªåÚÏë¡¢ÍÆÀíºÍ¶à½Ç¶È˼Ë÷¡£¶øCG-BENCHÕýÊǽèÖúÖØ´óµÄ¶àÑù»¯Êý¾Ý¼¯£¬Ä£ÄâÕæÊµÌìÏÂÖÐÖØ´ó¡¢¶à±äµÄÓï¾³ÇéÐΣ¬´Ó¶øÖ¸µ¼Ñо¿ÕßÉè¼Æ³ö¸ü¾ßÖÇÄÜÐÔµÄÎÊ´ðÄ£×Ó¡£
CG-BENCHÔÚÊÖÒÕʵÏÖÉÏÒ²ÌåÏÖ³öÇ°ÑØÁ¢Òì¡£Ëü½ÓÄɶàģ̬Êý¾ÝÊäÈ룬ÈÚºÏÎı¾¡¢Í¼ÏñÉõÖÁÒôƵÐÅÏ¢£¬Íƶ¯¶àģ̬Ã÷È·µÄÉú³¤¡£½èÖúÏȽøµÄÆÀ¹ÀÖ¸±êϵͳ£¬Ï꾡»®·ÖÄ£×ÓÔÚÏßË÷Ã÷È·¡¢ÍÆÀíÉî¶ÈºÍÃÕµ×Ò»ÖÂÐԵȷ½ÃæµÄÐÔÄÜÌåÏÖ£¬Îª¿ÆÑÐÖ°Ô±ÌṩÏêϸ¡¢Á¿»¯µÄ·´Ïì¡£
Õâ²»µ«ÓÐÖúÓÚ¶¨Î»Ä£×ӵį¿¾±£¬Ò²¼¤ÀøÔÚÄ£×ӽṹºÍѵÁ·Õ½ÂÔÉÏһֱ̽Ë÷ºÍÁ¢Òì¡£
Åãͬ×ÅCG-BENCHµÄÍÆ¹ã£¬ÐÐÒµ¶ÔAIÎÊ´ðϵͳµÄÆÚ´ýÒ²ÔÚÒ»Ö±Éý¸ß¡£ÔÚÖØ´óÓ¦Óó¡¾°ÖУ¬ÎÞÂÛÊÇÖÇÄܿͷþ¡¢½ÌÓýÏòµ¼£¬ÕÕ¾ÉÒ½ÁÆÕï¶Ï£¬Ä£×ÓµÄÏßË÷Ã÷È·ºÍÍÆÀíÄÜÁ¦¶¼ÖÁ¹ØÖ÷Òª¡£×÷ΪÐÂÒ»´úµÄ»ù×¼¹¤¾ß£¬CG-BENCHÕýÔÚÒýÁìÐÐÒµÏò¸üÖÇÄÜ¡¢¸ü¾«×¼¡¢¸üÈËÐÔ»¯µÄÆ«ÏòÉú³¤¡£
δÀ´£¬Ëæ×ÅÊÖÒÕµÄÒ»Ö±³ÉÊ죬CG-BENCH»¹½«Íƶ¯¶àÓïÖÖ¡¢¶àÎÄ»¯ÇéÐÎϵÄÎÊ´ðϵͳÑо¿£¬ÕæÕýʵÏÖÈ«Çò¹æÄ£ÄÚµÄÖÇÄÜÐÅÏ¢½»»¥¡£
CG-BENCH²»µ«ÊÇÒ»ÏîÊÖÒÕÁ¢Ò죬¸üÊÇÒ»³¡¹ØÓÚAIÃ÷È·ÄÜÁ¦µÄÉî¿ÌÀå¸ï¡£ËüͨÏ꾡ÖÂÃè»æÄ£×ÓÔÚÃ÷È·ÏßË÷ºÍÍÆÀíÀú³ÌÖеÄÌåÏÖ£¬ÎªÐÐÒµÊ÷Á¢ÁËеıê¸Ë¡£ÏàÐÅÔÚ²»Ô¶µÄδÀ´£¬½èÖúÕâ¸öƽ̨£¬È˹¤ÖÇÄÜÊÖÒÕ½«ÂõÈëÒ»¸öȫеĸ߶ȣ¬¸üºÃµØÐ§ÀÍÓÚÈËÀàµÄÖÇ»ÛÉúÑÄ¡£
Ëæ×ÅAIÎÊ´ðÊÖÒÕµÄÈÕÒæ³ÉÊìºÍÆÕ±éÓ¦Óã¬ÆÀ¼ÛϵͳµÄ¿ÆÑ§ÐÔÓ빫ÕýÐÔÒ²Ô½À´Ô½Êܵ½¹Ø×¢¡£CG-BENCHµÄ·ºÆð£¬ÎªÒµ½çÌṩÁËÒ»¸ö¸ßË®×¼µÄÆÀ²âƽ̨£¬²»µ«×ÊÖú¿ÆÑÐÍŶÓÀíÇåÄ£×ÓµÄÕæÊµÄÜÁ¦£¬Ò²Íƶ¯ÁËÐÐÒµ±ê×¼µÄÖð²½½¨Éè¡£Ëü½«³ÉΪδÀ´AIÎÊ´ðϵͳÑз¢ºÍÆÀ¹ÀÖв»¿É»òȱµÄ»ùʯ£¬Ô츣ÓÚÖÚ¶àÓ¦Óó¡¾°£¬²¢ÒýÁìÐÐÒµÂõÏò¸ü¸ßµÄÖÇÄÜˮƽ¡£
ÔÚÏÖʵӦÓÃÖУ¬CG-BENCHµÄÓ°ÏìÉîÔ¶¡£ÒÔÖÇÄܿͷþΪÀý£¬Óû§ÔÚÓöµ½ÖØ´óÎÊÌâʱ£¬ÆÚ´ýAI²»µ«ÄÜ¿ìËÙÕÒµ½ÃÕµ×£¬¸üÄÜÃ÷È·ÎÊÌâÖеÄDZÔÚÒâͼºÍÓï¾³ÏßË÷¡£¹Å°åϵͳ¿ÉÄÜÖ»ÄÜÆ¾Ö¤Òªº¦´ÊÆ¥Åä¾ÙÐмìË÷£¬¶øCG-BENCHÖ§³ÖµÄÄ£×ÓÔò¾ÓÉÉî¶ÈѵÁ·£¬ÄÜ´Ó¶à½Ç¶ÈÆÊÎöÎÊÌ⣬Á¬ÏµÉÏÏÂÎÄÐÅÏ¢¸ø³ö¸ü׼ȷ¡¢¸üÖªÐĵĻظ²¡£
ÕâÑùµÄÊÖÒÕÍ»ÆÆ£¬¼«´óÌáÉýÓû§ÌåÑ飬ҲËõ¶ÌÁËÆóÒµÓë¿Í»§Ö®¼äµÄ¾àÀë¡£
½ÌÓýºÍÅàѵÐÐÒµÒ²ÓÀ´¸ïÃüÐÔÀå¸ï¡£Ê¹ÓÃCG-BENCHÆÀ¹ÀµÄÖÇÄÜÏòµ¼ÏµÍ³£¬Äܹ»Ã÷ȷѧÉúÌá³öµÄÎÊÌâÖеÄDZÔÚÄÑÌ⣬´Ó¶øÌṩ¸öÐÔ»¯¡¢Õë¶ÔÐԵĽâ´ð¡£ºÃ±È£¬ÃæÁÙij¸öÁýͳµÄÊýѧÌ⣬ģ×Ó²»µ«Äܸø³ö½âÌâ°ì·¨£¬»¹ÄÜÆ¾Ö¤ÎÊÌâÖеÄÏßË÷ÅжϳöѧÉúµÄÃ÷È·Îó²î£¬ÎªÎ÷ϯÌṩÓмÛÖµµÄ·´Ïì¡£
ÕâÖÖ»ùÓÚÉîÌõÀíÃ÷È·µÄÎÊ´ð·½·¨£¬Îª¸öÐÔ»¯½ÌÓý·¿ªÁËеĿÉÄÜ¡£
ÔÚÒ½ÁÆÁìÓò£¬½èÖúCG-BENCHµÄÆÀ²â±ê×¼£¬¹¹½¨³ö¸üΪ¾«×¼ºÍ¿É¿¿µÄÒ½ÁÆÎÊ´ðϵͳ£¬½«³ÉΪδÀ´µÄÖØµãÆ«Ïò¡£ÖØ´óµÄ¼²²¡Õï¶Ï¡¢Ò©Îï×ÉѯµÈ³¡¾°£¬ÒªÇóÄ£×ÓÔÚÃ÷È·Ò½Éú»ò»¼ÕßµÄÎÊÕïÏßË÷ºó£¬Âß¼ÍÆÀí³öºÏÀíµÄ½¨æÅºÍ½áÂÛ¡£Õâ²»µ«¹ØÏµµ½»¼ÕßµÄÉúÃüÇå¾²£¬Ò²Íƶ¯ÁËÈ˹¤ÖÇÄÜÔÚÉúÃü¿ÆÑ§ÖеÄÉî¶ÈÓ¦Óá£
Ëæ×ÅCG-BENCHµÄÍÆ¶¯£¬Ò½ÁÆAIµÄ͸Ã÷¶ÈºÍ¿ÉÐŶÈÒ²»áÒ»Ö±Ìá¸ß£¬ÎªÒ½»¼Ë«·½´î½¨¸üÀο¿µÄÐÅÈÎÇÅÁº¡£
´ÓÊÖÒÕÉú³¤½Ç¶È¿´£¬CG-BENCHÒ²ÔÚ´ÙʹAIÄ£×ÓµÄÒ»Ö±ÓÅ»¯¡£ÎªÁËÓ¦¶Ôƽ̨ÉϵÄÌôÕ½£¬Ñо¿ÕßÃÇ×îÏÈ̽Ë÷¸üÉîÌõÀíµÄÉñ¾ÍøÂç½á¹¹£¬¸ü¸»ºñµÄѵÁ·Êý¾Ý£¬ÒÔ¼°¶àģ̬ÈںϵÄÒªÁì¡£ÕâЩÁ¢Ò춼ΪÌá¸ßÄ£×ÓµÄÏßË÷Ã÷È·ÄÜÁ¦´òÏÂÁ˼áʵ»ù´¡¡£ÆÀ¹ÀÖ¸±êµÄһֱϸ»¯£¬Ò²ÈÿÆÑÐÖ°Ô±¿ÉÒÔÕë¶ÔÐԵظÄÉÆÄ£×ÓµÄijЩÈõÏî£¬ÍÆ¶¯Õû¸öÐÐÒµµÄÊÖÒÕǰ½ø¡£
δÀ´£¬CG-BENCH»ò½«ÁªºÏ¶à¼Ò¿Æ¼¼¾ÞÍ·¡¢¿ÆÑлú¹¹£¬¹¹½¨Ò»¸öÈ«ÇòÐ×÷µÄÖÇÄÜÎÊ´ðÉú̬ϵͳ¡£¶àÓïÑÔ¡¢¶àÎÄ»¯Åä¾°ÏÂµÄÆÀ¹À£¬½«ÖúÍÆÈ«Çò¹æÄ£ÄÚµÄAIÎÊ´ðÊÖÒÕÂõÏòиߡ£¸üÖ÷ÒªµÄÊÇ£¬Õâһƽ̨»òÐí»á³ÉΪAIÂ×Àí¡¢Çå¾²ºÍ¹«ÕýÐÔµÄÖ÷Òª²Î¿¼£¬ÈÃÊÖÒÕÁ¢ÒìµÄÒ²¸üºÃµØ°ü¹ÜÓû§È¨Òæ¡£
ÔÚÕⳡÀå¸ïÖУ¬Ã»ÓÐÈκÎÒ»¸öÐÐÒµÄÜÖÃÉíÊÂÍâ¡£½ÌÓý¡¢Ò½ÁÆ¡¢ÉÌÎñ¡¢ÓéÀÖ¡¡Ã¿Ò»¸öÁìÓò¶¼ÔÚÆð¾¢Óµ±§ÖÇÄÜÎʴ𣬶øCG-BENCH×÷ÎªÍÆ¶¯Õⳡ¿çÔ½µÄÒýÇæ£¬¸üÏñÊÇÒ»¿é¡°ÅܵÀ¡±£¬ÈÃÁ¢ÒìÔÚÎÞÏÞ¿ÉÄÜÖÐ×ÔÓɱ¼ÅÜ¡£Ëæ×ÅÒ»Ö±µÄʵ¼ùºÍÍêÉÆ£¬Ëü½«Öð²½ÊµÏÖΪȫÇòAIÓ¦Óõġ°»Æ½ð±ê×¼¡±£¬ÒýÁìÐÐÒµ¿µ½¡¡¢ÓÐÐòµÄÉú³¤¡£
½áÓCG-BENCH¾ø²»ÊÇÒ»¾äÆÓªµÄ¿ÚºÅ£¬¶øÊÇÍÆ¸ÐÈ˹¤ÖÇÄÜÎÊ´ðÊÖÒÕÕæÕýÂõÈëÖÇÄÜÃ÷È·ÐÂʱ´úµÄÖ÷ҪǣÒýʵÁ¦¡£ËüÓÃÉî¶ÈµÄÏßË÷Ã÷È·ÄÜÁ¦£¬Í»ÆÆÁ˹ŰåµÄ¾ÖÏÞ£¬ÎªÎÒÃÇÃè»æ³ö¸üΪÖÇÄÜ¡¢ÖªÐĵÄÈË»ú½»»¥Î´À´¡£ÏàÐÅδÀ´µÄijһÌ죬ÕâÑùµÄÎÊ´ðϵͳ½«³ÉΪÎÒÃÇÉúÑÄÖв»¿É»òȱµÄͬ°é£¬ÕæÕýʵÏÖÈËÓëÖÇÄܵÄÎÞ·ìÅþÁ¬¡£