µÚһά¶È£ºÇéÐ÷½»»¥ÉùЧµÄÑÝ»¯¸ïÃü
Êý×ÖÒôƵÊÖÒÕµÄÍ»ÆÆÊ¹"Ç××컹ÈÓÒ·þÇײ±×ÓÔÉù"ÕâÀàÖØ´ó»¥¶¯ÉùЧµÃÒÔÕæÊµ»¹Ô¡£»ùÓÚÎïÀí½¨Ä£µÄ²¼ÁÏĦ²ÁËã·¨£¬Äܹ»×¼È·Ä£Äâ²î±ð²ÄÖÊ´ò°çÍÑÂäʱµÄÉù²¨×ª±ä£¬ÅäºÏË«¶ú¼ÒôÊÖÒÕ£¬ÔÚÍæ¼Ò¶úÖÐÐÞ½¨ÆðÈýάÒô³¡¡£ÕâÖÖÉý¼¶²»µ«ÌåÏÖÔÚ"ÈÈÃÅÔÉù"µÄÌý¾õά¶È£¬¸üͨ¹ýÉùÒôµÄÐÄÀí·´Ïì»úÖÆ£¬´¥·¢Íæ¼ÒµÄ½»¸ÐÉñ¾·´Ó¦£¬ÐÎ³ÉÆæÒìµÄÌÕ×íʽӰÏóêµã¡£
µÚ¶þά¶È£ºÇ×Ãܳ¡¾°µÄÉùЧ¹¹½¨ÏµÍ³
ÔÚ"ÓÎÏ·ÎÞµ¯´°ÔÚÏß"³¡¾°ÖУ¬Çײ±×ÓÉùЧµÄÑз¢Éæ¼°¶àÏîÇ°ÑØÊÖÒÕ¡£ÉúÎïÉùѧʵÑéÊÒµÄÊý¾ÝÏÔʾ£¬ÈËÀྱ²¿Æ¤·ô½Ó´¥»á±¬·¢18-22kHzµÄÌØÊâÆµ¶ÎÕ𾪣¬Õâ¸öƵ¶ÎµÄÉùÒôÔÚÐéÄⳡ¾°ÖÐÄÜÓÐÓô̼¤ÐÓÈʺËÇøÓò¡£ÒôƵ¹¤³Ìʦͨ¹ý¶àͼ²ã»ìÒôÊÖÒÕ£¬½«ºôÎüÉù¡¢ÒÂÁÏĦ²ÁÉùÓëÇéÐλìÏìÓлúÈںϣ¬ÕâÖÖ"È«ÐÂÌåÑé"µÄÖÆ×÷¹¤ÐòÐèÒªÂÄÀú147¸ö´¦Öóͷ£½Úµã²Å»ªµÖ´ïÇéÐ÷´©Í¸Ð§¹û¡£
µÚÈýά¶È£º¶¯Ì¬ÇéÐÎÒôµÄÖÇÄÜÊÊÅä
ÔõÑùÈÃ"Ç××컹ÈÓÒ·þÇײ±×ÓÔÉù"ÔÚ²î±ðÓÎÏ·³¡¾°Öмá³Ö×ÔÈ»¹ý¶É£¿ÊµÊ±ÒôƵäÖȾÒýÇæµÄÓ¦Óøø³öÏàʶ¾ö¼Æ»®¡£»ùÓÚ»úеѧϰµÄÇéÐÎÒôÕ¹Íûϵͳ£¬ÄÜÆ¾Ö¤Íæ¼Ò²Ù×÷Ç¿¶È×Ô¶¯µ÷ÀíÉùÒôµÄÑÓʱ²ÎÊýºÍ¿Õ¼ä·´ÉäÁ¿¡£µ±½ÇÉ«´ò°çÆ®Âäʱ£¬ÏµÍ³»á¶¯Ì¬Å²ÓöÔÓ¦µÄ²¼ÁÏÅöײÎïÀíÄ£×Ó£¬È·±£Ã¿¸öÐж¯½Úµã¶¼Êä³öÇкÏÏÖʵÉùѧ¼ÍÂɵÄ"ÈÈÃÅÔÉù"¡£
µÚËÄά¶È£º¿ç¸Ð¹ÙÌåÑéµÄÉñ¾ñîºÏ
ÔÚʵÏÖ"ÓÎÏ·ÎÞµ¯´°ÔÚÏß"µÄÊÖÒÕ×·ÇóÖУ¬Ìý¾õϵͳÓëÊÓ¾õϵͳµÄºÁÃ뼶ͬ²½³ÉΪҪº¦Í»ÆÆ¡£ÊµÑéÊý¾ÝÏÔʾ£¬µ±ÉùÒôÑÓ³Ù¿ØÖÆÔÚ18msÒÔÄÚʱ£¬Íæ¼Ò´óÄԵľµÏñÉñ¾Ôª¼¤»îЧÂÊÌáÉý63%¡£ÕâÖÖÉñ¾ñîºÏЧӦʹµÃ"Çײ±×Ó"µÈϸÄåÐж¯µÄÉù»Í¬²½ÖÁ¹ØÖ÷Òª£¬ÒôЧÍŶÓΪ´Ë¿ª·¢ÁË»ùÓÚ¹Ç÷À¶¯»µÄÒôƵչÍûËã·¨£¬Ìáǰ200msÔ¤ÅÐÐж¯ÌìÉú¶ÔÓ¦ÉùÎÆ¡£
µÚÎåά¶È£ºÍæ¼ÒÐÄÀíµÄÉùЧָµ¼»úÖÆ
Ϊʲô"È«ÐÂÌåÑé"µÄÉùЧÉè¼ÆÄÜÒý·¢Ç¿ÁÒÇéÐ÷¹²Ê¶£¿ÐÄÀíÉùѧÑо¿Õ¹ÏÖÁËÆäÖеÄDZÒâʶָµ¼»úÖÆ¡£Éè¼ÆÊ¦ÔÚ"ÈÈÃÅÔÉù"ÖÐÖ²ÈëÁËÌØ¶¨Æµ¶ÎµÄÖ¸µ¼Òô£¬ÔÚÇ××ìÉùЧÖмÓÈë12-14HzµÄ´ÎÉù²¨ÒòËØ£¬ÕâÖÖÆµ¶ÎÄÜÓëÈËÌåÐÄÔ๲ÕñƵÂʱ¬·¢Ð³²¨Ð§Ó¦¡£ÅäºÏ¶¯Ì¬¹æÄ£¿ØÖÆÔÚ-24dBÖÁ-18dBµÄÇéÐ÷ÇúÏߣ¬ÀÖ³ÉËÜÔì³öÁîÈËÃæºì¶ú³àµÄÕæÊµ´úÈë¸Ð¡£
´Ó"Ç××컹ÈÓÒ·þÇײ±×ÓÔÉù"µÄÊÖÒÕ½âÂë¿É¼û£¬½ñÊÀÓÎÏ·ÉùЧÒѽø×ÅÃÔ¾¹¤³Ìѧн׶Ρ£ÕâЩ"ÈÈÃÅÔÉù"µÄÁ¢Òì²»µ«ÒÀÀµÂ¼Òô×°±¸µÄÉý¼¶£¬¸üÐèÒª¿çѧ¿ÆµÄÑз¢ÏµÍ³Ö§³Ö¡£Ëæ×Å"ÓÎÏ·ÎÞµ¯´°ÔÚÏß"ÊÖÒÕµÄÒ»Á¬½ø»¯£¬ÉùÒôÉè¼ÆÊ¦ÕýÔÚ¹¹½¨ÓâÔ½ÊÓ¾õÏÞÖÆµÄÇéÐ÷ת´ïͨµÀ£¬ÎªÊý×ÖÓéÀÖ´´Á¢³ö¸ü¶à¸Ð¹ÙÈںϵÄ"È«ÐÂÌåÑé"¿ÉÄÜ¡£ »î¶¯£º¡¾ÍÏÒ·þÎÇÐØÇ××ìÃþÔÚ´²ÊÓÆµÔÚÏßԢĿ-°®ÆæÒÕËÑË÷¡¿ ÔÚÕâ¸öÊý×ÖÓéÀÖʱ´ú£¬"ÌÉÔÚ´²ÉÏÍÏÒ·þÇ××ì_ÊÓÆµÔÚÏßԢĿ-°®ÆæÒÕËÑË÷"Õý³ÉΪӰÊÓÄÚÈݼìË÷µÄÈÈÃÅ·½·¨¡£±¾ÎĽ«ÉîÈëÆÊÎö°®ÆæÒÕÖÇÄÜËÑË÷ϵͳµÄÊÖÒÕÔÀí¡¢ÄÚÈÝÍÆ¼ö»úÖÆ¼°¹ÛÓ°ÌåÑéÓÅ»¯¼Æ»®£¬×ÊÖúÓû§¸ü¸ßЧ»ñȡĿµÄÓ°ÊÓ×ÊÔ´¡£ÖÇÄÜËÑË÷¹¦Ð§µÄµ×²ãÊÖÒռܹ¹
°®ÆæÒÕÊÓÆµËÑË÷ÒýÇæ½ÓÄÉÉî¶ÈѧϰËã·¨¹¹½¨µÄNLP£¨×ÔÈ»ÓïÑÔ´¦Öóͷ££©ÏµÍ³£¬Äܹ»¾«×¼Ê¶±ðÓû§ÊäÈëµÄÄ£ºýÒªº¦´Ê¡£µ±ËÑË÷"ÌÉÔÚ´²ÉÏÍÏÒ·þÇ××ì"ÕâÀàÌØ¶¨³¡¾°ÐÎòʱ£¬ÏµÍ³Í¨¹ýÓïÒåÆÊÎöÄ£¿é×Ô¶¯Æ¥ÅäÓ°ÊÓ×÷Æ·ÖÐÏàËÆµÄÇé½Ú¶ÎÂä¡£ÕâÖÖÊÖÒÕÍ»ÆÆ¹Å°åµÄÒªº¦´ÊÆ¥Åäģʽ£¬ÔËÓÃ×¢ÖØÁ¦»úÖÆ£¨Attention Mechanism£©²¶»ñÓû§ÕæÊµËÑË÷Òâͼ£¬½«Æ¥Åä׼ȷÂÊÌáÉýÖÁ93.7%¡£
¸öÐÔ»¯ÍƼöËã·¨µÄÊÂÇé»úÖÆ
ÍÆ¼öϵͳÒÀÍÐÓû§¹ÛÓ°Êý¾Ý¹¹½¨µÄÈýά»ÏñÄ£×Ó£¬°üÀ¨Ê±¶ÎÆ«ºÃ¡¢×°±¸ÌØÕ÷¡¢ÄÚÈÝÇãÏòµÈ48¸öÆÊÎöά¶È¡£ÔÚÒÆ¶¯¶Ë¾ÙÐÐ"ÊÓÆµÔÚÏßԢĿ"ʱ£¬ÏµÍ³ÊµÊ±ÆÊÎö×°±¸µÄÍÓÂÝÒÇÊý¾Ý£¬µ±¼ì²âµ½Óû§´¦ÓÚÆ½ÌÉ״̬£¬×Ô¶¯Çл»ÖÁ»¤ÑÛģʽ²¢ÍƼöÊʺϺáÆÁԢĿµÄ³¤ÊÓÆµÄÚÈÝ¡£ÕâÖÖÖÇÄÜÊÊÅä»úÖÆÊ¹ÈÕ¾ùÓû§Í£Áôʱ³¤ÔöÌí27%£¬ÕâÖÖÉè¼ÆÊÇ·ñÌáÉýÁËÄúµÄ¹ÛÓ°Ìñ¾²¶È£¿
¶à¶Ëͬ²½µÄ¹ÛÓ°Êý¾ÝÖÎÀí
°®ÆæÒÕµÄÔÆ¶Ëͬ²½ÊÖÒÕʵÏÖ¿ç×°±¸ÎÞ·ìÏνӣ¬Óû§´ÓPC¶ËËÑË÷µ½"°®ÆæÒÕËÑË÷"¼Í¼£¬¿Éʵʱͬ²½ÖÁÊÖ»ú»òƽ°å×°±¸¼ÌÐøÔ¢Ä¿¡£ÏµÍ³½ÓÄÉÂþÑÜʽ´æ´¢¼Ü¹¹£¬È·±£4K³¬ÇåÊÓÆµµÄ´«ÊäÑÓ³ÙµÍÓÚ200ms¡£Ñз¢ÍŶӽüÆÚÒýÈëµÄ±ßÑØÅÌËã½Úµã£¨Edge Computing Nodes£©£¬ÈÃÇøÓòÐÔÈÈÃÅÄÚÈݵļÓÔØËÙÂÊÌáÉý60%£¬ÌØÊâÊÇÔÚÍíá¯Áëʱ¶ÎµÄԢĿÁ÷ͨ¶È»ñµÃÏÔÖø¸ÄÉÆ¡£
ÌÕ×íʽ¹ÛӰģʽµÄÁ¢ÒìÉè¼Æ
Õë¶Ô"ÌÉÔÚ´²ÉÏ"ÕâÀàÌØÊâ¹ÛÓ°³¡¾°£¬¹¤³ÌʦÍŶӿª·¢ÁË×ÔË³Ó¦ÖØÁ¦¸ÐӦϵͳ¡£µ±×°±¸Çãб½Ç¶ÈÁè¼Ý30¶Èʱ£¬²¥·Å½çÃæ×Ô¶¯Òþ²Ø¿ØÖÆÀ¸²¢Çл»ÎªÉîÉ«Åä¾°¡£ÄúÊÇ·ñ×¢ÖØµ½ºáÆÁ״̬ÏÂÊÓÆµËõÂÔͼ»á·Å´ó1.3±¶£¿ÕâÊÇ»ùÓÚÑÛ¶¯ÒDzâÊÔÊý¾ÝÓÅ»¯µÄÊÓ¾õ¼Æ»®£¬ÓÐÓÃÌáÉý´¥ÆÁ²Ù×÷µÄÖÀÖÐÂÊ£¬Ê¹½çÃæÎó´¥ÂʽµµÍ41%¡£
ÄÚÈÝÇå¾²»úÖÆµÄÊÖÒÕ°ü¹Ü
ƽ̨ÔËÓÃAIÉó²éϵͳ¾ÙÐÐʵʱÄÚÈÝ¼à¿Ø£¬Í¨¹ýÖ¡¼¶ÆÊÎöÊÖÒÕ£¨Frame-level Analysis£©¶ÔÓ°ÊÓÆ¬¶Ï¾ÙÐкϹæÉó²é¡£µ±Óû§ËÑË÷ÌØ¶©»éÃܳ¡¾°Ê±£¬ÏµÍ³»á×Ô¶¯¼¤»îÄêËêÑé֤ģ¿é£¬²¢ÌìÉú¶¯Ì¬Ë®Ó¡È·±£ÄÚÈÝÈö²¥Çå¾²¡£ÕâÏîÊÖÒÕÕûºÏÁË108ÏîÄÚÈÝʶ±ðÌØÕ÷£¬Ê¹Î¥¹æÄÚÈÝ×èµ²ÏìӦʱ¼äËõ¶ÌÖÁ0.3Ãë¡£
´Ó"ÊÓÆµÔÚÏßԢĿ"µ½"°®ÆæÒÕËÑË÷"¹¦Ð§ÓÅ»¯£¬Æ½Ì¨Í¨¹ýÊÖÒÕÁ¢ÒìÒ»Á¬ÌáÉýÓû§ÌåÑé¡£Ã÷È·ÖÇÄÜÍÆ¼öËã·¨µÄÔËÐÐÂß¼£¬ÕÆÎÕ¶à×°±¸Ðͬ¼¼ÇÉ£¬Äܹ»ÈÃÓ°ÊÓÄÚÈݵĻñȡЧÂÊÌáÉýÊý±¶¡£Ëæ×Å5GÊÖÒÕºÍAIËãÁ¦µÄÒ»Á¬Í»ÆÆ£¬Î´À´Ó°ÊÓËÑË÷½«ÊµÏÖ¸ü¾«×¼µÄÒâͼʶ±ðºÍ¸üÌÕ×íµÄ½»»¥ÌåÑé¡£