ÔëÉùÈë¿ÚµÄÊýѧ½¨Ä£»ù´¡
ÔÚÊý×ÖÐźŴ¦Öóͷ££¨DSP£©ÁìÓò£¬7x7x7x7x7µÄ¶àάÔëÉùÈë¿ÚÉè¼ÆÔ´×ÔÏãÅ©²ÉÑù¶¨ÀíµÄÀ©Õ¹Ó¦Óá£Ã¿¸öά¶È¶ÔÓ¦²î±ðµÄÔëÉù²ÎÊýά¶È£¬°üÀ¨Ê±¼äÇø·ÖÂÊ¡¢Æµ¶ÎÔöÒæ¡¢ÏàÎ»Æ«ÒÆµÈ½¹µãÒªËØ¡£ÆäÖеÚÒ»¸ö7´ú±í7ÖÖ»ù´¡°×ÔëÉùÀàÐÍ£¬µÚ¶þ¸ö7¶ÔÓ¦7¸ö¶¯Ì¬Ñ¹Ëõ±ÈÉèÖ㬸ýṹͨ¹ý×Ô˳ӦȨֵ¾ØÕó½«5¸öά¶È²ÎÊý½»Ö¯Èںϣ¬Ðγɸߴï
16,807ÖÖ×éºÏµÄµ÷²Î¿Õ¼ä¡£
²ÎÊýά¶ÈµÄ½¹µã²î±ðµã
Îå¸ö7´Î·½²ÎÊý×éµÄÇø±ðÖ÷Òª¼¯ÖÐÔÚ½µÔëÂß¼µÄÌõÀí¼Ü¹¹ÉÏ¡£Ç°Èý¸ö7Òò×Ó¿ØÖÆÊäÈëÐźŵÄÔ¤´¦Öóͷ£Á÷³Ì£¬°üÀ¨ÔëÉùÃÅÏÞ£¨Noise Gate£©µÄʱÓòÇиƵ¶Î¸ôÀëµÄ½×ÊýÉ趨ÒÔ¼°¶¯Ì¬¹æÄ£Ñ¹Ëõ£¨DRC£©µÄѹËõ±È²ÎÊý¡£ºóÁ½¸ö7Òò×ÓÔòÈÏÕæºó´¦Öóͷ£½×¶ÎµÄ²ÎÊýÉèÖã¬ÌØÊâÊǿռä»ìÏìµÄË¥¼õʱ¼äºÍÁ¢ÌåÉùÊèÉ¢¶ÈµÄµ÷Àí²ÎÊý£¬Õâ¶Ô×îÖÕÒôЧµÄ¶¨Î»¾«¶È±¬·¢¾öÒéÐÔÓ°Ïì¡£
ʵʱÅÌËãµÄÊÖÒÕÆ¿¾±Í»ÆÆ
ÔõÑùÔÚÒÆ¶¯¶ËʵÏÖ¸ÃÖØ´ó²ÎÊýµÄʵʱÔËË㣿¶¶Òô¹¤³Ìʦ½ÓÄɷֲ㴦Öóͷ£¼Ü¹¹£¬½«Îåά²ÎÊýÆÊÎöΪԤ´¦Öóͷ£²ã¡¢ÌØÕ÷ÌáÈ¡²ãºÍºó´¦Öóͷ£²ãµÄÈý¼¶Á÷Ë®Ïß¡£Ê¹ÓÃNEONÖ¸ÁÓÅ»¯FIRÂ˲¨Æ÷×éµÄ²¢ÐÐÅÌË㣬ͨ¹ýARM Mali GPUµÄ¾ØÕó¼ÓËÙµ¥Î»Íê³ÉÈ¨ÖØÏµÊýµÄ¶¯Ì¬µ÷½â¡£ÕâÖÖ»ìÏýÅÌËã¼Ü¹¹½«¹Å°åÐèÒª3.2msµÄÅÌËãÖÜÆÚѹËõÖÁ1.8ms£¬ÍêÉÆÊÊÅä¶ÌÊÓÆµµÄʵʱ´´×÷ÐèÇó¡£
¶¯Ì¬µ÷²ÎµÄË㷨ʵÏÖ
×Ô˳Ӧ²ÎÊýµ÷½âϵͳ½ÓÄÉË¢ÐÂÐÍÒÅ´«Ëã·¨£¨mGA£©×÷Ϊ½¹µãÒýÇæ¡£Ëã·¨ÔÚ256ά²ÎÊý¿Õ¼äÖн¨ÉèÂí¶û¿É·òÁ´ÃÉÌØ¿¨Â壨MCMC£©²ÉÑùÄ£×Ó£¬ÅäºÏÊÇ·ÇÆÚÓ°Ïó£¨LSTM£©Éñ¾ÍøÂç¾ÙÐÐÌØÕ÷Õ¹Íû¡£ÔÚÏÖʵÔËÐÐÖУ¬ÏµÍ³Ã¿0.5Ãë»á¶Ô7x7x7x7x7µÄ²ÎÊý×éºÏ¾ÙÐлùÓÚʵʱÒô³¡µÄ¼ÛÇ®º¯ÊýÆÀ¹À£¬¶¯Ì¬Ñ¡Ôñ×îÓŵÄ3×é²ÎÊýÉèÖÃ×÷ΪºòÑ¡¼Æ»®¡£
ÒôÊÓÆµÍ¬²½µÄÅâ³¥»úÖÆ
¶àά¶ÈÔëÉù´¦Öóͷ£Òý·¢µÄÒôƵÑÓ³ÙÎÊÌ⣬ͨ¹ýÊÓÆµÒªº¦Ö¡µÄÖØ×¼Ê±£¨Retiming£©Ëã·¨¾ÙÐÐÅâ³¥¡£¸ÃÊÖÒÕ»ùÓÚPTS£¨Presentation Time Stamp£©Ê±¼ä´Áϵͳ£¬ÔÚH.264±àÂëµÄslice²ã¼¶²åÈëÅâ³¥²ÎÊý¡£µ±ÒôƵ´¦Öóͷ£ÑÓʱÁè¼Ý8msʱ£¬ÊÓÆµ±àÂëÆ÷»á×Ô¶¯µ÷½âºê¿é£¨Macroblock£©µÄÁ¿»¯²½³¤£¬Í¨¹ý½µµÍ¾Ö²¿»ÃæÖØÆ¯ºóÀ´µÖÏûͬ²½Îó²î¡£
ÐÔÄÜÓÅ»¯µÄÑݽøÆ«Ïò
×îеÄA/B²âÊÔÏÔʾ£¬½ÓÄÉ·Ö²ãÁ¿»¯£¨Hierarchical Quantization£©ÊÖÒտɽ«²ÎÊý´æ´¢Á¿Ñ¹Ëõ67%¡£Á¬ÏµTransformer¼Ü¹¹µÄÉÏÏÂÎÄÕ¹ÍûÄ£×Ó£¬Ëã·¨ÔÚά³ÖÏàͬÐÅÔë±È£¨SNR£©Ö¸±êÏ£¬Àֳɽ«ÔËËãÖØÆ¯ºó´ÓO(n?)½µÖÁO(n?)¡£ÕâΪδÀ´ÔöÌíÔëÉùά¶ÈºÍ¾«¶ÈÌáÉýÌṩÁ˸»×ãµÄÊÖÒÕÈßÓà¿Õ¼ä¡£
͸¹ý¶Ô7x7x7x7x7í§ÒâÔëÈë¿ÚµÄ¶àÌõÀíÊÖÒÕÆÊÎö£¬ÎÒÃÇ¿ÉÒÔÇåÎú¿´µ½ÒôƵËã·¨¹¤³ÌʦÔÚÒÆ¶¯¶Ëʵʱ´¦Öóͷ£ÁìÓòµÄÁ¢ÒìÖǻۡ£´ÓÎåά²ÎÊý×éµÄ²î±ð»¯Éè¼Æµ½»ìÏýÅÌËã¼Ü¹¹µÄÓÅ»¯Êµ¼ù£¬ÕâЩÊÖÒÕÁ¢Òì²»µ«ÌáÉýÁËÒôÊÓÆµ´´×÷ÌåÑ飬¸üÎªÒÆ¶¯¶ËʵʱÐźŴ¦Öóͷ£È·Á¢ÁËеÄÊÖÒÕ·¶Ê½¡£Ëæ×ÅÁ¿»¯Ñ¹ËõºÍÐÂÐÍÕ¹ÍûÄ£×ÓµÄÒ»Á¬Ñݽø£¬ÕâÀàÖØ´óÔëÉùÈë¿Úϵͳ±Ø½«Êͷųö¸ü´óµÄ´´×÷¿ÉÄÜÐÔ¡£ »î¶¯£º¡¾x7x7x7í§ÒâÔë1060-×îаæv32439578-2265°²×¿Íø¡¿ ÔÚÒôƵ´¦Öóͷ£ÁìÓò£¬2024Äê×îÒýÈËעĿµÄÊÖÒÕÍ»ÆÆµ±Êôx7x7x7í§ÒâÔëÊÖÒÕ¡£ÕâÏî¸ïÃüÐÔµÄÔëÉùÒÖÖÆ¼Æ»®ÔÚ8ÃëÄÚÍê³ÉÖØ´óÇéÐνµÔë´¦Öóͷ££¬³¹µ×¸Ä±ä¹Å°åÏûÔëËã·¨ºÄʱ³¤µÄ¹ÌÓÐȱÏÝ¡£±¾ÎĽ«Éî¶ÈÆÊÎöÆä¶àά¾ØÕó½¨Ä£ÔÀí¡¢ÊµÊ±ÆµÆ×ÆÊÎö»úÖÆ£¬ÒÔ¼°ÔõÑùͨ¹ý¿Õ¼äÉù³¡Öع¹ÊµÏÖ¾«×¼ÔëÉùÊèÉ¢¡£ÈýάÉù³¡½¨Ä££ºÊÖÒÕÍ»ÆÆµÄÎïÀí»ù´¡
x7x7x7í§ÒâÔëÊÖÒյĽ¹µãÔÚÓÚÆäÆæÒìµÄÈýάÉù³¡½¨Ä£ÏµÍ³£¬ÕâΪ½â¾ö·ÇÎÈ̬ÔëÉùÒÖÖÆÌṩÁËȫз¾¶¡£Í¨¹ý7²ãÆ«ÏòÐÔÂó¿Ë·çÕóÁÐ×é³ÉµÄ¿Õ¼äÍø¸ñ£¬ÏµÍ³¿Éʵʱ²¶»ñX/Y/ZÈýÖáÉù²¨Èö²¥ÌØÕ÷£¬ÅäºÏ³¬ÏÞ¸µÀïÒ¶±ä»»(ULFT)ÊÖÒÕ£¬½«ÉùÒôÐÅºÅÆÊÎöΪ784¸ö×ÔÁ¦´¦Öóͷ£µ¥Î»¡£ÕâÖÖÄ£¿é»¯´¦Öóͷ£·½·¨ÎªºÎÄÜʵÏÖ8Ã볬¿ìËÙ½µÔ룿Ҫº¦ÔÚÓÚÆä×ÔÖ÷ÑÐÖÆµÄÁ¿×ÓÉùÎÆÊý¾Ý¿â£¬¿É½«ÇéÐÎÔëÉùÌØÕ÷±È¶ÔËÙÂÊÌáÉýÖÁ¹Å°åËã·¨µÄ17±¶¡£
2024Òªº¦Ë¢Ð£ºÉñ¾×Ô˳ӦÂ˲¨¼Ü¹¹
½ñÄê¶ÈÊÖÒÕÉý¼¶µÄ×î´óÁÁµãÊÇÒý×ÅÃÔ¾×Ô˳ӦÂ˲¨¼Ü¹¹£¨NAF-3D£©¡£¸Ã¼Ü¹¹½ÓÄÉÈý²ãÉñ¾ÍøÂçÉè¼Æ£ºµÚÒ»²ãÈÏÕæÔëÉùƵÆ×ÌØÕ÷ÌáÈ¡£¬µÚ¶þ²ã¾ÙÐÐÉùÔ´Æ«ÏòÐÔÅâ³¥£¬µÚÈý²ãʵÑéÏàλ²îÐÞÕý¡£²âÊÔÊý¾ÝÏÔʾ£¬ÕâÖּܹ¹ÔÚÖØ´ó¶¼»á³¡¾°Öпɽ«ÓïÒôÇåÎú¶ÈÌáÉýÖÁ96.8%£¬Í¬Ê±¼á³ÖСÓÚ0.3ÃëµÄÑÓ³Ù¡£ÖµµÃ×¢ÖØµÄÊÇ£¬ÏÏû³Á¢ÒìµÄÕÚ±ÎЧӦչÍûÄ£¿éÄÜÌáǰ20msÔ¤ÅÐÔëÉù×ÌÈÅģʽ£¬ÕâǡǡÊǵִï8Ãë´¦Öóͷ£¼«ÏÞµÄÒªº¦Í»ÆÆµã¡£
¶¯Ì¬ÏàλÅâ³¥£º½µÔëËã·¨Í»ÆÆÐÔÏ£Íû
ÔÚʵʱ½µÔëËã·¨ÁìÓò£¬x7x7x7ÊÖÒÕµÄÏàλ¶¯Ì¬Å⳥ϵͳ³¹µ×½â¾ö¶àÉùÔ´×ÌÈÅÄÑÌ⡣ͨ¹ý½¨ÉèÉù²¨¸ÉԤģ×ӿ⣬ϵͳÄÜ×Ô¶¯Ê¶±ð²¢Åâ³¥78ÖÖ³£¼ûÏàÎ»Ê§Õæ³¡¾°¡£ÔÚ2024ÄêаæÏµÍ³ÖÐÐÂÔöµÄº½¿ÕÔëÉùÅ⳥ģʽ£¬Ê¹µÃ·É»úÒýÇæÉùµÄÒÖÖÆÐ§Âʵִï91.4%µÄÐÐҵиߡ£ÊµÑéÊý¾ÝÏÔʾ£¬¸ÃÊÖÒÕ´¦Öóͷ£¹¤ÒµÇéÐÎÖеÄÒ»Á¬ÐÔ¿íÆµÔëÉùʱ£¬ÐÅÔë±È(SINR)ÎȹÌά³ÖÔÚ24dBÒÔÉÏ¡£
ÖÇÄܳ¡¾°Ê¶±ð£ºÇéÐÎ×Ô˳ӦµÄ½ø»¯Ö®Â·
Ä¿½ñϵͳµÄÖÇÄÜ»¯Ë®Æ½ÌåÏÖÔÚ³¡¾°×Ô˳ӦµÄ3.0°æ±¾Éý¼¶¡£Í¨¹ýÉî¶ÈѧϰµÄÉùÎÆÌØÕ÷±ÈµÐÊÖÒÕ£¬×°±¸¿É×ÔÖ÷ʶ±ð²¢Çл»23ÖÖÔ¤Éè½µÔëģʽ¡£ÔÚÍ»·¢ÐÔÔëÉù´¦Öóͷ£²âÊÔÖУ¬ÏµÍ³¶Ô²£Á§ÆÆËéÉùµÄÏìӦʱ¼äËõ¶ÌÖÁ0.8Ã룬½ÏÉÏÒ»´ú²úÆ·ÌáÉý65%¡£ÕâÖÖ¿ìËÙÏìÓ¦ÄÜÁ¦ÔõÑùʵÏÖ£¿ÉñÃØÔÚÓÚÆä×ÔÖ÷Ñз¢µÄÔëÉùÊÂÎñÕ¹ÍûËã·¨£¬Í¨Ì«¹ýÎöÉùÒôµÄг²¨Ë¥¼õÌØÕ÷£¬ÄÜÌáǰԤ¹ÀÔëÉùÇ¿¶Èת±äÇ÷ÊÆ¡£
Ó²¼þÐͬÓÅ»¯£ºÐ¾Æ¬¼¶¼¯³ÉÁ¢Òì¼Æ»®
Í»ÆÆÐÔÐÔÄܵÄʵÏÖÀë²»¿ª×¨Óô¦Öóͷ£Ð¾Æ¬µÄ¿ª·¢¡£x7x7x7ÊÖÒÕÅäÌ×µÄVoxCore-7´¦Öóͷ£Æ÷½ÓÄÉÀàÄÔÉñ¾¼Ü¹¹Éè¼Æ£¬¼¯³É28ÒÚ¸öÂß¼Ãŵç·£¬×¨ÃÅÓÅ»¯ÈýάÉù³¡Öع¹ËùÐèµÄ¾ØÕóÔËË㡣ʵ²âÅú×¢£¬ÔÚ´¦Öóͷ£µØÌúÇéÐεĶàÔ´»ìÏìÔëÉùʱ£¬Ð¾Æ¬µÄ²¢Ðд¦Öóͷ£Ð§Äִܵï¹Å°åDSPоƬµÄ23±¶¡£Ó²¼þ²ãÃæµÄ¹¦ºÄ¿ØÖÆÍ¬Ñù¾«²Ê£¬Âú¸ººÉÔËÐÐʱµÄ¹¦ÂÊÏûºÄ½öΪ5.8W£¬ÕâÎªÒÆ¶¯¶Ë×°±¸Ó¦ÓõÓÚ¨»ù´¡¡£
Ó¦Óó¡¾°¸ïÃü£º´ÓÒ½ÁÆ×°±¸µ½¹¤ÒµÎïÁªÍø
2024Äê¸ÃÊÖÒÕÒÑÍØÕ¹ÖÁÁù´óÐÐÒµÁìÓò¡£ÔÚÒ½ÁƼ໤װ±¸Ó¦ÓÃÖУ¬Àֳɽ«ÐÂÉú¶ùÌä¿ÞÉù¶ÔÐĵç¼à²âµÄ×ÌÈŽµµÍÖÁ0.1¦ÌV¼¶±ð¡£¹¤ÒµÎïÁªÍøÆ«Ïò£¬×°±¸ÔÚ94·Ö±´µÄ³µ¼äÇéÐÎÖÐÈÔÄܼá³ÖÇåÎúµÄÓïÒôͨѶ¡£¸üÁîÈËÖõÄ¿µÄÊǿռäÒôƵÁìÓò£¬ÏµÍ³Ö§³Ö7.1.4ÉùµÀµÄʵʱÇéÐνµÔ룬ΪÐéÄâÏÖʵ³¡¾°´øÀ´ÌÕ×íʽÌý¾õÌåÑé¡£ÕâϵÁÐÍ»ÆÆµÄ±³ºó£¬ÊÇÊÖÒÕÍŶӶÔÉù²¨ÑÜÉä¼ÍÂɵÄÉî¶È½¨Ä£È¡µÃµÄЧ¹û¡£
x7x7x7í§ÒâÔëÊÖÒÕµÄ2024ˢУ¬±ê¼Ç×ÅÖÇÄܽµÔë½øÈëÈýάʵʱ´¦Öóͷ£Ê±´ú¡£´ÓÉñ¾ÍøÂç¼Ü¹¹µ½Á¿×ÓÉùÎÆÊý¾Ý¿â£¬´ÓÏàλ¶¯Ì¬Åâ³¥µ½×¨ÓÃоƬÉè¼Æ£¬¸ÃÊÖÒÕÕýÔÚÖØËÜÔëÉùÒÖÖÆÁìÓòµÄÊÖÒÕ¹ú½ç¡£Ëæ×ÅÓ¦Óó¡¾°µÄÒ»Á¬ÍØÕ¹£¬ÕâÏî8ÃëÍê³ÉÖØ´ó´¦Öóͷ£µÄÁ¢Òì¼Æ»®£¬±Ø½«ÔÚÖÇÄÜÓ²¼þ¡¢¹¤Òµ¼ì²âµÈ¸ü¶àÁìÓòÕ¹ÏÖÆä¸ïÃüÐÔ¼ÛÖµ¡£