Èýά¾í»ýºËµÄÊýѧ½¨Ä£Í»ÆÆ
¹Å°å¶þάÂ˲¨ÔÚÊÓÆµ½µÔëÖб£´æÊ±ÐòÐÅÏ¢¶ÏÁѵÄÏÈÌìÐÔȱÏÝ£¬ÕâÕýÊÇx7x7x7í§ÒâÔë108ÊÓÆµÊÖÒÕµÄË¢ÐÂÆðµã¡£¸ÃÊÖÒÕ¶À´´µÄ7x7x7Èýά¾í»ýºË£¨³¤¿í¸÷7ÏñËØ£¬Ê±¼äÖá7Ö¡£©¹¹½¨³öÁ¢·½ÌåÊý¾Ý´¦Öóͷ£µ¥Î»£¬Í¨¹ýÕÅÁ¿ÔËË㽫ʱ¿Õά¶ÈÍêÉÆñîºÏ¡£ÔÚ108²ãÉî¶ÈÍøÂç¼Ü¹¹Ö§³ÖÏ£¬ÏµÍ³ÄÜͬʱÆÊÎö¿Õ¼äÔëµãÂþÑÜÓëʱ¼äÔ˶¯¹ì¼££¬ÊµÏֹŰåÒªÁìÄÑÒÔÆó¼°94.3%µÄÔëµãʶ±ð¾«¶È¡£ÕâÖÖ½¨Ä£·½·¨ÔõÑùƽºâÅÌËãЧÂÊ£¿Òªº¦ÔÚÓÚ¶¯Ì¬È¨Öص÷½â»úÖÆ£¬¿Éƾ֤ÊÓÆµÄÚÈÝÖØÆ¯ºó×Ô¶¯µ÷Àí¾í»ý²ã¼ÓÈë¶È¡£
ʱ¿ÕÓòÁªºÏ½µÔëËã·¨ÆÊÎö
ÔÚx7x7x7í§ÒâÔë108ÊÓÆµ´¦Öóͷ£Á÷³ÌÖУ¬Á¢ÒìµÄʱ¿ÕÓòÁªºÏ½µÔë»úÖÆÊÇÆä½¹µã¾ºÕùÁ¦¡£ÏµÍ³Í¨¹ýÈý¼¶ÔëÉùÌØÕ÷ÌáÈ¡ÍøÂ磬ÔÚ¿Õ¼äά¶ÈÊèÉ¢½á¹¹ÐÔÔëµã£¨ÈçCMOSÈÈÔ룩£¬ÔÙÔÚʱ¼äÖá×·×ÙËæ»úÐÔÔëµã£¨ÈçѹËõαӰ£©¡£ÊµÑéÊý¾ÝÏÔʾ£¬¸ÃËã·¨ÔÚ±£´æ92%ÔÊ¼ÎÆÀíϸ½ÚµÄÌõ¼þÏ£¬ÔëµãÐÅÔë±ÈÌáÉýµÖ´ï18.7dB¡£ÌØÊâÉè¼ÆµÄÔ˶¯Åâ³¥×Óϵͳ£¬¿É×¼È·Çø·ÖÕæÊµÎïÌåÔ˶¯ÓëÔëµã×ÌÈÅ£¬×èÖ¹¹Å°å½µÔëÊÖÒÕÖг£¼ûµÄÍÏÓ°Õ÷Ïó¡£
Éî¶ÈѧϰÇý¶¯µÄ×Ô˳ӦÓÅ»¯
x7x7x7í§ÒâÔë108ÊÓÆµÏµÍ³¼¯³ÉÁËÉî¶ÈÇ¿»¯Ñ§Ï°¿ò¼Ü£¬ÕâÊÇ×ÅʵÏÖí§ÒâÔë´¦Öóͷ£µÄÒªº¦¡£ÏµÍ³°üÀ¨108¸ö»¥Á¬µÄÉñ¾ÍøÂçÄ£¿é£¬Ã¿¸öÄ£¿éרÃÅ´¦Öóͷ£Ìض¨ÀàÐ͵ÄÊÓÆµÔëÉù¡£Í¨¹ýÔÚÏßѧϰ»úÖÆ£¬´¦Öóͷ£ÏµÍ³ÄÜʵʱÆÊÎöÊäÈëÊÓÆµµÄÔëÉùÌØÕ÷Æ×£¬¶¯Ì¬µ÷½â½µÔëÇ¿¶È²ÎÊý¡£ÔÚ¼«¶ËµÍ¹â²âÊÔ³¡¾°ÖУ¬¸ÃϵͳչÏÖ³ö¾ªÈ˵Ä×Ô˳ӦÄÜÁ¦£¬ÔëµãÒÖÖÆÂʽÏÀο¿²ÎÊýϵͳÌáÉý41.6%£¬Í¬Ê±½«Ï¸½ÚËðʧ¿ØÖÆÔÚÈËÀàÊÓ¾õ²»¿É²ì¾õµÄ0.3%ÒÔÄÚ¡£
Ó²¼þ¼ÓËÙʵÏÖʵʱ´¦Öóͷ£
ÒªÈÃ7x7x7µÄÈýά¾í»ýÔËËãµÖ´ïʵʱ´¦Öóͷ£±ê×¼£¬×¨ÓÃÓ²¼þ¼Ü¹¹Éè¼Æ¹¦²»¿Éû¡£¸ÃÊÖÒÕ½ÓÄÉÂþÑÜʽÕÅÁ¿´¦Öóͷ£Æ÷£¨TPU£©ÕóÁУ¬½«Á¢·½Ìå¾í»ýÔËËãÆÊÎöΪ²¢ÐÐ×ÓʹÃü¡£Í¨¹ýÄÚ´æÅÌËãÒ»Ì廯Éè¼Æ£¬Êý¾Ý°áÔËÄܺĽµµÍ73%£¬Ê¹µÃ4K/60fpsÊÓÆµµÄʵʱ½µÔë³ÉΪ¿ÉÄÜ¡£ÔÚÁ÷ʽ´¦Öóͷ£¹ÜµÀÖУ¬ÖÇÄÜ»º´æÔ¤È¡»úÖÆ¿ÉÌáǰ3Ö¡Õ¹ÍûÔëÉùÂþÑÜ£¬ÅäºÏ108¼¶Á÷Ë®Ï߼ܹ¹£¬½«¶Ëµ½¶ËÑÓ³ÙѹËõÖÁ8msÒÔÄÚ£¬Íêȫ֪×ã¹ã²¥µçÊÓ¼¶Ê±ÑÓÒªÇó¡£
¶à³¡¾°Ó¦ÓÃЧÄÜÑéÖ¤
¾ÓÉҽѧӰÏñ¡¢ÎÀÐÇÒ£¸Ð¡¢Ó°ÊÓÖÆ×÷µÈ¶àÁìÓòʵ²â£¬x7x7x7í§ÒâÔë108ÊÓÆµÏµÍ³Õ¹ÏÖ³ö׿ԽµÄͨÓÃÐÔ¡£ÔÚ8K³¬ÏÔ΢ÊÖÊõÊÓÆµ´¦Öóͷ£ÖУ¬ÏµÍ³ÔÚ±£´æÃ«Ï¸Ñª¹ÜÎÆÀíµÄͬʱ£¬Ïû³ý99.2%µÄµç×ÓÔëÉù¡£¸üÁîÈËÖõÄ¿µÄÊÇÆäÔÚÀϾÉӰƬÐÞ¸´ÖеÄÌåÏÖ£¬Í¨¹ýʱÐòÔëÉù½¨Ä££¬ÀÖ³ÉÊèÉ¢»®ºÛÔëµãÓëÕæÊµÓ°ÏñÄÚÈÝ£¬½«°ÙÄêÀúÊ·½ºÆ¬µÄ¿ÉÊÓÖÊÁ¿ÌáÉýÖÁÊý×ÖÓ°Ôº±ê×¼¡£ÕâÖÖ¿çÓò˳ӦÄÜÁ¦µÄȪԴ£¬ÔÚÓÚÆäÆæÒìµÄÌØÕ÷½âñîËã·¨Éè¼Æ¡£
x7x7x7í§ÒâÔë108ÊÓÆµÊÖÒÕÖØÐ½ç˵ÁËÊÓÆµ½µÔëµÄÐÐÒµ±ê×¼£¬ÆäÁ¢ÒìÐÔµÄÈýά´¦Öóͷ£·¶Ê½ÕýÔÚÖØËÜ´ÓÏûºÄµç×Óµ½×¨ÒµÓ°ÊÓµÄÍêÕû¹¤ÒµÁ´¡£Ëæ×űßÑØÅÌËã×°±¸µÄËãÁ¦ÌáÉý£¬ÕâÏîÈÚºÏÉî¶ÈѧϰºÍÓ²¼þ¼ÓËٵĺڿƼ¼£¬±Ø½«ÔÚÖÇÄܰ²·À¡¢×Ô¶¯¼ÝÊ»µÈÁìÓò¿ª·¢¸üÁÉÀ«µÄÓ¦Óÿռ䡣ÊÓÆµ´¦Öóͷ£ÊÖÒÕµÄÏÂÒ»´Î¸ïÃü£¬»òÐí¾ÍÒþ²ØÔÚ7x7x7µÄÁ¢·½Ìå¾í»ýºËÖ®ÖС£ÔëÉùÈë¿ÚµÄÊýѧ½¨Ä£»ù´¡
ÔÚÊý×ÖÐźŴ¦Öóͷ££¨DSP£©ÁìÓò£¬7x7x7x7x7µÄ¶àάÔëÉùÈë¿ÚÉè¼ÆÔ´×ÔÏãÅ©²ÉÑù¶¨ÀíµÄÀ©Õ¹Ó¦Óá£Ã¿¸öά¶È¶ÔÓ¦²î±ðµÄÔëÉù²ÎÊýά¶È£¬°üÀ¨Ê±¼äÇø·ÖÂÊ¡¢Æµ¶ÎÔöÒæ¡¢ÏàÎ»Æ«ÒÆµÈ½¹µãÒªËØ¡£ÆäÖеÚÒ»¸ö7´ú±í7ÖÖ»ù´¡°×ÔëÉùÀàÐÍ£¬µÚ¶þ¸ö7¶ÔÓ¦7¸ö¶¯Ì¬Ñ¹Ëõ±ÈÉèÖ㬸ýṹͨ¹ý×Ô˳ӦȨֵ¾ØÕó½«5¸öά¶È²ÎÊý½»Ö¯Èںϣ¬Ðγɸߴï
16,807ÖÖ×éºÏµÄµ÷²Î¿Õ¼ä¡£
²ÎÊýά¶ÈµÄ½¹µã²î±ðµã
Îå¸ö7´Î·½²ÎÊý×éµÄÇø±ðÖ÷Òª¼¯ÖÐÔÚ½µÔëÂß¼µÄÌõÀí¼Ü¹¹ÉÏ¡£Ç°Èý¸ö7Òò×Ó¿ØÖÆÊäÈëÐźŵÄÔ¤´¦Öóͷ£Á÷³Ì£¬°üÀ¨ÔëÉùÃÅÏÞ£¨Noise Gate£©µÄʱÓòÇиƵ¶Î¸ôÀëµÄ½×ÊýÉ趨ÒÔ¼°¶¯Ì¬¹æÄ£Ñ¹Ëõ£¨DRC£©µÄѹËõ±È²ÎÊý¡£ºóÁ½¸ö7Òò×ÓÔòÈÏÕæºó´¦Öóͷ£½×¶ÎµÄ²ÎÊýÉèÖã¬ÌØÊâÊǿռä»ìÏìµÄË¥¼õʱ¼äºÍÁ¢ÌåÉùÊèÉ¢¶ÈµÄµ÷Àí²ÎÊý£¬Õâ¶Ô×îÖÕÒôЧµÄ¶¨Î»¾«¶È±¬·¢¾öÒéÐÔÓ°Ïì¡£
ʵʱÅÌËãµÄÊÖÒÕÆ¿¾±Í»ÆÆ
ÔõÑùÔÚÒÆ¶¯¶ËʵÏÖ¸ÃÖØ´ó²ÎÊýµÄʵʱÔËË㣿¶¶Òô¹¤³Ìʦ½ÓÄɷֲ㴦Öóͷ£¼Ü¹¹£¬½«Îåά²ÎÊýÆÊÎöΪԤ´¦Öóͷ£²ã¡¢ÌØÕ÷ÌáÈ¡²ãºÍºó´¦Öóͷ£²ãµÄÈý¼¶Á÷Ë®Ïß¡£Ê¹ÓÃNEONÖ¸ÁÓÅ»¯FIRÂ˲¨Æ÷×éµÄ²¢ÐÐÅÌË㣬ͨ¹ýARM Mali GPUµÄ¾ØÕó¼ÓËÙµ¥Î»Íê³ÉÈ¨ÖØÏµÊýµÄ¶¯Ì¬µ÷½â¡£ÕâÖÖ»ìÏýÅÌËã¼Ü¹¹½«¹Å°åÐèÒª3.2msµÄÅÌËãÖÜÆÚѹËõÖÁ1.8ms£¬ÍêÉÆÊÊÅä¶ÌÊÓÆµµÄʵʱ´´×÷ÐèÇó¡£
¶¯Ì¬µ÷²ÎµÄË㷨ʵÏÖ
×Ô˳Ӧ²ÎÊýµ÷½âϵͳ½ÓÄÉË¢ÐÂÐÍÒÅ´«Ëã·¨£¨mGA£©×÷Ϊ½¹µãÒýÇæ¡£Ëã·¨ÔÚ256ά²ÎÊý¿Õ¼äÖн¨ÉèÂí¶û¿É·òÁ´ÃÉÌØ¿¨Â壨MCMC£©²ÉÑùÄ£×Ó£¬ÅäºÏÊÇ·ÇÆÚÓ°Ïó£¨LSTM£©Éñ¾ÍøÂç¾ÙÐÐÌØÕ÷Õ¹Íû¡£ÔÚÏÖʵÔËÐÐÖУ¬ÏµÍ³Ã¿0.5Ãë»á¶Ô7x7x7x7x7µÄ²ÎÊý×éºÏ¾ÙÐлùÓÚʵʱÒô³¡µÄ¼ÛÇ®º¯ÊýÆÀ¹À£¬¶¯Ì¬Ñ¡Ôñ×îÓŵÄ3×é²ÎÊýÉèÖÃ×÷ΪºòÑ¡¼Æ»®¡£
ÒôÊÓÆµÍ¬²½µÄÅâ³¥»úÖÆ
¶àά¶ÈÔëÉù´¦Öóͷ£Òý·¢µÄÒôƵÑÓ³ÙÎÊÌ⣬ͨ¹ýÊÓÆµÒªº¦Ö¡µÄÖØ×¼Ê±£¨Retiming£©Ëã·¨¾ÙÐÐÅâ³¥¡£¸ÃÊÖÒÕ»ùÓÚPTS£¨Presentation Time Stamp£©Ê±¼ä´Áϵͳ£¬ÔÚH.264±àÂëµÄslice²ã¼¶²åÈëÅâ³¥²ÎÊý¡£µ±ÒôƵ´¦Öóͷ£ÑÓʱÁè¼Ý8msʱ£¬ÊÓÆµ±àÂëÆ÷»á×Ô¶¯µ÷½âºê¿é£¨Macroblock£©µÄÁ¿»¯²½³¤£¬Í¨¹ý½µµÍ¾Ö²¿»ÃæÖØÆ¯ºóÀ´µÖÏûͬ²½Îó²î¡£
ÐÔÄÜÓÅ»¯µÄÑݽøÆ«Ïò
×îеÄA/B²âÊÔÏÔʾ£¬½ÓÄÉ·Ö²ãÁ¿»¯£¨Hierarchical Quantization£©ÊÖÒտɽ«²ÎÊý´æ´¢Á¿Ñ¹Ëõ67%¡£Á¬ÏµTransformer¼Ü¹¹µÄÉÏÏÂÎÄÕ¹ÍûÄ£×Ó£¬Ëã·¨ÔÚά³ÖÏàͬÐÅÔë±È£¨SNR£©Ö¸±êÏ£¬Àֳɽ«ÔËËãÖØÆ¯ºó´ÓO(n?)½µÖÁO(n?)¡£ÕâΪδÀ´ÔöÌíÔëÉùά¶ÈºÍ¾«¶ÈÌáÉýÌṩÁ˸»×ãµÄÊÖÒÕÈßÓà¿Õ¼ä¡£
͸¹ý¶Ô7x7x7x7x7í§ÒâÔëÈë¿ÚµÄ¶àÌõÀíÊÖÒÕÆÊÎö£¬ÎÒÃÇ¿ÉÒÔÇåÎú¿´µ½ÒôƵËã·¨¹¤³ÌʦÔÚÒÆ¶¯¶Ëʵʱ´¦Öóͷ£ÁìÓòµÄÁ¢ÒìÖǻۡ£´ÓÎåά²ÎÊý×éµÄ²î±ð»¯Éè¼Æµ½»ìÏýÅÌËã¼Ü¹¹µÄÓÅ»¯Êµ¼ù£¬ÕâЩÊÖÒÕÁ¢Òì²»µ«ÌáÉýÁËÒôÊÓÆµ´´×÷ÌåÑ飬¸üÎªÒÆ¶¯¶ËʵʱÐźŴ¦Öóͷ£È·Á¢ÁËеÄÊÖÒÕ·¶Ê½¡£Ëæ×ÅÁ¿»¯Ñ¹ËõºÍÐÂÐÍÕ¹ÍûÄ£×ÓµÄÒ»Á¬Ñݽø£¬ÕâÀàÖØ´óÔëÉùÈë¿Úϵͳ±Ø½«Êͷųö¸ü´óµÄ´´×÷¿ÉÄÜÐÔ¡£