ÍÆËã»úѧԺ×êÑÐÉúÔÚÖйúÍÆËã»úѧ»áCCF AÀà»áÒé°ä·¢×îÐÂ×êÑгɾÍ

°ä²¼¹¦·ò£º2023-09-04Ͷ¸å£º°¬Ãô ²¿ÃÅ£ºÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§Ôº ä¯ÀÀ´ÎÊý£º

½üÆÚ £¬ÈËΪÖÇÄÜÁìÓò¹ú¼ÊѧÊõ»áÒéIJCAI 2023£¨ÖйúÍÆËã»úѧ»áCCF AÀà»áÒ飩ÓÚ8ÔÂ19ÈÕÖÁ8ÔÂ25ÈÕÔÚÖйú°ÄÃÅÕÙ¿ª £¬CA88ÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§ÔºÀîÏþÇ¿¸±½ÌÊÚ¿ÎÌâ×éµÄ×êÑгɾ͡°Hierarchical Semantic Contrast for Weakly Supervised Semantic Segmentation¡±±»¸Ã»áÒé½Ó¹Ü¼Óà £¬²¢ÔÚ´ó»á½øÐпÚÍ·»ã±¨  ¡£IJCAIÈ«³Æ¹ú¼ÊÈËΪÖÇÄܽáºÏ»áÒ飨International Joint Conference on Artificial Intelligence£© £¬¸Ã»áÒéÊÇÊǹú¼ÊÈËΪÖÇÄܽç×îÓÐÓ°ÏìÁ¦ºÍȨÍþÐÔµÄÊ¢»áÖ®Ò» £¬ÔÚÊÀ½çÁìÓòÄÚÿÄêÕÙ¿ªÒ»´Î £¬±¾½ì»áÒé¼ÓÃÂÊԼΪ15%  ¡£

¸Ã×êÑй¤×÷Êܵ½ÉϺ£ÊпÆÎ¯ÈËΪÖÇÄܳÁµãÏîĿ֧³Ö £¬ÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§Ôº2022¼¶Ë¶Ê¿×êÑÐÉúÎâÔ¶³¾ÎªÂÛÎĵÚÒ»×÷Õß £¬ÀîÏþÇ¿¸±½ÌÊÚΪΨһͨѶ×÷Õß  ¡£

Èõ¼à¶½ÓïÒåÔ׸î £¬ÊÇÒ»ÏîÖ¼ÔÚ½«Í¼ÏñÖÐµÄ·ÖÆçÎïÌå»òÇøÓò½øÐо«È·Ô׸îµÄÍÆËã»úÊÓ¾õ¹¤×÷  ¡£Ó봫ͳµÄ¼à¶½½ø½¨·ÖÆç £¬Èõ¼à¶½ÓïÒåÔ׸±ØÒª¾«È·µÄÏñËØ¼¶±ê×¢ £¬¶øÊÇͨ¹ýʹÓÃÈõ±êÇ©À´ÊµÏÖÄ£ÐÍѵÁ·  ¡£ÕâÒ»¹¤×÷µÄ¹Ø¼üÌôÕ½ÔÚÓÚÈôºÎ´ÓÈõ±êÇ©ÖлñÈ¡ÕýÈ·µÄÔ׸îÁ˾Ö  ¡£×êÑÐÈËԱͨ³£ÀûÓñêÇ©°ü³­¿ò¡¢Í¼Ïñ¼¶±êÇ©»òµã¼¶±êÇ©µÈÐÅÏ¢ £¬À´Êèµ¼Ô׸îÄ£Ð͵ÄѵÁ·¹ý³Ì  ¡£Èõ¼à¶½ÓïÒåÔ׸Êõ¿ÉÄÜÓÐЧ»º½âÏñËØ¼¶Êý¾Ý±ê×¢³É±¾¸ß°ºµÄÎÊÌâ £¬ÔÚҽѧͼÏñ·ÖÎö¡¢×Ô¶¯¼ÝÊ»¡¢»·¾³¼à²âµÈÁìÓòÓµÓÐ¿í·ºÀûÓÃDZÁ¦  ¡£¸Ã¹¤×÷ʹÓÃÏñËØ¼¶´ËÍâÈõ±êǩʵÏÖÓïÒåÔ׸×÷  ¡£

1.png

ͼ1 Ô׸îÖ¸±êµÄ·ÖÆçÓïÒåµµ´Î

»ùÓÚÏñËØ¼¶´ËÍâÈõ±êÇ©µÄÈõ¼à¶½ÓïÒåÔ׸¼û×ö·¨ÊÇÀûÓÃÀ༤»îͼ£¨Class Activation Map£©À´ÌìÉúαÏñËØ¼¶±êÇ© £¬¶øºóÓÃÕâЩ±êÇ©À´ÑµÁ·Ô׸îÄ£ÐÍ  ¡£µ«ÊÇ £¬CAMͨ³£Ö»Äܸ²¸ÇÎïÌåµÄ×îÏÔÖøÇøÓò £¬»òÕß¼¤»îһЩÎÞ¹ØÇøÓò £¬Ó°ÏìÁËÔ׸î»úÄÜ  ¡£ÎªÁ˸ÄÉÆCAMµÄÖÊÁ¿ £¬×÷ÕßÒÔΪÔ׸îÖ¸±êµÄÓïÒåÔ̺¬¶à¸öµµ´Î £¬ÔÚ·ÖÆçµÄÓïÒåµµ´ÎÉϽøÐÐÓïÒå¶Ô±Å×ÐÖúÓÚÄ£Ðͽø½¨µ½¸üºÃµÄÖ¸±êģʽÀí½â  ¡£Òò¶ø £¬ÍŶÓÌá³öÁËÒ»ÖÖеIJ½Öè £¬³ÆÎªµµ´ÎÓïÒå¶Ô±È£¨Hierarchical Semantic Contrast£© £¬ËüÀûÓöԱȽø½¨Ë¼Ïë¶Ô·ÖÆçµµ´ÎµÄÓïÒå¹ØÏµ½øÐн¨Ä£ £¬´Ó¶øÊ¹Ä£ÐÍ¿ÉÄܽø½¨¸üÈ«ÃæµÄÓïÒå½á¹¹ £¬²¢ÌìÉú¸ü¾«È·µÄCAM  ¡£HSCÉæ¼°Èý¸öµµ´ÎµÄÓïÒå¶Ô±È £¬¼´¸ÐÐËÖÂÇøÓò£¨ROI£©µµ´Î £¬Àà±ðµµ´Î £¬ºÍÏñËØµµ´Î  ¡£HSC»¹Ñ¡È¡Á˽»²æ¼à¶½ºÍ¶¯Á¿Ô­Ðͽø½¨À´Ìá¸ßÓïÒåÒ»ÖÂÐԺͷá˶ÐÔ  ¡£

2.png

ͼ2 »ùÓÚµµ´ÎÓïÒå¶Ô±ÈµÄCAMÌìÉú¿ò¼Ü

×÷ÕßÔÚPASCAL VOC 2012Êý¾Ý¼¯É϶ÔÌá³öµÄ²½Öè½øÐвâÊÔ £¬µµ´ÎÓïÒå¶Ô±È¿ò¼ÜÌìÉúCAMα±êǩѵÁ·Ô׸îÄ£ÐÍ£¨DeepLab ASPP£© £¬×îÖÕÔÚ²âÊÔ¼¯ÉÏʵÏÖÁË74.5%µÄmIoU £¬´´ÔìÁËеĻùÓÚͼÏñ±ê×¢µÄÈõ¼à¶½ÓïÒåÔ׸î»úÄܼͼ£¨SOTA£©  ¡£ÓëÆäËû¶ÔÆ©Ó÷·¨Ïà±È £¬×÷ÕߵIJ½ÖèÔÚ¶ÔÏóÆëÈ«ÐÔºÍÌìǵ¾«¶È·½ÃæÓÐÏÔÖøµÄÌáÉý £¬¿ÉÊÓ»¯Á˾ÖÅú×¢Ìá³öµÄ²½ÖèÔÚµ¥Ò»ºÍ¸´ÔÓ³¡¾°Ï¶¼²û·¢ÓÅÁ¼  ¡£

3.png

ͼ3 ·ÖÆç²½ÖèÔÚPASCAL VOC 2012ÑéÖ¤¼¯¼°²âÊÔ¼¯»úÄܱÈÁ¦

4.png

ͼ4 ×îÖÕÔ׸îÁ˾Ö

½üÄêÀ´ £¬ÍÆËã»úѧԺ×êÑÐÉúÈ˲ÅÔì¾Í¹¤×÷ÕýÖð²½Éî¿ÌרҵÁìÓòÇ°ÑØ £¬Ò»Ð©¸ßÖÊÁ¿¿ÆÑгɾÍÔÚ²»Ðݲú³ö  ¡£ÕâЩ³É¾Í½«ÎªÍÆËã»úѧԺѧ¿Æ½¨Éè¡¢×êÑÐÉúÔì¾ÍÆðµ½³ÁÒªµÄÖ§³Ö×÷Óà  ¡£

¡¾ÍøÕ¾µØÍ¼¡¿