ÍÆËã»úѧԺ×êÑÐÉúÔÚÖйúÍÆËã»úѧ»áCCF AÀà»áÒé°ä·¢×îÐÂ×êÑгɾÍ

°ä²¼¹¦·ò£º2023-09-04Ͷ¸å£º°¬Ãô ²¿ÃÅ£ºÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§Ôº ä¯ÀÀ´ÎÊý£º

½üÆÚ£¬ÈËΪÖÇÄÜÁìÓò¹ú¼ÊѧÊõ»áÒéIJCAI 2023£¨ÖйúÍÆËã»úѧ»áCCF AÀà»áÒ飩ÓÚ8ÔÂ19ÈÕÖÁ8ÔÂ25ÈÕÔÚÖйú°ÄÃÅÕÙ¿ª£¬Ð±¦GGÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§ÔºÀîÏþÇ¿¸±½ÌÊÚ¿ÎÌâ×éµÄ×êÑгɾ͡°Hierarchical Semantic Contrast for Weakly Supervised Semantic Segmentation¡±±»¸Ã»áÒé½Ó¹Ü¼Ó㬲¢ÔÚ´ó»á½øÐпÚÍ·»ã±¨¡£IJCAIÈ«³Æ¹ú¼ÊÈËΪÖÇÄܽáºÏ»áÒ飨International Joint Conference on Artificial Intelligence£©£¬¸Ã»áÒéÊÇÊǹú¼ÊÈËΪÖÇÄܽç×îÓÐÓ°ÏìÁ¦ºÍȨÍþÐÔµÄÊ¢»áÖ®Ò»£¬ÔÚÊÀ½çÁìÓòÄÚÿÄêÕÙ¿ªÒ»´Î£¬±¾½ì»áÒé¼ÓÃÂÊԼΪ15%¡£

¸Ã×êÑй¤×÷Êܵ½ÉϺ£ÊпÆÎ¯ÈËΪÖÇÄܳÁµãÏîĿ֧³Ö£¬ÍÆËã»ú¹¤³ÌÓë¿ÆÑ§Ñ§Ôº2022¼¶Ë¶Ê¿×êÑÐÉúÎâÔ¶³¾ÎªÂÛÎĵÚÒ»×÷Õߣ¬ÀîÏþÇ¿¸±½ÌÊÚΪΨһͨѶ×÷Õß¡£

Èõ¼à¶½ÓïÒåÔ׸ÊÇÒ»ÏîÖ¼ÔÚ½«Í¼ÏñÖÐµÄ·ÖÆçÎïÌå»òÇøÓò½øÐо«È·Ô׸îµÄÍÆËã»úÊÓ¾õ¹¤×÷¡£Ó봫ͳµÄ¼à¶½½ø½¨·ÖÆç£¬Èõ¼à¶½ÓïÒåÔ׸±ØÒª¾«È·µÄÏñËØ¼¶±ê×¢£¬¶øÊÇͨ¹ýʹÓÃÈõ±êÇ©À´ÊµÏÖÄ£ÐÍѵÁ·¡£ÕâÒ»¹¤×÷µÄ¹Ø¼üÌôÕ½ÔÚÓÚÈôºÎ´ÓÈõ±êÇ©ÖлñÈ¡ÕýÈ·µÄÔ׸îÁ˾Ö¡£×êÑÐÈËԱͨ³£ÀûÓñêÇ©°ü³­¿ò¡¢Í¼Ïñ¼¶±êÇ©»òµã¼¶±êÇ©µÈÐÅÏ¢£¬À´Êèµ¼Ô׸îÄ£Ð͵ÄѵÁ·¹ý³Ì¡£Èõ¼à¶½ÓïÒåÔ׸Êõ¿ÉÄÜÓÐЧ»º½âÏñËØ¼¶Êý¾Ý±ê×¢³É±¾¸ß°ºµÄÎÊÌ⣬ÔÚҽѧͼÏñ·ÖÎö¡¢×Ô¶¯¼ÝÊ»¡¢»·¾³¼à²âµÈÁìÓòÓµÓÐ¿í·ºÀûÓÃDZÁ¦¡£¸Ã¹¤×÷ʹÓÃÏñËØ¼¶´ËÍâÈõ±êǩʵÏÖÓïÒåÔ׸×÷¡£

1.png

ͼ1 Ô׸îÖ¸±êµÄ·ÖÆçÓïÒåµµ´Î

»ùÓÚÏñËØ¼¶´ËÍâÈõ±êÇ©µÄÈõ¼à¶½ÓïÒåÔ׸¼û×ö·¨ÊÇÀûÓÃÀ༤»îͼ£¨Class Activation Map£©À´ÌìÉúαÏñËØ¼¶±êÇ©£¬¶øºóÓÃÕâЩ±êÇ©À´ÑµÁ·Ô׸îÄ£ÐÍ¡£µ«ÊÇ£¬CAMͨ³£Ö»Äܸ²¸ÇÎïÌåµÄ×îÏÔÖøÇøÓò£¬»òÕß¼¤»îһЩÎÞ¹ØÇøÓò£¬Ó°ÏìÁËÔ׸î»úÄÜ¡£ÎªÁ˸ÄÉÆCAMµÄÖÊÁ¿£¬×÷ÕßÒÔΪÔ׸îÖ¸±êµÄÓïÒåÔ̺¬¶à¸öµµ´Î£¬ÔÚ·ÖÆçµÄÓïÒåµµ´ÎÉϽøÐÐÓïÒå¶Ô±Å×ÐÖúÓÚÄ£Ðͽø½¨µ½¸üºÃµÄÖ¸±êģʽÀí½â¡£Òò¶ø£¬ÍŶÓÌá³öÁËÒ»ÖÖеIJ½Ö裬³ÆÎªµµ´ÎÓïÒå¶Ô±È£¨Hierarchical Semantic Contrast£©£¬ËüÀûÓöԱȽø½¨Ë¼Ïë¶Ô·ÖÆçµµ´ÎµÄÓïÒå¹ØÏµ½øÐн¨Ä££¬´Ó¶øÊ¹Ä£ÐÍ¿ÉÄܽø½¨¸üÈ«ÃæµÄÓïÒå½á¹¹£¬²¢ÌìÉú¸ü¾«È·µÄCAM¡£HSCÉæ¼°Èý¸öµµ´ÎµÄÓïÒå¶Ô±È£¬¼´¸ÐÐËÖÂÇøÓò£¨ROI£©µµ´Î£¬Àà±ðµµ´Î£¬ºÍÏñËØµµ´Î¡£HSC»¹Ñ¡È¡Á˽»²æ¼à¶½ºÍ¶¯Á¿Ô­Ðͽø½¨À´Ìá¸ßÓïÒåÒ»ÖÂÐԺͷá˶ÐÔ¡£

2.png

ͼ2 »ùÓÚµµ´ÎÓïÒå¶Ô±ÈµÄCAMÌìÉú¿ò¼Ü

×÷ÕßÔÚPASCAL VOC 2012Êý¾Ý¼¯É϶ÔÌá³öµÄ²½Öè½øÐвâÊÔ£¬µµ´ÎÓïÒå¶Ô±È¿ò¼ÜÌìÉúCAMα±êǩѵÁ·Ô׸îÄ£ÐÍ£¨DeepLab ASPP£©£¬×îÖÕÔÚ²âÊÔ¼¯ÉÏʵÏÖÁË74.5%µÄmIoU£¬´´ÔìÁËеĻùÓÚͼÏñ±ê×¢µÄÈõ¼à¶½ÓïÒåÔ׸î»úÄܼͼ£¨SOTA£©¡£ÓëÆäËû¶ÔÆ©Ó÷·¨Ïà±È£¬×÷ÕߵIJ½ÖèÔÚ¶ÔÏóÆëÈ«ÐÔºÍÌìǵ¾«¶È·½ÃæÓÐÏÔÖøµÄÌáÉý£¬¿ÉÊÓ»¯Á˾ÖÅú×¢Ìá³öµÄ²½ÖèÔÚµ¥Ò»ºÍ¸´ÔÓ³¡¾°Ï¶¼²û·¢ÓÅÁ¼¡£

3.png

ͼ3 ·ÖÆç²½ÖèÔÚPASCAL VOC 2012ÑéÖ¤¼¯¼°²âÊÔ¼¯»úÄܱÈÁ¦

4.png

ͼ4 ×îÖÕÔ׸îÁ˾Ö

½üÄêÀ´£¬ÍÆËã»úѧԺ×êÑÐÉúÈ˲ÅÔì¾Í¹¤×÷ÕýÖð²½Éî¿ÌרҵÁìÓòÇ°ÑØ£¬Ò»Ð©¸ßÖÊÁ¿¿ÆÑгɾÍÔÚ²»Ðݲú³ö¡£ÕâЩ³É¾Í½«ÎªÍÆËã»úѧԺѧ¿Æ½¨Éè¡¢×êÑÐÉúÔì¾ÍÆðµ½³ÁÒªµÄÖ§³Ö×÷Óá£

¡¾ÍøÕ¾µØÍ¼¡¿