´úÂëÁ´½Ó£ºhttps://github.com/YueLiao/PPDM

ÂÛÎÄÁ´½Ó£ºhttps://arxiv.org/abs/1912.12898

µ¼¶Á£ºÔÚCVPR2020ÉÏ£¬£¬£¬£¬£¬£¬£¬£¬ÉÌÌÀ3D&AR-Éí·ÝÈÏÖ¤ÓëÊÓƵ¸ÐÖªÍŶÓÍŽᱱ¾©º½¿Õº½Ìì´óѧColab£¨¿ÉÀÖʵÑéÊÒ£©Ìá³öÁË»ùÓÚ²¢Ðеã¼ì²âºÍµãÆ¥ÅäµÄµ¥½×¶ÎHOI DetectionÒªÁ죬£¬£¬£¬£¬£¬£¬£¬ÎªÑ§Êõ½çÊ×´ÎÔÚHOI DetectionÁìÓòµÖ´ïʵʱÐÔÄܵÄÉî¶ÈѧϰËã·¨£¬£¬£¬£¬£¬£¬£¬£¬²¢ÇÒÔÚ¹ûÕæÊý¾Ý¼¯HICO-DETÉÏÐÔÄÜÈ¡µÃÁË´ó·ù¶ÈÌáÉý¡£¡£¡£¡£¡£¡£¡£Í¬Ê±±¾ÎÄ»¹¹¹½¨ÁËÒ»¸öÒÔÏÖʵӦÓ󡾰Ϊµ¼ÏòµÄHOI DetectionÊý¾Ý¿âHOI-A¡£¡£¡£¡£¡£¡£¡£

ÄîÍ·ÓëÅä¾°

ÎÊÌâ½ç˵£º HOI Detection (È˺ÍÎïÌåµÄÐж¯½»»¥¼ì²â) ÊÇÒ»¸öÕë¶Ô¾²Ì¬Í¼Æ¬¶ÔÈËÌåÐж¯µÄϸÄ廯Ã÷È·£¬£¬£¬£¬£¬£¬£¬£¬Ê¹ÃüÒªÇó¼ì²â³öͼƬÖб¬·¢Ðж¯µÄÈËÒÔ¼°ºÍËû±¬·¢Ðж¯½»»¥µÄÎïÌ壬£¬£¬£¬£¬£¬£¬£¬Í¬Ê±»¹Òª½«¶þÕßµÄÐж¯¹ØϵչÍû³öÀ´²¢¹ØÁªÆðÀ´¡£¡£¡£¡£¡£¡£¡£

¹Å°åÁ½½×¶ÎHOI DetectionÒªÁ죺µÚÒ»½×¶Î£¬£¬£¬£¬£¬£¬£¬£¬Í¨¹ýÒ»¸öԤѵÁ·ºÃµÄÄ¿µÄ¼ì²âÍøÂç¼ì²â³öͼƬÖеÄÈ˺ÍÎïÌ壬£¬£¬£¬£¬£¬£¬£¬È»ºó°ÑÈ˺ÍÎïÌå¿òÖðÒ»Åä¶Ô»ñµÃһϵÁеÄ<ÈË£¬£¬£¬£¬£¬£¬£¬£¬ÎïÌå>ºòÑ¡¶Ô £¨HO Proposals£©¡£¡£¡£¡£¡£¡£¡£µÚ¶þ½×¶Î£¬£¬£¬£¬£¬£¬£¬£¬°Ñÿһ¸öHO ProposalÖðÒ»ËÍÈëµ½Ò»¸öÐж¯¹Øϵ·ÖÀàÍøÂ磬£¬£¬£¬£¬£¬£¬£¬»ñµÃ¶ÔÓ¦µÄÕ¹Íû³ö¶ÔÓ¦Ðж¯¹ØϵÖֱ𡣡£¡£¡£¡£¡£¡£

Á½½×¶ÎÒªÁìµÄ¾ÖÏÞÐÔ£º´ÓÐÔÄÜÉÏ£¬£¬£¬£¬£¬£¬£¬£¬Á½½×¶ÎÄ£×ӵĽṹÊÇÐòÁл¯ºÍÊèÉ¢»¯µÄ£¬£¬£¬£¬£¬£¬£¬£¬µÚ¶þ½×¶Î·ÖÀàµÄÐÔÄÜ»áÒÀÀµÓÚµÚÒ»½×¶Î¼ì²âµÄÐÔÄÜ¡£¡£¡£¡£¡£¡£¡£¶øµÚÒ»½×¶ÎÔÚÌìÉúProposalsʱ½ö˼Á¿¼ì²âÖÃÐŶȽϸߵÄÈË/ÎïÌ壬£¬£¬£¬£¬£¬£¬£¬¶øºöÊÓһСÎÒ˽¼Ò/ÎïÌ屬·¢½»»¥¹ØϵµÄ¿ÉÄÜÐÔ£¬£¬£¬£¬£¬£¬£¬£¬´Ó¶ø»áµ¼ÖÂÓн»»¥¹ØϵµÄÈË/ÎïÌå»á±»ÒÅ©£¬£¬£¬£¬£¬£¬£¬£¬»òÕßÔÚµÚ¶þ½×¶ÎÊܵ½¡°ÇáÊÓ¡°¡£¡£¡£¡£¡£¡£¡£±ðµÄ£¬£¬£¬£¬£¬£¬£¬£¬ÖðÒ»×é¶Ó±¬·¢proposalsµÄ·½·¨»áÌìÉú´ó×Ú¸ºÑù±¾£¬£¬£¬£¬£¬£¬£¬£¬Ôö´óËÑË÷¿Õ¼ä£¬£¬£¬£¬£¬£¬£¬£¬ÔöÌíÕýÑù±¾±»¼ì³ö²¢¸¶Óë¸ßÖÃÐŶȵÄÄѶÈ¡£¡£¡£¡£¡£¡£¡£´ÓЧÂÊÉÏ£¬£¬£¬£¬£¬£¬£¬£¬µÚÒ»½×¶Î±¬·¢µÄËùÓÐÑù±¾£¬£¬£¬£¬£¬£¬£¬£¬°üÀ¨´ó×ڵĸºÑù±¾£¬£¬£¬£¬£¬£¬£¬£¬¶¼ÒªÖð¸ö´®ÐеÄÊäÈëµ½µÚ¶þ½×¶ÎµÄ¹ØϵչÍûÍøÂ磬£¬£¬£¬£¬£¬£¬£¬ÏßÐÔµÄÔöÌíÁËʱ¼äÖØƯºó¡£¡£¡£¡£¡£¡£¡£±ðµÄ£¬£¬£¬£¬£¬£¬£¬£¬ÎªÁËÈ¡µÃ½ÏºÃµÄÐÔÄÜ£¬£¬£¬£¬£¬£¬£¬£¬µÚÒ»½×¶ÎÍùÍù»á½ÓÄÉÐÔÄܸüºÃµÄ¼ì²âÄ£×Ó£¬£¬£¬£¬£¬£¬£¬£¬Ò²»áÔöÌíʱ¼ä¿ªÏú¡£¡£¡£¡£¡£¡£¡£

Ö÷ҪТ˳

1.»ùÓÚÁ½½×¶ÎÒªÁìµÄ¾ÖÏÞÐÔ£¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇÖØнç˵ÁËHOI DetectionΪһ¸ö²¢Ðеã¼ì²âºÍ²¢ÐеãÆ¥ÅäµÄÎÊÌ⣬£¬£¬£¬£¬£¬£¬£¬²¢Ìá³öȫеĵ¥½×¶ÎHOI Detection¿ò¼Ü£¨PPDM£©¡£¡£¡£¡£¡£¡£¡£

2.ÎÒÃÇÌá³öµÄPPDM¿ò¼Ü²»µ«ÔÚ¹ûÕæÊý¾Ý¼¯HICO-DETÒÔ¼°ÎÒÃǹ¹½¨µÄHOI-AÊý¾Ý¼¯ÉÏÈ¡µÃÁË×îÓŵÄÐÔÄÜ£¬£¬£¬£¬£¬£¬£¬£¬»¹³ÉΪµÚÒ»¸öÔÚHOI DetectionÁìÓòµÖ´ïʵʱÐÔÄܵÄÉî¶Èѧϰ¿ò¼Ü¡£¡£¡£¡£¡£¡£¡£

3.ÎÒÃǹ¹½¨ÁËÒ»¸öÒÔÏÖʵӦÓÃΪµ¼ÏòµÄHOI DetectionÊý¾Ý¿â¡£¡£¡£¡£¡£¡£¡£

ÒªÁìÏÈÈÝ

ÎÊÌâÖؽç˵£º

l  ÈË/ÎïÌå¼ì²â¿ò£º¼ì²â¿òµÄÖÐÐĵã+¼ì²â¿ò³¤¿íÒÔ¼°ÖÐÐĵãµÄÎó²î£»£»£»£»£»

l  ½»»¥¹Øϵµã£ºÈ˺ÍÎïÌå¼ì²â¿òÖÐÐĵãÁ¬ÏßµÄÖеã¡£¡£¡£¡£¡£¡£¡£ÎªÒ»¸öÅþÁ¬È˺ÍÎïÌåµÄêµã£¬£¬£¬£¬£¬£¬£¬£¬Ò²Ôڴ˵ãÀ´Õ¹Íû¶ÔÓ¦È˺ÍÎïÌåÖ®¼äµÄ¹Øϵ¡£¡£¡£¡£¡£¡£¡£

l  Æ¥Åä¹æÔò£ºÊ×ÏȽç˵ÁËÁ½¸öÎó²î£¬£¬£¬£¬£¬£¬£¬£¬»®·Ö´Ó½»»¥¹Øϵµãµ½È˺ÍÎïÌå¿òµÄÖÐÐĵã¡£¡£¡£¡£¡£¡£¡£ÍŽύ»¥¹ØϵµãºÍ¶ÔÓ¦µÄÎó²îÕÒµ½×îÇкÏÆ¥Åä¹æÔòµÄÈ˺ÍÎïÌåÖÐÐĵã¡£¡£¡£¡£¡£¡£¡£Æ¥Å䵽ͳһ¸ö¹ØϵµãµÄÈ˺ÍÎïÌå¼´¿É×é³ÉÒ»¸öHOIÈýÔª×é¡£¡£¡£¡£¡£¡£¡£

ÍøÂç½á¹¹£º»ùÓÚÒÔÉϽç˵ÎÒÃÇÌá³öÒ»¸öÓɲ¢ÐÐ˫֧·×é³ÉµÄµ¥½×¶Î¿ò¼Ü¡£¡£¡£¡£¡£¡£¡£Ê×ÏÈͨ¹ýÒ»¸öÌØÕ÷ÌáÈ¡ÍøÂ磬£¬£¬£¬£¬£¬£¬£¬»ñµÃͼƬµÄÌØÕ÷£¬£¬£¬£¬£¬£¬£¬£¬È»ºó¾­ÓÉÁ½Ìõ֧·»ñµÃHOIÈýÔª×é¡£¡£¡£¡£¡£¡£¡£µÚÒ»Ìõ֧·Ϊ¡°µã¼ì²â¡°Ö§Â·£¬£¬£¬£¬£¬£¬£¬£¬ÊäÈëͼƬµÄÌØÕ÷£¬£¬£¬£¬£¬£¬£¬£¬Êä³öÈË/ÎïÌå/½»»¥¹ØϵµãµÄÈÈÁ¦ÕùÒÔ¼°¶ÔÓ¦ÈË/ÎïÌå¼ì²â¿òµÄ³¤¿í¡£¡£¡£¡£¡£¡£¡£µÚ¶þÌõ֧·Ϊ¡°µãÆ¥Å䡱 ֧·£¬£¬£¬£¬£¬£¬£¬£¬ÊäÈëͼƬÌØÕ÷£¬£¬£¬£¬£¬£¬£¬£¬Êä³ö½»»¥¹Øϵµãµ½ÈË/ÎïÌå¼ì²â¿òÖеãµÄÎó²î¡£¡£¡£¡£¡£¡£¡£

µãÆ¥ÅäÏê½â£ºÎÒÃÇÊ×ÏÈÌôÑ¡³öÖÃÐŶÈ×î¸ß¸ök¸ö½»»¥¹ØϵµãÒÔ¼°¶ÔÓ¦µÄÎó²î£¬£¬£¬£¬£¬£¬£¬£¬»ùÓÚ´Ë£¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇ¿ÉÒÔÌìÉúһϵÁС°coarse human/object point¡±¡£¡£¡£¡£¡£¡£¡£È»ºó£¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇ»ùÓÚ¡°Àë¡®coarse point¡¯×î½üÇÒ¾ßÓнϸßÖÃÐŶȡ±µÄÆ¥Åä¹æÔò£¬£¬£¬£¬£¬£¬£¬£¬ÕÒµ½Ã¿¸ö½»»¥¹ØϵµãËùÆ¥ÅäµÄÈ˺ÍÎïÌåÖÐÐĵã¡£¡£¡£¡£¡£¡£¡£×îºóÍŽáÈ˺ÍÎïÌåÖÐÐĵã¶ÔӦλÖÃÕ¹Íû³öÀ´µÄ³¤¿í±ã¿É»ñµÃ×îºóµÄHOIÈýÔª×é¡£¡£¡£¡£¡£¡£¡£

HOI-AÊý¾Ý¼¯

ÒÔÏÖʵÂäµØÓ¦Ó󡾰Ϊµ¼Ïò£¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇÑ¡È¡Á˺ÜÊÇÓÐÏÞµ«¼«¾ßÊÊÓüÛÖµµÄ10ÖÖÐж¯¹Øϵ£¬£¬£¬£¬£¬£¬£¬£¬Í¨¹ýÉãÏñÍ·ÊÕÂÞÒÔ¼°ÍøÂçÅÀÈ¡µÄ·½·¨£¬£¬£¬£¬£¬£¬£¬£¬ÊÕÂÞÁË¿ìÒª4ÍòÕÅÒÔÈËΪÖÐÐĵij¡¾°Í¼Æ¬£¬£¬£¬£¬£¬£¬£¬£¬²¢¶ÔËùÓÐͼƬ¾ÙÐÐÁËϸÄåµÄHOI Detection±ê×¢¡£¡£¡£¡£¡£¡£¡£ÎªÁËÔö´óÀà¼ä²î±ð£¬£¬£¬£¬£¬£¬£¬£¬Í¼Æ¬°üÀ¨¸»ºñµÄ³¡¾°£¨ÊÒÄÚ£¬£¬£¬£¬£¬£¬£¬£¬ÊÒÍ⣬£¬£¬£¬£¬£¬£¬£¬³µÄڵƣ©£¬£¬£¬£¬£¬£¬£¬£¬²î±ðµÄ¹âÕÕÇ¿¶È£¬£¬£¬£¬£¬£¬£¬£¬²î±ðµÄÈËÎï×Å×°£¬£¬£¬£¬£¬£¬£¬£¬ºÍͳһÀàÎïÌåµÄ²î±ðÐÎ̬£¬£¬£¬£¬£¬£¬£¬£¬²¢½ÓÄÉÁ½ÖÖÉãÏñÍ·À´Êº²Þ£¬£¬£¬£¬£¬£¬£¬£¬RGBºÍIR¡£¡£¡£¡£¡£¡£¡£

ʵÑéЧ¹û

ÎÒÃÇÑ¡È¡ÁËÁ½ÖÖ²î±ðµÄÖ÷¸ÉÍøÂçDLA-34ºÍHourglass-104ÔÚÁ½¸öÊý¾Ý¿âHICO-DETºÍHOI-AÉ϶Թþ¹þ(haha)ÌåÓýÒªÁìPPDM¾ÙÐÐһϵÁÐʵÑé¡£¡£¡£¡£¡£¡£¡£

´Ó¶¨Á¿Ð§¹ûÉÏ¿ÉÒÔ»ñµÃ£¬£¬£¬£¬£¬£¬£¬£¬ÔÚHICO-DETÊý¾Ý¿âÉÏ£¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇÔÚ²»½ÓÄÉÌØÊâÐÅÏ¢£¬£¬£¬£¬£¬£¬£¬£¬ÈçÈËÌå×Ë̬£¬£¬£¬£¬£¬£¬£¬£¬ÓïÑÔÌØÕ÷µÈµÄÇéÐÎÏ£¬£¬£¬£¬£¬£¬£¬£¬È¡µÃÁË×îÓŵÄÐÔÄÜ£¬£¬£¬£¬£¬£¬£¬£¬²¢ÇÒËÙÂÊÔ¶Ô¶¿ìÓÚ֮ǰµÄÒªÁ죬£¬£¬£¬£¬£¬£¬£¬ÆäÖлùÓÚDLA-34µÄ¿ò¼Ü£¬£¬£¬£¬£¬£¬£¬£¬ÎªÔÚHICO-DETÉϵÚÒ»¸öµÖ´ïʵʱÐÔÄܵÄËã·¨¡£¡£¡£¡£¡£¡£¡£

ÔÚÏÂͼÖÐÎÒÃDZÈÕÕÁ˾­µäµÄÁ½½×¶ÎÒªÁìiCAN£¬£¬£¬£¬£¬£¬£¬£¬ÆäÖÐÎÒÃǶÔÿÕÅͼƬtop-3µÃ·ÖHOIÈýÔª×é¾ÙÐÐÁË¿ÉÊÓ»¯£¬£¬£¬£¬£¬£¬£¬£¬ÆäÖеÚÒ»ÐÐΪiCANµÄЧ¹û£¬£¬£¬£¬£¬£¬£¬£¬µÚ¶þÐÐΪPPDMµÄЧ¹û¡£¡£¡£¡£¡£¡£¡£´Ó¶¨ÐÔЧ¹û¿ÉÒÔÆÊÎö»ñµÃ£¬£¬£¬£¬£¬£¬£¬£¬¹þ¹þ(haha)ÌåÓýËã·¨¿ÉÒÔ¼ì²â³öÕæÕý¾ßÓйØϵµÄÈ˺ÍÎïÌå¶Ô²¢¸ø³ö½Ï¸ßµÄÖÃÐŶȵ÷Ö£¬£¬£¬£¬£¬£¬£¬£¬¶øiCAN[]ÍùÍù»áÆ«ÏòÓÚ¸øÒ×ÓÚ¼ì²âµ«ÏÖʵûÓÐÏÖʵ¹ØϵµÄÈ˺ÍÎïÌå¶Ô½Ï¸ßµÄµÃ·Ö£¬£¬£¬£¬£¬£¬£¬£¬´Ó¶ø±¬·¢Îó¼ì¡£¡£¡£¡£¡£¡£¡£

×ܽáÓëÕ¹Íû

ÔÚ±¾ÎÄÖУ¬£¬£¬£¬£¬£¬£¬£¬ÎÒÃÇÌá³öÒ»Ì×µ¥½×¶ÎʵʱµÄHOI Detection½â¾ö¼Æ»®£¬£¬£¬£¬£¬£¬£¬£¬²¢¹¹½¨ÁËÒ»¸öÒÔÏÖʵӦÓÃΪµ¼ÏòµÄHOI DetectionÊý¾Ý¿â¡£¡£¡£¡£¡£¡£¡£Ï£ÍûÎÒÃÇÌá³öµÄÒªÁìºÍÊý¾Ý¿â¿ÉÒÔËõСHOI DetectionѧÊõ½çºÍ¹¤Òµ½çµÄºè¹µ¡£¡£¡£¡£¡£¡£¡£ÔÚÒªÁì²ãÃ棬£¬£¬£¬£¬£¬£¬£¬ÔõÑùÔÚ¹þ¹þ(haha)ÌåÓý¿ò¼ÜϸßЧºÏÀíµÄʹÓÃÔ½·¢Ï¸Á£¶ÈµÄÈËÌå×Ë̬ÐÅÏ¢À´Ìá¸ßÐж¯Ê¶±ðµÄ׼ȷÐÔÊÇÒ»¸öË¢ÐÂÆ«Ïò¡£¡£¡£¡£¡£¡£¡£ÔÚÊý¾Ý¿â²ãÃ棬£¬£¬£¬£¬£¬£¬£¬ÔÚδÀ´ÎÒÃÇ»áÒ»Ö±µÄÀ©´óºÍ¸»ºñ¹þ¹þ(haha)ÌåÓýHOI-AÊý¾Ý¿â£¬£¬£¬£¬£¬£¬£¬£¬À´Íƶ¯ÁìÓòÉú³¤¡£¡£¡£¡£¡£¡£¡£