当前位置 > 首页 > 国际新闻 > 正文

GNNets:自然场景下文字检测的几何归一化网络 | ICCV 2019
  • 发布时间:2020-02-18
  • www.hjmoon.com.cn
  • 锘?

    板烽攱缃戠粶浜哄伐鏅鸿兘绉戞妧璇勮鍑虹増绀?:链枃鐢变笂鍞愮鎶?鎻愪緵锛岀亩瑕佷粙缁崭简涓婂攼绉戞妧镰旗┒缁勫湪銆?2019:绮剧‘鍦烘櫙鏂囨湰妫?娴嬬殑鍑犱綍褰掍竴鍖栫綉缁溿??(Gnnets)涓婂彂琛ㄧ殑涓?绡囨枃绔犮??

    阃氲绷瀵瑰緟澶勭悊锲惧儚镄勭壒寰佸浘杩涜鍑犱綍鍙樻崲锛屽皢寰呭鐞嗗浘镀忎腑鍑犱綍鍒嗗竷宸纾杈冨ぇ镄勬枃链褰掍竴鍖栧埌涓?瀹氱殑鍑犱綍鍒嗗竷锣冨洿锛屼粠钥屾彁楂樿嚜铹跺満鏅腑鏂囨湰妫?娴嬬殑鏁堟灉銆?

    1銆傜爷绌惰儗鏅殢镌?娣卞害瀛︿范镄勮繀阃熷彂灞曪紝璁$畻链鸿瑙夋妧链瀹为台鐢熶骇镄勫奖鍝嶈秺鏉ヨ秺澶с?傛娴嫔拰璇嗗埆锲惧儚涓殑鏂囨湰链夊侄浜庤绠楁満鐞呜В瑙呜鍐呭銆?

    鐢变簬鍗风Н绁炵粡缃戠粶鏂规硶镄勬櫘阆嶆?э紝镊劧鍦烘櫙鏂囨湰妫?娴嫔弹鐩娄簬浼犵粺镄勫璞℃娴嬶紝骞朵笖鍙戝睍杩呴?熴?傜劧钥岋紝鐢变簬瀹为台搴旗敤鍦烘櫙涓嚜铹跺満鏅腑鏂囨湰镄勫嚑浣曞彉鍖栬缉澶?(濡傞昵瀹芥瘮鎴栨枃链柟鍚?)锛屽叾链韩浠岖劧瀛桦湪寰埚ぇ镄勬写鎴朴??

    瀵逛簬灏哄害鍙桦寲闂锛岀幇链夋柟娉曚竴鑸娇鐢ㄦ娴嫔ご鏉ユ娴嬩笉鍚岀骇鍒殑鐗瑰緛锛屽苟浣跨敤NMS铻嶅悎缁撴灉浣滀负杈揿嚭鎴栦娇鐢ㄧ被浼间簬FPN[1]镄勭綉缁沧潵铻嶅悎澶氩昂搴︾壒寰侊紝铹跺悗镓ц鏂囨湰妫?娴嬨??

    瀵逛簬瑙掑害鍙桦寲镄勯棶棰桡紝鐜版湁镄勬柟娉曢?氩父阃氲绷鐩存帴杩斿洖鏂囨湰妗嗙殑瑙掑害鎴栦娇鐢ㄥ鏂瑰悜鏁忔劅镄勫嵎绉潵棰勬祴浠讳綍鏂瑰悜銆?

    浣嗘槸锛屽綋鍓岖殑鏂规硶瑕佹眰妫?娴嫔ご瀛︿范瀛楃镄勫法澶у嚑浣曞樊寮傦紝鎴栬?呮娴嫔ご鍙涔犳墍链夎缁冩牱链殑瀛愰泦锛岃繖鍙兘瀵艰嚧镐ц兘涓崭匠銆?

    浣滆?呯爷绌朵简鍑犱綍鍒嗗竷瀵瑰満鏅枃链娴嬬殑褰卞搷锛屽彂鐜板熀浜嶤NN镄勬?祴鍣ㄥ彧鑳芥崟銮锋湁闄愮殑鏂囨湰鍑犱綍鍒嗗竷锛屼絾鍏呭垎鍒╃敤镓?链夎缁冨ソ镄勬牱链彲浠ユ彁楂桦叾娉涘寲鑳藉姏銆?

    涓轰简瑙e喅涓婅堪闂锛屼綔钥呮彁鍑轰简涓?绉嶆柊棰栫殑鍑犱綍褰掍竴鍖栨ā鍧?(GNM)銆侴NM鍙互灏嗘疮涓嚜铹跺満鏅浘鐗囦腑镄勬枃链疄渚嫔綊涓?鍖栧埌涓?瀹氱殑鍑犱綍鍒嗗竷锣冨洿銆备互杩欑鏂瑰纺锛屾墍链夎缁冩牱链褰掍竴鍖栦负链夐檺镄勫垎甯冿紝浠庤?屽彲浠ユ湁鏁埚湴璁粌鍏变韩镄勬枃链娴嫔ご銆?

    GNM鍦ㄦ湰鏂囦腑鎻愬嚭镄勬槸阃氱敤镄勶紝鍙互鐩存帴鎻掑叆鍒颁换浣曞熀浜嶤NN镄勬枃链娴嫔櫒涓?备负浜嗛獙璇佹墍鎻愭柟娉旷殑链夋晥镐э紝浣滆?呭垱寤轰简涓?涓柊镄勬枃链柟鍚戝樊寮傚熀鍑嗭紝骞跺皢鍏跺彂甯冦?傞浄阌嬬綉

    2銆傛柟娉曟弿杩帮紵

    fig.1 .鏁翠綋鏋舵瀯銆?

    锲?1鏄疓NNets镄勬暣浣撶綉缁灭粨鏋勫浘銆傛暣涓綉缁灭粨鏋勭敱涓诲共缃戙?丢NM銆佸叡浜枃链娴嬫姤澶寸粍鎴愩?傝剨绾挎彁鍙栫殑鐗瑰緛鍦板浘灏呜杈揿叆鍒板叿链夊涓垎鏀殑鍑犱綍褰掍竴鍖栨ā鍧?(GNM)锛屾疮涓垎鏀敱姣斾緥褰掍竴鍖栧崟鍏?(SNU)鍜屾柟鍚戝綊涓?鍖栧崟鍏?(ONU)缁勬垚銆?

    SNU链変袱涓笉鍚屾瘮渚嬬殑灏鸿褰掍竴鍖栧崟浣?(S锛孲1/2)鍜屽洓涓柟鍚戝綊涓?鍖栧崟浣?(O锛孙r锛孙f锛孙r f)銆傞?氲绷SNU鍜孙NU镄勪笉鍚岀粍鍚堬紝GNM灏嗙敓鎴愪笉鍚岀殑鍑犱綍褰掍竴鍖栫壒寰佸浘锛岃繖浜涚壒寰佸浘灏呜杈揿叆鍒板叡浜殑鏂囨湰妫?娴嬫爣棰树腑銆?

    锲?2銆侽NU銆?

    锲?2鏄綔钥呮彁鍑虹殑ONU妯″潡镄勫师鐞嗗浘銆傚簲鐢∣NU鍙互镟存敼鏂囨湰妗嗙殑鏂瑰悜銆傚锲炬墍绀猴紝钬灭豢鑹测?濇鏄师濮嬫锛屸?灭伆鑹测?濇鏄浆鎹㈣绷绋嬩腑镄勪腑闂存锛屸?灭孩鑹测?濇鏄疧NU杈揿嚭镄勭粨鏋沧銆?

    胃鍜屛糕?椤垎鍒槸铡熷妗嗗拰缁撴灉妗嗙殑瑙掑害銆?(a)銆?(b)銆?(c)鍜?(d)鍒嗗埆鏄痮銆丱r銆丱f鎴杅杩囩▼镄勭ず镒忓浘銆备笂锲惧彲浠ョ亩鍗曟槑浜嗗湴琛ㄦ槑锛孙NU鍏锋湁灏哰0锛屉?/4]锛孾-蟺/2锛?-蟺/4]锛孾-蟺/4锛?0]鍜孾蟺/4锛屉?/2]瑙掔殑鏂囨湰杞崲鎴怺0锛屉?/4]瑙掔殑鏂囨湰镄勫姛鑳姐??

    锲?3 . GNM镄勫缓绛戙??

    锛熷浘3绀哄嚭浜嗙綉缁滀腑GNM镄勭粨鏋勩?傚湪SNU锛?1x1鍜?3x3镄勫嵎绉繍绠楃敤浜嶴锛汼1/2浣跨敤1脳1鍗风Н銆佹闀夸负2镄勪笅閲囨牱鍜?3脳3鍗风Н銆傚浜嶰NU o銆丱r銆丱f銆乫涓殑鎿崭綔锛屽垎鍒噰鐢ㄦ棤鎿崭綔銆佹棆杞绱犲浘銆佺炕杞绱犲浘鍜屾棆杞悗缈昏浆瑕佺礌锲俱??

    鐢变簬澶氩垎鏀綉缁灭殑褰卞搷锛屼綔钥呮彁鍑轰简涓?绉岹NNets镄勬娊镙疯缁幂瓥鐣ャ??

    鍦ㄨ缁冭绷绋嬩腑锛屼綔钥呴殢链烘娊鍙栦简涓?涓枃链疄渚嬶紝骞堕?氲绷镞嬭浆鍜岃皟鏁村叾澶у皬7娆℃潵镓╁睍瀹冿紝杩欐牱GNM镄勬疮涓垎鏀湪姣忎竴镓硅缁冧腑閮芥湁涓?涓湁鏁堢殑鏂囨湰瀹炰緥銆傝繖镙凤紝GNM镄勬墍链夊垎鏀満鏋勯兘鍙互寰楀埌缁熶竴鍩硅銆傚鏋滆缁冭绷绋嬩腑鏂囨湰瀹炰緥涓嶅湪棰勮镄勫嚑浣曞尯闂村唴锛屽垯蹇界暐鍒嗘敮涓殑鏂囨湰瀹炰緥銆?

    鍦ㄦ祴璇曡绷绋嬩腑锛屼綔钥呯浉搴斿湴灏咷NM镄勬墍链夊垎鏀緭鍑烘枃链鎶曞奖锲炲师鏉ョ殑姣斾緥鍜屾柟鍚戙?备笉鍦ㄥ垎鏀璁惧嚑浣曢棿闅斿唴镄勬枃链灏呜涓㈠纯銆傚墿浣欑殑鏂囨湰妗嗛?氲绷NMS鍚埚苟銆?

    3銆傚疄楠岀粨鏋?

    table 1 .涓巌cdar2015鍜宨cdar2017 mlt涓婄殑链?鏂版柟娉曡繘琛屾瘮杈冦??

    涓庡师PSENet[2鐩告瘮锛屼綔钥呮彁鍑虹殑GNNets鍒嗗埆姣擨CDAR 2015[3]鍜孖CDAR 2017 MLT [4]鎻愰佩浜?1.3%鍜?2.1%銆?

    涓庝笢[5]鍜孖TN [6]鐩告瘮锛屽湪2015骞碔CDAR涓婏紝GNNet镄勫垎鏁板垎鍒佩鍑?8%鍜?9%銆备笌FTSN [7鐩告瘮锛屾?ц兘鎻愰佩浜?4.5%銆侴NNets鍦?2015骞碔CDAR涓婄殑琛ㄧ幇瓒呰绷浜咶OTS[8]锛屽湪2017骞碔CDAR MLT涓婄殑F寰楀垎瓒呰绷浜?7.3%銆侳OTS浣跨敤瀛楃璇嗗埆鏁版嵁銆?

    鍦ㄥ崟灏哄害娴嬭瘯涓紝浣滆?呮彁鍑虹殑GNNets鍦↖CDAR 2015鍜孖CDAR2017 MLT涓婂疄鐜颁简链?鍏堣繘镄勬?ц兘銆傚浘5鍙鍖栦简鍦↖CDAR 2015鍜宨cdar2017 mlts涓婄殑GNNets鍜屽叾浠栨枃链娴嬫柟娉旷殑妫?娴嬬粨鏋溿??

    fig . 5 . icdar 2015鍜宨cdar2017 mlt涓婄殑瀹氭?х粨鏋?. the rightcolumnshowsgnetresults .

    4銆傛?荤粨鍜岃璁?

    1銆傚湪链枃涓紝浣滆?呮彁鍑轰简涓?绉嶆柊镄勫嚑浣曞綊涓?鍖栨ā鍧?(GNM)鏉ョ敓鎴愬涓嚑浣曟劅鐭ョ壒寰佸浘銆侴NM鏄?氱敤镄勶紝鍙互搴旗敤浜庝换浣曞熀浜庢湁绾跨数瑙嗘柊闂荤綉镄勬帰娴嫔櫒锛屼互寤虹珛涓?涓鍒扮镄勫嚑浣曞綊涓?鍖栫綉缁?(GNNet)銆?

    瀹为獙琛ㄦ槑锛屽湪妫?娴嫔叿链夊ぇ鍑犱綍鍒嗗竷镄勬枃链疄渚嬫椂锛孏NNet姣斿熀绾挎?ц兘镟村ソ銆傛澶栵紝鍦ㄦ枃链娴嬬殑涓や釜涓绘祦鏁版嵁板嗕笂锛孏NNet姣旀渶鏂扮殑鏂规硶鍙栧缑浜嗘樉钁楃殑镐ц兘鏀硅繘銆?

    2銆傛湰鏂囩爷绌朵简鍑犱綍鍒嗗竷瀵瑰満鏅枃链娴嬬殑褰卞搷銆傜爷绌跺彂鐜帮紝鍩轰簬CNN镄勬娴嫔櫒鍙兘鎹曡幏链夐檺镄勬枃链嚑浣曞垎甯冿紝浣嗗厖鍒嗗埄鐢ㄦ墍链夎缁冩牱链彲浠ユ彁楂桦叾娉涘寲鑳藉姏锛岃繖瀵瑰悗缁殑鏂囨湰妫?娴嬬瓑鐩稿叧棰嗗烟鍏锋湁鍚彂镒忎箟銆?

    3銆傛?讳箣锛屾枃链娴嬫槸鍏夊瀛楃璇嗗埆浠诲姟镄勯瑕佸墠鎻愩?傜劧钥岋紝镊劧鍦烘櫙涓枃链殑瀛椾綋鍙桦寲銆佸楂樻瘮鍜屼换镒忚搴︾粰妫?娴嬩换锷″甫鏉ヤ简寰埚ぇ镄勬写鎴朴?傛湰鏂囨寚鍑轰简褰揿墠镰旗┒鏂瑰悜涓蹇借镄勪竴浜涢棶棰桡紝骞舵彁鍑轰简涓?绉嶆柊镄勮В鍐虫柟妗堛?傜劧钥岋紝涓庝紶缁熺殑鐩爣妫?娴嬬浉姣旓紝鏂囨湰妫?娴嬮鍩熶粛链夊叾鐗规畩镐у拰杈冨ぇ镄勬帹骞跨┖闂淬??

    References

    [1]閮戝疁鏋楋紝镄ゥ鐗瑰涔愶紝缃楁柉鍚夊笇鍏嬶紝鍑槑娌筹紝宸存媺镐濆搱閲屽搱鍏板拰璋㈠皵鐩栬礉闅嗗悏銆傜敤浜庡璞℃娴嬬殑鐗瑰緛閲戝瓧濉旗綉缁溿??2017骞达紝CVPR銆?

    [2]鏉庣繑銆佺帇鏂囨捣銆佹枃鍗氢警銆佽嫢-鍒樻辰銆佽矾绔ュ拰鏉ㄥ潥銆傚舰钟剁ǔ锅ョ殑鏂囨湰妫?娴嬩笌娓愯繘镓╁睍缃戠粶銆俛rXiv棰勫嵃链?:1806.锛?2018銆?

    [3]杩帿鏂潶灏兼柉鍗℃媺钀ㄦ柉銆佸崲浼婃柉鎴堥害鏂?-姣旀垐杈俱?佸畨鍙ゆ礇鏂凹鍙ゆ媺娆с?佹垐浠?銆佸畨寰烽瞾宸存牸杈捐澶?佸博鏉戞鍜屻?佸悏閲岄┈濉旀柉銆佸崲鍗℃柉璇轰纷镟笺?佺淮璐句纷鎷夌帅濉炴柉姹楀痉鎷夊鍏嫔搱銆佸崲绛夈?局CDAR 2015寮哄仴阒呰绔炶禌銆傚湪2015骞村浗闄呭噺鐏句细璁笂銆?

    [4]2017骞村浗闄呮爣鍑嗗寲镰旗┒鍙戝睍灞?澶氲瑷?鍦烘櫙鏂囨湰妫?娴嫔拰鑴氭湰璇嗗埆绔炶禌銆? ch=8com=绠?浠嬶紝2017銆?

    [5]锻ㄩ怿瀹囷紝涓涚懚锛屼綍鏂囷紝锻ㄦ爲鏄岋紝浣曪紝姊佸淇娿?备竴涓佩鏁堣?岀簿纭殑鍦烘櫙鏂囨湰妫?娴嫔櫒銆?2017骞达紝CVPR銆?

    [6]鐜嬭姵鑺炽?佺帇蹇冭秴銆侀櫠澶ф垚銆傚熀浜庡疄渚嫔彉鎹㈢綉缁灭殑鍑犱綍镒熺煡鍦烘櫙鏂囨湰妫?娴嬨?局nCVPR锛?2018骞淬??

    [7]鎴达紝楂樼帀濠凤紝寰愶紝闾卞崼涓溿?傞溃鍚戝鍦烘櫙鏂囨湰妫?娴嬬殑铻嶅悎鏂囨湰鍒嗗壊缃戠粶銆?2018骞达紝ICPR銆?

    [8]钖涘垬娉紝涓佷寒锛屽崄鍫帮紝澶ц闀囷紝浜庢ˉ锛屼缪鏉板博.缁熶竴缃戠粶蹇?熸枃链箍鎾?. incvpr锛?2018 .

    lei feng.net鎶ラ亾銆?

    唐代桑树信息网 版权所有© www.hjmoon.com.cn 技术支持:唐代桑树信息网 | 网站地图