缁欎竴涓�瘝灏辫兘妯′豢浣犵殑绗旇抗锛孎acebook杩欎釜AI寮哄ぇ鍒颁笉鏁㈠紑婧愪唬鐮�

Facebook 杩戞棩鍏�竷浜嗕竴椤规柊鐨勫浘鍍� AI鈥斺€擳extStyleBrush锛岃�鎶€鏈�彲浠ュ�鍒跺拰鍐嶇幇鍥惧儚涓�殑鏂囨湰椋庢牸銆�

鍊熷姪璇ユ妧鏈�紝浣犲彧闇€瑕佽緭鍏ヤ竴涓�瘝浣滀负銆屾爣鍑嗐€嶏紝AI 灏辫兘鍏ㄧ瘒妯′豢浣犵殑涔﹀啓椋庢牸锛屼竴閿�墽琛岋紝鏁堟灉鍙�皳鎯婅壋銆�

姝ゅ�锛屼綘杩樺彲浠ョ敤瀹冩浛鎹�笉鍚屽満鏅�腑鐨勬枃瀛楋紙姣斿�娴锋姤銆佸瀮鍦炬《銆佽矾鏍囩瓑锛夈€備笅鍥句腑宸︿晶涓哄師濮嬪満鏅�浘鍍忥紝鍗曡瘝鏄剧ず鍦ㄨ摑鑹茬煩褰�腑锛涘彸渚т缁欎负鏂囨湰鏇挎崲鍚庣殑鍥惧儚銆�

浠庡浘涓�彲浠ョ湅鍑猴紝鍚勭�椋庢牸鐨勫瓧浣� AI 鍑犱箮閮借兘 hold 浣忋€備笅鍥句腑姣忎釜鍥惧儚瀵瑰湪宸﹁竟鏄剧ず杈撳叆婧愭牱寮忥紝鍦ㄥ彸杈规樉绀烘柊鍐呭�(瀛楃�涓�)锛屽乏鍙充袱绔�瓧浣撶湅璧锋潵椋庢牸瀹屽叏鐩稿悓銆備笌婧愬浘鍍忕浉姣旓紝杈撳嚭鐨勫浘鍍忓湪澶栬�涓婁技涔庨兘鏈変簺妯＄硦锛屼絾鎴戜滑鍙�互鐪嬪埌锛屽湪澶у�鏁版儏鍐典笅锛岃�鎶€鏈�技涔庡伐浣滃緱寰堝ソ銆�

涓庡叾浠栧瓧杩规ā浠� AI 鐩告瘮锛孴extStyleBrush 鍔熻兘鏇村己澶竴涓э紝鍙�互浠庢洿缁嗗井鐨勮�搴﹀垎鏋愭枃瀛楁牱寮忥紝浠庤€屽仛鍒板湪鍚勭�瑙掑害鍜岃儗鏅�笅杩涜�瀛楄抗妯′豢銆�

涓嬪浘鏄�叡娌圭摱锛圫oya锛夋浛鎹�负鑼剁摱(Tea锛夌殑瀹炵幇杩囩▼锛�

杩欐�寮哄ぇ鐨勬ā浠跨�鍣ㄦ�鏄� Facebook AI 鎺ㄥ嚭鐨勩€孴extStyleBrush銆嶏紝鍙�渶杈撳叆涓€涓�崟璇嶏紝灏辫兘瀹岀編澶嶇幇绗旇抗銆傝繖椤规妧鏈�殑鍘熺悊绫讳技浜庢枃瀛楀�鐞� APP 涓�殑鏍峰紡绗斿埛宸ュ叿锛屽彲浠ュ皢鏂囧瓧鍜岄�鏍煎垎寮€銆�

璁烘枃鍦板潃锛歨ttps�瘝://scontent-sjc3-1.xx.fbcdn.net/v/t39.8562-6/10000000_944085403038430_3779849959048683283_n.pdf?_nc_cat=108&ccb=1-3&_nc_sid=ae5e01&_nc_ohc=Jcq0m5jBvK8AX--fG2A&_nc_ht=scontent-sjc3-1.xx&oh=8b7e8221bba5aba6b6331c643764dec5&灏辫;oe=60EF2B81 鏁版嵁闆嗗湴鍧€锛歨ttps://github.com/facebookresearch/IMGUR5K-Handwriting-Dataset

瀹冨叿鏈変互涓嬬壒鐐癸細

鍙�渶瑕佷竴涓�崟璇嶏紝灏辫兘澶嶅埗鐓х墖涓�殑鏂囧瓧椋庢牸銆備娇鐢ㄨ� AI 妯″瀷锛屼綘鍙�互缂栬緫鍜屾浛鎹㈠浘鍍忎腑鐨勬枃鏈�€� 涓庡ぇ澶氭暟 AI 绯荤粺涓嶅悓鐨勬槸锛孴extStyleBrush 鏄��涓�嚜鐩戠潱鐨� AI 妯″瀷锛屼娇鐢ㄥ崟涓�ず渚嬭瘝涓€娆℃€ф浛鎹㈡墜鍐欏拰鍥惧儚涓�殑鏂囨湰兘妯銆� 灏嗘潵瀹冧細鍦ㄤ釜鎬у寲淇℃伅鍜屽瓧骞曠瓑棰嗗煙閲婃斁鏂扮殑娼滃姏锛屾瘮濡傚湪澧炲己鐜板疄 (AR) 涓�疄鐜伴€肩湡鐨勮�瑷€缈昏瘧銆� 閫氳繃鍏�竷杩欓」鐮旂┒鎵€鍏锋湁鐨勮兘鍔涖€佹柟娉曞拰缁撴灉锛岀爺绌惰€呭笇鏈涙帹鍔ㄥ�璇濆拰鐮旂┒锛屼互鍙戠幇杩欑被鎶€鏈�殑娼滃湪搴旂敤锛屽�娣卞害鍋囨枃鏈�敾鍑烩€斺€旇繖鏄�汉宸ユ櫤鑳介�鍩熺殑涓€澶ф寫鎴樸€�

鐢变簬 TextStyleBrush 涔熷彲鑳借�鐢ㄦ潵鍒朵綔璇��鎬х殑鍥惧儚锛屾墍浠� Facebook 鐨� CTO 鍦ㄤ釜浜虹′豢ぞ浜ょ綉绔欒〃绀猴紝浠栦滑鍙�彂甯冧簡璁烘枃鍜屾暟鎹�泦锛屼絾娌℃湁鍏�紑浠ｇ爜銆傚苟琛ㄧず姝ｅ�鎴戜滑瀵� deepfakes 鐨勬柟娉曚竴鏍凤紝鎴戜滑璁や负鍏变韩鐮旂┒鍜屾暟鎹�泦灏嗘湁鍔╀簬鏋勫缓妫€娴嬬郴缁熷苟鎻愬墠棰勯槻鏀诲嚮銆�

鍙�互瀛︿範鏂囨湰椋庢牸琛ㄥ緛鐨� TextStyleBrush

鐢� AI 鐢熸垚鍥惧儚涓€鐩村湪浠ユ儕浜虹殑閫熷害鍙戝睍锛岃繖绉嶇敓鎴愭妧鏈�兘澶熼噸鐜板巻鍙插満鏅�紝鎴栬€呭皢鐓х墖鍙樻垚姊甸珮绛夌粯鐢婚�鏍笺€傜幇鍦�紝Facebook AI 宸茬粡浣犵寤虹珛浜嗕竴涓�彲浠ユ浛鎹㈠満鏅�拰鎵嬪啓鏂囨湰椋庢牸鐨� AI锛屽彧闇€瑕佷竴涓�崟璇嶄綔涓鸿緭鍏ャ€�

铏界劧澶у�鏁� AI 绯荤粺閮藉彲浠ュ畬鎴愬畾涔夋槑纭�殑銆佷笓闂ㄧ殑浠诲姟锛屼絾鏋勫缓涓€涓�冻澶熺伒娲荤殑 AI 绯荤粺锛屼互鐞嗚В鐜板疄鍦烘櫙涓�枃鏈�拰鎵嬪啓浣撶殑缁嗗井宸�埆锛屽叿鏈夊緢澶х殑鎸戞垬銆傝繖鎰忓懗鐫€闇€瑕佷簡瑙ｄ紬澶氱殑鏂囨湰鏍峰紡锛屼笉浠呭寘鎷�笉鍚岀殑瀛椾綋鍜屼功鍐欓�鏍硷紝鑰屼笖涔熷寘鎷�笉鍚岀殑杞�崲锛屽�鏃嬭浆銆佸集鏇茬殑鏂囧瓧浠ュ強鍥惧儚鍣�０绛夐棶殑绗棰樸€�

Facebook AI 鎻愬嚭浜� TSB锛圱extStyleBrush锛夋灦鏋勩€傝�鏋舵瀯浠ヨ嚜鐩戠潱鐨勬柟娉曡繘琛岃�缁冿紝娌℃湁浣跨敤鐩�爣椋庢牸鐩戠潱锛屽彧浣跨敤浜嗗師濮嬮�鏍煎浘鍍忋€傝�妗嗘灦鍙�互鑷�姩鍦板�鎵惧浘鐗囩湡瀹為�鏍笺€傚湪璁�粌鏃讹紝瀹冨亣璁炬瘡涓�瘝妗嗘湁鐪熷疄鍊硷紙鍑虹幇鍦ㄦ�涓�殑鏂囨湰锛夛紱鎺ㄧ悊鏃讹紝瀹冮噰鐢ㄥ崟涓€婧愭牱寮忓浘鍍忓拰鏂板唴瀹癸紙瀛楃�涓诧級锛屽苟鐢熸垚甯︽湁鐩�爣鍐呭�鐨勬簮鏍峰紡鐨勬柊鍥惧儚銆�

璇ョ敓鎴愬櫒鏋舵瀯鏄�熀浜� S旇抗tyleGAN2 妯″瀷銆傜劧鑰岋紝瀹冩湁涓や釜閲嶈�鐨勯檺鍒讹細

棣栧厛锛孲tyleGAN2 鏄�竴涓�棤鏉′欢妯″瀷锛岃繖鎰忓懗鐫€瀹冮€氳繃瀵逛竴涓�殢鏈虹殑娼滃湪鍚戦噺杩涜�閲囨牱鏉ョ敓鎴愬浘鍍忋€備絾 TextStyleBrush 蹇呴』瑕佺敓鎴愭寚瀹氭枃鏈�殑鍥惧儚銆�

鍏舵�锛孴extStyleBrush 鐢熸垚鐨勬枃鏈�浘鍍忛�鏍间笉鍙楁帶鍒躲€傛枃鏈��鏍兼秹鍙婂叏灞€淇℃伅锛堜緥濡傝皟鑹叉澘鍜岀┖闂村彉鎹�級锛屼互鍙婄簿缁嗙殑姣斾緥淇℃伅缁勫悎锛堜緥濡傚崟涓�瑪杩圭殑缁嗗锛孎井鍙樺寲銆�

鐮旂┒鑰呴€氳繃鍐呭�鍜岄�鏍艰〃寰佹潵璋冭妭鐢熸垚鍣ㄤ互瑙ｅ喅涓婅堪闄愬埗銆傞€氳繃鎻愬彇鐗瑰畾浜庡眰鐨勯�鏍间俊鎭�苟灏嗗叾娉ㄥ叆鍒扮敓鎴愬櫒鐨勬瘡涓€灞傛潵澶勭悊鏂囨湰椋庢牸鐨勫�灏哄害鐗规€с€傞櫎浜嗕互鏈熸湜鐨勯�鏍肩敓鎴愮洰鏍囧浘鍍忓�锛岀敓鎴愬櫒杩樼敓鎴愯〃绀哄墠鏅�儚绱� (鏂囨湰鍖哄煙) 鐨勮蒋钂欑増鍥惧儚銆傞€氳繃杩欑�鏂瑰紡锛岀敓鎴愬櫒鍙�互鎺у埗鏂囨湰鐨勪綆鍒嗚鲸鐜囧拰楂樺垎杈ㄧ巼缁嗚妭锛屼互鍖归厤鎵€闇€鐨勮緭鍏ラ�鏍笺€�

璇ョ爺绌惰繕寮曞叆浜嗕竴绉嶆ac柊鐨勮嚜鐩戠潱璁�粌鍑嗗垯锛岃�鍑嗗垯浣跨敤瀛椾綋锛坱ypeface锛夊垎绫诲櫒銆佹枃鏈�瘑鍒�櫒鍜屽�鎶楀紡閴村埆鍣ㄦ潵淇濈暀婧愰�鏍煎拰鐩�爣鍐呭�銆傞�鍏堬紝鐮旂┒鑰呴€氳繃浣跨敤棰勮�缁冪殑瀛椾綋鍒嗙被缃戠粶鏉ヨ瘎浼扮敓鎴愬櫒鎹曡幏杈撳叆鏂囨湰椋庢牸鐨勮兘鍔涖€傚彟澶栵紝浠栦滑浣跨敤棰勮�缁冩枃鏈�瘑鍒�綉缁滄潵璇勪及鐢熸垚鍥惧儚鐨勫唴瀹癸紝浠ュ弽鏄犵敓鎴愬櫒鎹曡幏鐩�爣鍐呭�鐨勬晥鏋溿€傛€昏€岃█涔嬶紝杩欑�鏂规硶鑳藉�瀵硅�缁冭繘琛屾湁鏁堢殑鑷�洃鐫ｃ€�

瀹為獙

琛� 2 鎻愪eb緵浜嗚瘎浼颁笉鍚屾崯澶卞嚱鏁般€侀�鏍肩壒寰佹墿灞曚互鍙婅�缁� TSB 鏃� mask 鐨勪綔鐢ㄦ秷铻嶅疄楠岀粨鏋溿€傚疄楠岀粨鏋滄樉绀猴紝TextStyleBrush 鐢熸垚鐨勫浘鐗囧湪 MSE锛堝悎鎴愯�宸�級涓婂ぇ骞呴檷浣庯紝PSNR锛堝嘲鍊间俊鍣�瘮锛夈€丼SIM锛堢粨鏋勭浉浼兼€э級鍧囪幏寰椾簡鎻愰珮銆�

琛� 3 鏄�湪涓夌�鏁版嵁闆嗗浘鍍忎笂娴嬪緱鐨勬枃鏈�瘑鍒�噯纭�巼銆傚疄楠岀粨鏋滄樉绀猴紝TSB 鐨勮瘑鍒�晥鏋滄渶濂斤紝鍦� IC13 涓婄殑璇嗗埆鍑嗙‘鐜囦负 97.2%锛孖C15 涓婄殑璇oo嗗埆鍑嗙‘鐜囦负 97.6%锛孴extVQA 涓婄殑璇嗗埆鍑嗙‘鐜囦负 95.0%銆�

琛� 4 鎻愪緵浜嗙敓鎴愮殑鎵嬪啓鏂囨湰鐨勫畾閲忔瘮杈冿紝灏� TSB 鏂规硶涓� Davis 绛変汉 [14] 涓撻棬涓虹敓鎴愭墜鍐欐枃鏈�€岃�璁＄殑 SotA 鏂规硶杩涜�浜嗘瘮杈冦€侳ID 鍒嗘暟瓒婁綆锛岀敓鎴愯川閲忚秺濂姐€傛樉鐒讹紝TSB 鏂规硶浼樹簬浠ュ墠鐨勫伐浣溿€�

TextStyleBrush 璇佹槑浜� AI 鍦ㄦ枃瀛椾笂闈㈠彲浠ユ瘮杩囧幓鏇村姞鐏垫椿銆佸噯纭�湴璇嗗埆锛屼絾杩欓」鎶€鏈�粛鐒跺瓨鍦ㄨ�澶氶棶棰k杩橈紝濡傛棤娉曟ā浠块噾灞炶〃闈㈢殑瀛楃�鎴栧僵鑹插瓧绗︾瓑锛� Facebook 甯屾湜杩欓」鐮旂┒鑳界户缁�墿灞曪紝绐佺牬缈昏瘧銆佽嚜涓昏〃杈惧拰 deepfake 鐮旂┒涔嬮棿鐨勯殰纰嶇瓑銆�

澶辫触妗堜緥銆�