Мәселе
Адамдарға қарапайым болып көрінетін нәрсе — "негізгі пәнді" фотосурет — компьютерлер үшін таңқаларлық күрделі. Кескін - бұл тек түсті пикселдер торы. "бұл пиксель - адам" дегенге тән белгі жоқ; және "бұл пиксел олардың артындағы қабырға"
Дәстүрлі тәсілдер түс шегін анықтау (белгілі бір түстің барлық пикселдерін жою) немесе жиекті анықтау (нысандар арасындағы шекараларды табу) сияқты әдістерді қолданды. Олар қарапайым жағдайларда жұмыс істеді, бірақ күрделі көріністермен, тақырып пен фон арасындағы ұқсас түстермен немесе күрделі бөлшектермен сәтсіз болды.
Machine Learning бағдарламасына кіріңіз
Заманауи AI фондық жою терең оқытуды, атап айтқанда кескінді сегменттеу үлгілерін пайдаланады. Міне, оның қалай жұмыс істейтінінің жеңілдетілген нұсқасы:
1. Тренинг
Нейрондық желіде нысан қолмен анықталған (белгіленген) миллиондаған кескіндер көрсетіледі. Уақыт өте келе модель үлгілерді үйренеді: адамдар қалай көрінеді, нысандар қалай пішінделеді, субъектілер фоннан қалай ерекшеленеді. Ол жиектерді, текстураларды және контекстті тануға үйренеді.
2. Қорытынды (үлгіні пайдалану)
Үйретілген үлгіге бұрын-соңды көрмеген жаңа кескінді бергенде, ол пикселдік деректерді талдайды және «маска» жасайды — әрбір пикселге алдыңғы (тақырып) немесе фондық болу ықтималдығын тағайындайтын карта. Сенімділігі жоғары алдыңғы пикселдер сақталады; жоғары сенімді фондық пикселдер жойылады.
3. Жиектерді өңдеу
Алдыңғы және фон арасындағы ауысу өте маңызды. Қазіргі модельдер қатты екілік кесулерден гөрі жұмсақ жиектерді (жартылай мөлдірлік) жасайды. Бұл әсіресе күрделі жиектерде табиғи көрінетін нәтижелерді жасайды.
Неліктен GPU маңызды?
Нейрондық желілер кескіндерді бір уақытта мыңдаған математикалық операциялар арқылы өңдейді. GPU (Графикалық өңдеу бірліктері) дәл осындай параллельді есептеулерге арналған. Орталық процессорда 30 секундқа созылуы мүмкін тапсырма графикалық процессорда 2-3 секундта аяқталуы мүмкін.
Сондықтан QuickRemove сияқты құралдар NVIDIA, AMD және Intel GPU құрылғыларынан GPU жеделдетуін қолдайды. AI моделі жылдам өңдеу үшін тікелей графикалық процессорда жұмыс істейді. Егер үйлесімді GPU болмаса, бағдарламалық құрал процессорды өңдеуге қайта оралады — ол әлі де жұмыс істейді, жай ғана көп уақыт алады.
AI неде жақсы
- Адамдар мен портреттер — бұл ең көп таралған жағдай және модельдер оған жақсы дайындалған
- Жануарлар мен үй жануарлары — модельдер аң терісі мен пішіндерін жақсы өңдейді
- Өнімдер мен объектілер — нақты шекаралары бар нақты анықталған объектілер
- Көлік құралдары — автомобильдер, велосипедтер және ұқсас заттар
- Күрделі фон — AI субъектілерді бос емес, егжей-тегжейлі фондардан ажырата алады
AI үшін қиындықтар
- Мөлдір заттар — шыны, су және басқа өтпелі материалдар қиын (QuickRemove бұл үшін арнайы өңдеуді қамтиды)
- Түс ұқсастығы — нысан мен фон түсі бойынша өте ұқсас болса, шекараларды анықтау қиынырақ болады
- Өте күрделі көріністер — бірнеше қабаттасатын нысандар немесе анық емес алдыңғы/фон
Пост-өңдеу
AI бастапқы масканы жасағаннан кейін, кейінгі өңдеу нәтижені нақтылайды. QuickRemove ұсынысы сияқты құралдар:
- Edge feathering — нысан мен фон арасындағы ауысуды жұмсарту
- Тегістеу — қырлы жиектерді азайту
- Түсті залалсыздандыру — бастапқы өң түсі нысанның жиектеріне ағып кететін түс төгілуін жою
- Қолмен щетка/өшіргіш — жақсы түзетулер үшін AI өткізіп жіберуі мүмкін
Төменгі сызық
AI фонын жою бірнеше секунд ішінде кәсіби сапалы нәтиже беретін деңгейге жетті. Ол әр сценарийде мінсіз болмаса да, ол жалпы пайдалану жағдайларының басым көпшілігін әсерлі дәлдікпен өңдейді — фонды жоюды Photoshop мамандарына ғана емес, барлығына қолжетімді етеді.