Как алгоритъмът се научи да познава лицата ни

мар. 29, 2022 | Технологии

Как алгоритъмът се научи да познава лицата ни

29 март 2022 | Технологии

Лицевото разпознаване се оказа изключително успешно приложение на изкуствения интелект. Едно от малкото му направления, които на практика достигнаха до съвършенство. Преди няколко години фейсбук стана плашещо добър в това да разбира кой е на дадена снимка, после… официално и тихомълком се отказа от тази услуга.

Днес можем да минем паспортен контрол на летището, след като камерата „се убеди“, че именно нашето лице е на паспорта. В Москва например не е нужно да имаш билет, за да влезеш в метрото, системата веднага разбира кой е насреща.

 

По лицата ще ни познаете

Толкова сме разглезени от удобствата на технологиите, че този огромен пробив изобщо не ни направи впечатление.

Темата обаче е много голяма. Първо, защото е повече от интересно да разберем как работят алгоритмите, които позволиха на практика безгрешно една достатъчно качествена снимка да „каже“ веднага кой от хората в базата данни е на нея.

А на следващо място – за да обсъдим кога това може да се превърне в проблем.

 

 

Лице в лице

Всички направления, от които очакваме революция в света на изкуствения интелект, могат да бъдат обобщени по следния начин. Имаме достатъчно огромна база данни, с помощта на която специалистите в тази област прилагат усъвършенстваните си алгоритми, за да намерят закономерностите. Целите им могат да бъдат какви ли не, но в крайна сметка се свеждат до само две. Или да предположат какво ще следва в дадена поредица на базата на тази закономерност. Или да класифицират следващата единица информация. В нашия случай именно това е целта: да определят кое е това лице.

Алгоритмите в тази посока са немалко. Някои минават през обичайното машинно самообучение, но истинският пробив дойде с включването в състезанието на дълбоките невронни мрежи.

 

По лице

Ето как работят алгоритмите, независимо в кое от двете им поколения.

Със сигурност първата им задача е да „намерят“ къде точно минават очертанията на лицето в рамките на изображението, което са получили.

Нататък… може би си мислите, че програмата ще потърси, както едно време в детективските сериали, фотопортрета? Максимално близките по форма и размери уши, очи, вежди, нос, скули…

Нищо подобно. Именно в това е силата на модерните технологии и конкретно на дълбоките невронни мрежи. Те до голяма степен се абстрахират от детайлите. Тяхната основна нужда е да разполагат с достатъчно големи данни (и именно те са златото на нашето време). После постепенно да анализират стъпка по стъпка, слоеве от алгоритми да търсят закономерностите и да ги предават на следващите.

 

Лицево разпознаване

Снимка: Andrea Piacquadio, Pexels

 

Странни птици

По пътя към това се получават някои меко казано странни изображения. Типичен пример са психеделичните картини, получени чрез алгоритмите на „дълбокото сънуване“ или deep dreaming (тук).

Не по-малко интересни са резултатите от междинните слоеве в работата на системите за лицево разпознаване. Както можете да видите, става дума за доста размазани образи, отново по някакъв начин като че ли извадени от дълбините на човешкото неосъзнавано. Никак не е случайно, че работата не невронните мрежи се асоциира все повече с начина, по който работи и мозъкът ни.

Аналогията е още по-точна, стане ли дума за лицевото разпознаване. Защото всъщност и нашият мозък не „помни“ лицата като поредица от отделни елементи, а по-скоро като закономерности, които се наслагват на подсъзнателно ниво. И ние, и алгоритъмът не се замисляме дали пред нас е човекът със сини очи, бакенбарди и… какво ли още не, а веднага казваме, че това е той заради комбинацията от пропорции, които представлява лицето. Дистанцията между очите, формата на челюстта, разстоянието между носа и устата… Така класификацията става завършена.

 

Лицево разпознаване

Снимка: cottonbro, Pexels

 

Face to face

Разбира се, за да се случи всичко това, в случая с невронните мрежи, е нужно снимките да се превърнат в числа, само с тях работят този тип системи. За това отдавна има достатъчно стандартизирани подходи, които работят безотказно.

След като минат през многото етапи на анализ, алгоритмите стигат до крайния си резултат. Тогава могат да ни кажат кой е на снимката с невероятна точност, която днес доближава 100-те процента, ако снимката е ясна, с достатъчно добра резолюция и се вижда достатъчна част от лицето.

Също както и ако ние видим някой познат. С разликата, че в нашата „база данни“ влизат стотици или хиляди души, а в тази на „колегата“ алгоритъм, понякога милиарди, както беше в примера с лицевото разпознаване, предлагано от фейсбук.

После дойде ред и на много по-трудни задачи. Да се симулират и „създават“ лица например. Тук можете да видите колко плашещо добри са вече и в тази област алгоритмите.

Докато междувременно лицевото разпознаване от страхотен лукс, помагащ да подредим снимките в албумите с всичко заснето с телефона ни… се превърна явно в неудобна тема.

 

Снимка: Shubham Dhage, Unsplash

 

Face бук

Показателен е примерът с това как тихомълком отпадна услугата в най-голямата социална мрежа. Та собственото ѝ име идва от „лице“ и „книга“. Как станаха неудобни лицата? Каква ли е причината? Системата за разпознаване работеше на практика безгрешно..

И тя продължава да работи, просто не и за потребителите. Факт е, че днес не е особено трудно с помощта на достатъчно голяма база от снимки да се създаде съвършено решение за разпознаване. Само че, явно се оказа неудобно начинание, отварящо много въпроси.

Сред официално обявените причини бяха грижата за личните данни (ха-ха). Фактът, че цветнокожите и азиатците биват обърквани от алгоритъма над 100 пъти по-често, а също: че системите идентифицират хората с баналното разделение на половете между мъже и жени и няма как да определят някой, който се вписва в нюансите.

Американското законодателство позволява и прилага алгоритмите за лицево разпознаване от 2001 г. с тогавашното издание на „Супербоул“. Именно тази година се смята за официалния прощъпулник на този тип технологии. И все пак, предстои да измине десетилетие, преди системите да заработят достатъчно прецизно.

Ако насред тълпата, например на футболен мач, може да се разпознае човек, който извършва престъпление, това е добре, нали? Само че по същия път минава и опасността от тотален контрол.

 

Лицево разпознаване

Снимка: Click on , Pixabay

 

Лице и опако

Да, заговорим ли за тази тема, първото, за което сигурно ще се досетите, е китайската система за социален рейтинг и фактът, че в тази страна огромният брой на камерите, който днес се оценява на 500 милиона, е важно звено от веригата. Може би, но дали само там стои този проблем?

Лицевото разпознаване дълго време беше мечта, а днес е неудобна истина. Първите проекти в САЩ по темата датират от 60-те. Само че тогава усилията стигат дотам учените да търсят закономерности в лицата, да мерят с линийка и да анализират… без особен шанс за успех.

Докато през второто десетилетие на 21-и век алгоритмите се оказаха достатъчно добри, за да се справят. През 2011-а системите помогнаха, за да бъде идентифициран и убит Осама бин Ладен. През 2014-а се появи услугата на фейсбук с тогава доста симпатично звучащото название DeepFace. През същата година лицевото разпознаване официално беше използвано за зрелищното разкриване на няколко престъпления в САЩ.

Също през 2014-а Едуард Сноудън публикува документи, с които разкри, че американското правителство събира огромни обеми от изображения, включително и от нерегламентирани източници, за да изгради съвършена система за лицево разпознаване.

После темата поизчезна от общественото пространство.

 

Снимка: Pexels, Pixabay

 

Личице

Днес почти всеки нов телефон може да се отключи, виждайки лицето на собственика си. Тук даже няма намеса на невронните мрежи, става дума за доста по-простите алгоритми на машинното самообучение, които не са с такава висока прецизност, не им ѝ трябва.

Смята се, че пазарът на софтуер, свързан с лицево разпознаване, днес е за около 7,7 милиарда долара срещу 4 милиарда преди 5 години. Тази необходимост има все повече приложения, а, както стана ясно, добрата работа на тези системи отдавна не е в ръцете толкова на самите алгоритми, колкото на обема данни, с които разполагат.

Как точно се докопват данните… е интересният въпрос. Трябват ви лица и имена, а вече доста социални мрежи дават възможност да ги получите. И точно това е проблемът: че днес, благодарение на социалните мрежи, нашите снимки вече са навсякъде. Това улеснява алгоритмите и дава козовете в ръцете на същите социални мрежи, които пък имат достъп до повече фотографии.

Забавен пример в тази посока е историята на милиардера Джон Кациматидис, който в една октомврийска вечер през 2018-а е поканен в суперлуксозен италиански ресторант в Манхатън, за да се запознае с гаджето на дъщеря си. Той моли сервитьора да им щракне снимка за спомен и тихичко отива настрани, за да потърси кой е този младеж. Ползва на телефона си приложението за лицево разпознаване Clearview AI, вижда, че кандидат зетят е създател на съмнителна компания в Сан Франциско, преценява, че е шарлатанин и казва на дъщеря си. И… се оказва прав.

Но дали наистина това е бъдещото на човешките отношения? Или сме вече в света на добрите стари антиутопии?

 

 

Налице

В Китай има и други приложения. В края на 2018-а в град Цзинан бяха представени системи, с чиято помощ се пести тоалетна хартия. Благодарение на лицевото разпознаване всеки посетител на обществените тоалетни може да получи още 70 сантиметра тоалетна хартия едва 9 минути, след като е минал веднъж. Така се пестели доста метри от луксозната стока.

Няма да асоциираме със софийските мобилни тоалетни, където 70 см хартия биха били неземна радост.

Класическото лицево разпознаване е достигнало съвършенство и дълбае в детайлите. Например, все по-съвършени са решенията, които разпознават човека по част от снимката, нещо доста полезно в годините, когато маските станаха задължителен моден аксесоар.

Или пък, що се отнася до разпознаването на лица, което е успешно дори при сериозни възрастови разлики. Алгоритъмът да може да ви познае и на детските снимки, макар че вече сте в зряла възраст.

Оказва се, че технологиите в тази посока се справят учудващо добре с помощта на известни допълнителни разработки. Явно основните характеристики, които побират нашето излъчване, си остават същите, веднъж щом излезем от бебешката възраст. В това има логика, защото, както стана дума, алгоритмите търсят закономерностите и пропорциите, точно както го прави и мозъкът ни.

 

Не лице приятно

При създаването на DeepFace през 2014-а програмата на „Фейсбук“ познава един и същи човек на снимката с точност 97.25%, а в състезанието все още водят хората, макар и минимално с 97,53%.

През юни 2015-а „Гугъл“ повежда в надпреварата чрез системата си FaceNet, която постига точност от 99,63%.

С риск да е прекалено опростено… може би има логика точно тези две споменати компании да направят сериозните стъпки, защото имат достъп до по-големи бази от кадри?

Да, онлайн съществуват огромни обеми от свободнодостъпни масиви данни, които могат да се използват за обучение на невронни мрежи, но когато дойде време за същинската класификация… е логично да водят тези, които имат повече снимки като потенциален резултат.

 

Снимка: 0fjd125gk87, Pixabay

 

Face the face

Изследване на Американския институт за стандарти и технологии показва, че през 2014-а грешката на подобни алгоритми е 4,1%. Докато през април 2020-а тя е вече само… 0,08%. Разбира се, с важното уточнение, че става дума за качествени снимки. Ако те са ясни и чисти фронтални снимки, като тези за паспорт, грешката пада до 0,03%. Е, това обяснява защо вече е доста по-прецизно компютърът да ни „снима“ и прецени дали сме ние, а не митническият служител на летището.

И все пак… не всичко е толкова лесно. През 2018-а „Нюзуик“ прави любопитен експеримент, при който системата на „Амазон“ за разпознаване на лица… погрешно идентифицира 28 сенатори като хора, арестувани за криминални престъпления.

Успоредно с усъвършенстването на алгоритмите, започнаха да се появяват и решения, които да ги затрудняват. Руският изобретател Григорий Бакунов например предлага специален грим, който прави хората неразпознаваеми за софтуера. Германският му колега Адам Харви пък продава специални модни аксесоари.

Друга стратегия казва, че са достатъчни маска и слънчеви очила… за чувал на главата така и не съм чел, може би си струва да се патентова.

 

Маски долу

Опити има и „от другата страна“. Fawkes се казва софтуерът, който променя невидимо малки пиксели от изображенията, които качвате в социалните си мрежи, така че да не бъдете разпознаваеми след това от алгоритмите. Тъй като изображенията се превръщат в числа, малкото отклонение на правилното място, може би наистина би ви направило незабележимо.

Но дали наистина е така… една невронна мрежа знае.

В САЩ дебатът за използването на лицевото разпознаване от правителството минава през обичайния и все по-задълбочен през последните години разлом. Докато беше президент, Доналд Тръмп регламентира използването на технологията от граничните служби, междувременно градове с традиционен уклон към демократите, като Сан Франциско, Бъркли и Бостън, изцяло забраниха използването на технологията.

Засега у нас такива проблеми нямаме, кметовете на Каспичан и Опака мълчат.

Макар че въпросът отпраща към вечни теми, свързани със социалните науки и етиката, по-важни днес, според мен, са аспектите ѝ, свързани с приложенията от страна на големите компании. А този дебат все изглежда страничен на други, доста по-маловажни. Като например прословутия спор дали данните на европейските потребители могат да се съхраняват от фейсбук отвъд океана.

Докато по-важният въпрос е как се използват тези данни. И кога се обръщат срещу нас, за да ни контролират и манипулират по един или друг начин. Дано стигнем и до този разговор…

Дигитални истории
<a href="https://karamanev.me/author/georgik" target="_self">Георги Караманев</a>

Георги Караманев

Програмист, журналист на свободна практика и писател. Още за мен – четете тук.
Дигитални истории

Най-нови публикации:

„Всеки може да е програмист. Време е да сме повече инженери!“

„Всеки може да е програмист. Време е да сме повече инженери!“

Ивайло Кенов е вдъхновяващ учител, помогнал на толкова много хора да станат програмисти. Насочва се към тази професия случайно, след като разбира, че строителното инженерство не е за него. Решава да...

повече информация
Как DALL·E „прочете“ любими български книги?

Как DALL·E „прочете“ любими български книги?

Чукчата не е читател, а писател, знаете сигурно, ами… ChatGPT? Време е за поредния прелюбопитен експеримент, който да ни покаже на какво са способни днес алгоритмите в областта както на създаването...

повече информация
„Представям си бъдещето като битка за невидимото“

„Представям си бъдещето като битка за невидимото“

есен смили се над тези които не могат да те понесат бъди красива до смърт   Или   близостта нанася удари под кръста подарък който не мога да пренеса без твоя помощ който не мога да откажа...

повече информация
„Българите имаме манталитета, за да сме успешни предприемачи“

„Българите имаме манталитета, за да сме успешни предприемачи“

Борис Паскалев e предприемач с впечатляващ опит в света на стартъпите. Отскоро е стратегически съветник към института INSAIT, още една гаранция, че оттам си струва да очакваме още и все...

повече информация

Още публикации по темата:

От рубриката:

Stack Overflow. Спасителят на програмистите си отива

Stack Overflow. Спасителят на програмистите си отива

Много е лесно да различиш човек, който някога е програмирал от останалите – „докосвал“ ли си код, просто няма как да не си виждал Stack Overflow. Само за 15 години сайтът с въпроси и отговори промени из основи начина, по който работят програмистите. Превърна се в Мека за софтуерните инженери, в спасителен пристан за почти всеки ежедневен техен проблем.
Днес обаче легендата върви към своя залез. При това, по ирония на съдбата, заради напредъка в технологиите, който сама направи възможен…
Нещо повече – заради упадъка на проекта мнозина вещаят сериозни проблеми, с които ще се сблъскват следващите програмисти.
Историята на Stack Overflow е показателна за това къде сме днес в света на технологиите. За стремителната скорост, с която се променяме. За семенцата, за добрите идеи, които могат да покълнат само ако попаднат в подходящата среда и в точния момент. И за бързината, с която до вчера непоклатимият гигант се превръща в сянка на себе си.

повече информация
Как DALL·E „прочете“ любими български книги?

Как DALL·E „прочете“ любими български книги?

Чукчата не е читател, а писател, знаете сигурно, ами… ChatGPT? Време е за поредния прелюбопитен експеримент, който да ни покаже на какво са способни днес алгоритмите в областта както на създаването на изображения, така и на разбирането на контекст.
Ще призова алгоритъма DALL·E 3, който е част от платената версия на ChatGPT, да ми илюстрира класически български литературни произведения от различни периоди.
Защо това е интересно? От една страна, ще ни покаже колко добре работи големият езиков модел на български. Ще стане ясно доколко разпознава някои от безспорните наши класически произведения.
Не на последно място просто защото… е интересно дали пък няма да ни покаже някакви по-неочаквани, различни, атрактивни гледни точки? Дали не можем да говорим за някаква форма на колективно неосъзнато? Дали картините ще се припокрият поне донякъде с образите, които всеки от нас има за тези книги в главата си?

повече информация
ИИ детектив. Технологията ли ще ни върне истината?

ИИ детектив. Технологията ли ще ни върне истината?

След като експериментът на Дигитални истории, в който се включиха почти 2000 души, показа, че вече не сме способни да различаваме генерираните от изкуствения интелект изображения и текстове, е време за следващата стъпка.
Дали пък… самият изкуствен интелект няма да ни помогне в тази вече неравна битка в търсене на истината? След като алгоритмите станаха толкова добри в генерирането на разнообразни текстове, изображения, а вече и видео, дали пък няма те да се окажат спасението?
Ще проверим на практика. Радостин Чолаков от родопското село Барутин ни гостува с една от първите Дигитални истории. Тогава, само на 15, той разказа за работата си в света на невронните мрежи, много преди изкуственият интелект да се превърне в темата на деня. А до днес успехите му са още по-впечатляващи. През последните години пътят му често се преплита с този на друг талантлив младеж на същата възраст. Делян Бойчев също завършва средното си образование тази година, но вече има сериозни успехи, специалността му са методите за компютърно зрение.
Двамата приятели се заговарят по темата и решават да проверят: ясно е, че днес изкуственият интелект създава забележителни изображения, но дали пак той би могъл да разпознае истината и лъжата, да прецени коя картинка е създадена от човек и коя – от алгоритъм?

повече информация

Най-новите:

Stack Overflow. Спасителят на програмистите си отива

Stack Overflow. Спасителят на програмистите си отива

Много е лесно да различиш човек, който някога е програмирал от останалите – „докосвал“ ли си код, просто няма как да не си виждал Stack Overflow. Само за 15 години сайтът с въпроси и отговори промени из основи начина, по който работят програмистите. Превърна се в Мека за софтуерните инженери, в спасителен пристан за почти всеки ежедневен техен проблем.
Днес обаче легендата върви към своя залез. При това, по ирония на съдбата, заради напредъка в технологиите, който сама направи възможен…
Нещо повече – заради упадъка на проекта мнозина вещаят сериозни проблеми, с които ще се сблъскват следващите програмисти.
Историята на Stack Overflow е показателна за това къде сме днес в света на технологиите. За стремителната скорост, с която се променяме. За семенцата, за добрите идеи, които могат да покълнат само ако попаднат в подходящата среда и в точния момент. И за бързината, с която до вчера непоклатимият гигант се превръща в сянка на себе си.

повече информация
„Всеки може да е програмист. Време е да сме повече инженери!“

„Всеки може да е програмист. Време е да сме повече инженери!“

Ивайло Кенов е вдъхновяващ учител, помогнал на толкова много хора да станат програмисти. Насочва се към тази професия случайно, след като разбира, че строителното инженерство не е за него. Решава да опита като преподавател, въпреки че е срамежлив по природа.
Дълги години е начело на екипа програмисти в СофтУни, води лекции по безброй технологии. Преподава, увлича и дава занаят, от него и аз съм научил основите на технологията, с която днес си изкарвам хляба.
Днес Ивайло е изправен пред ново начинание. Екипът му се превърна във фирма, която се е устремила към амбициозната задача да припомни, че създаването на софтуер все повече трябва да бъде инженерен процес, а не просто кодене.
Наистина ли всеки може да стане програмист, както казва учителят, помогнал на мнозина да изпълнят тази мечта? Какви са основните трудности, които спират хората?
Кои са големите проблеми, с които се сблъскват днешните програмисти? Защо си струва те вече да са не просто кодери, а да подхождат инженерно и към останалите страни от работата си?
Дали наистина е толкова трудно да си намериш първа работа в тази област? Кои са най-честите грешки?
Как Ивайло, на когото лекарите предричат, че няма да може да ходи, днес вдига 150-килограмови тяги благодарение на… инженерния подход?

повече информация
Как DALL·E „прочете“ любими български книги?

Как DALL·E „прочете“ любими български книги?

Чукчата не е читател, а писател, знаете сигурно, ами… ChatGPT? Време е за поредния прелюбопитен експеримент, който да ни покаже на какво са способни днес алгоритмите в областта както на създаването на изображения, така и на разбирането на контекст.
Ще призова алгоритъма DALL·E 3, който е част от платената версия на ChatGPT, да ми илюстрира класически български литературни произведения от различни периоди.
Защо това е интересно? От една страна, ще ни покаже колко добре работи големият езиков модел на български. Ще стане ясно доколко разпознава някои от безспорните наши класически произведения.
Не на последно място просто защото… е интересно дали пък няма да ни покаже някакви по-неочаквани, различни, атрактивни гледни точки? Дали не можем да говорим за някаква форма на колективно неосъзнато? Дали картините ще се припокрият поне донякъде с образите, които всеки от нас има за тези книги в главата си?

повече информация
„Представям си бъдещето като битка за невидимото“

„Представям си бъдещето като битка за невидимото“

„Засега изкуственият интелект ни се струва смешен, прилича ни на криво огледало или на глупчо, когото напътстваме и благодарение на когото се чувстваме знаещи и повече отвсякога хора. Това обаче се променя буквално за дни и скоро той ще се превърне в реалистично и достоверно наше отражение. Мисля за този момент – вероятно тогава ще успеем да се видим през неговия поглед, да осмислим кои части от нас са ясни дори за едно изкуствено създание, кое остава недостъпно за него и кое е най-ценното. Според мен това са онези места, където той не може да надзърне. Представям си бъдещето като битка за невидимото, това ще бъде най-важният ресурс. Онова, което изкуственият интелект не може да регистрира, е най-ценното в нас.“
„Почти всичко е наред“ се казва дебютната стихосбирка на поетесата Виолета Кунева и толкова точно формулира усещането ни за света днес.
Но как така се оказа, че вече не е възможно да различаваме поета от алгоритъма? Какво губим, ако е така?
Дали проблемът е, че масово сме изгубили критерия си за изкуство, за метафора, за многопластови, живи и човешки по дефиниция текстове, каквито са поетичните?
Ще дойде ли краят на поезията или… именно тя може да ни спаси от самите нас?

повече информация
Да си купиш вечна младост

Да си купиш вечна младост

46-годишният Браян Джонсън вече е похарчил над $4 милиона, така че тялото му да заработи като на 18-годишен. Твърди, че му се получава. Влага всички сили, стига дотам да си влива кръвна плазма от собствения си син. Смята, че е най-изследваното човешко същество, живяло някога, че експериментът му ще промени живота на всеки, който иска да живее дълго.
Тоест, на всеки.
Мечта или утопия? Безобразно пилеене на пари или идея, която може да промени еволюцията ни? Гениалност или чиста лудост?

повече информация
„Българите имаме манталитета, за да сме успешни предприемачи“

„Българите имаме манталитета, за да сме успешни предприемачи“

Борис Паскалев e предприемач с впечатляващ опит в света на стартъпите. Отскоро е стратегически съветник към института INSAIT, още една гаранция, че оттам си струва да очакваме още и все по-забележителни новини.
Преди това младежки национал по баскетбол, днешният ни гост заминава да следва не къде да е, а в MIT. Завършва магистратура с отличие и започва кариерата си като програмист преди повече от 20 години. После се пренасочва към мениджмънта и предприемачеството. За да стигнем до момента, когато се събира с двама други герои на Дигитални истории – проф. Мартин Вечев и д-р Веселин Райчев в стартъпа DeepCode. Той е изпълнителен директор на една от пионерните разработки за създаване на код с изкуствен интелект, която през 2020 г. е придобита от мултимилиардната компания Snyk.
Ще поговорим за успешния му път през сърцето на Силициевата долина. За започналата революция на изкуствения интелект, която според него е по-голяма дори от откриването на електричеството. За друга революция, която се задава – тази в роботиката. За това как у нас може да има повече успешни стартъпи, които да развият средата и страната ни.
Кои са следващите големи новини, които да очакваме от INSAIT?

повече информация
Share This