Google продемонстрував нейромережу, яка може розпізнати країну з фото (і вулиці), навіть якщо фото було взято в будинку

Якщо фон є Ейфелевою вежею, Тадж Махал, кафедральним собором Петра, Меморіалом Лінкольн або Червоною Квадратністю. Розробники з Google пішли далі і зробили нейромережу, здатне розпізнати місце з фото, навіть якщо це приймається в приміщенні.

Р



Люди можуть використовувати більше, ніж просто пам'ятки, щоб зрозуміти, де приймається фото. У ресторані можна визначити страву, напрямок руху, ковпачок на вулиці, архітектура будівель і поєднання всіх цих факторів. Який автомобіль здатний?

Розробники технології PlaNet поділяють більшу частину землі на 26,000 зони різних розмірів залежно від кількості фотографій, що беруться в певну область. Більшість міст отримали більше «клітини», оскільки вони взяли більше фотографій, а в сільській місцевості «клітини» були більшими. Пропущено полярні зони.



База даних 126 мільйонів фотографій з Інтернету була використана спільно з даними EXIF. З метою оцінки його роботи було використано 91 млн. фотографій, які були використані для підготовки нейромережі, а решта 34 млн.

2.3 млн геотаргетованих зображень з Flickr були використані для тестування ефективності нейромережі. 3,6% знімків PlaNet дізналися з точністю до вулиці, 10% з точністю до міста. Нейромережа виявила країну на 28,4% випадків, а материк на 48%.

Цей результат був у порівнянні з можливостями десятків мандрівників, використовуючи гру GeoGuessr.com, в якому ви вгадаєте місце Google Street View. PlaNet збиває людей з середнім рівнем помилок 1,131.7 км. Люди були невірними в середньому 2320.75 км.

На думку одного з основних дослідників Тобіас Вейанд (Tobias Weyand) перевага машини полягає в тому, що нейромережа «провиса» значно більше, ніж будь-яка жива людина, яка подорожувала по всьому світу.

Розробники пішли далі і почали працювати з фотографіями, які брали в приміщенні. Ви можете розпізнати їх, коли фото є частиною альбому - машина переглядає альбоми в повному обсязі і шукає найбільш специфічні зображення, що відбуваються в одному місці.

Сама нейромережа займає всього 377 мегабайтів.

Джерело: geektimes.ru/post/271738/