У соціальній мережі Facebook з'явився текстовий пошук за картинками, який реалізований за допомогою технологій глибокого машинного навчання. Про це повідомляє TechCrunch.
Завдяки пошуку картинок за текстовим описом користувачі можуть знаходити потрібні зображення серед великих масивів картинок. Подібними можливостями, наприклад, володіють деякі інтернет-пошуковики, в тому числі Google і Яндекс, також інтелектуальний пошук картинкам є у сервісу Pinterest. Оскільки користувачі соціальних мереж часто завантажують велику кількість фотографій, пошук за ними за допомогою текстового опису може бути зручним інструментом.
Технологія пошуку картинок «за змістом» у Facebook отримала назву Lumos. Раніше функція пошуку зображень за текстовим описом була експериментальною і позиціонувалася як допоміжний інструмент для сліпих і слабозорих, проте тепер Lumos став доступний і іншим користувачам соцмережі. На даний момент сервіс працює тільки англійською мовою і доступний користувачам в США, про запуск в інших країнах нічого не повідомляється.
Сервіс Lumos створений на основі платформи машинного навчання FBLearner Flow і для навчання нейромережі були використані «десятки мільйонів» фотографій, зазначають представники TechCrunch. Пошук за картинками працює як у мобільному додатку, так і в браузерній версії соцмережі, причому Lumos стежить за тим, щоб у видачі не було майже однакових фотографій. У майбутньому розробники планують додати аналогічну функцію пошуку за відеозаписами.
Facebook веде розробки і дослідження в різних сферах, і крім самої соціальної мережі компанія займається, наприклад, розробками в області віртуальної реальності, безпілотниками, і навіть вивченням спадкування професій. З коротким оглядом досліджень, пов'язаних з Facebook, можна ознайомитися в матеріалі N + 1 «Лайк, репост і технології».