TWITTER ПОЧАВ РОЗУМІТИ, ДЕ НА ФОТОГРАФІЇ ЗНАХОДИТЬСЯ НАЙВАЖЛИВІША ЧАСТИНА
Користь машинного навчання не завжди криється в великих функціях – часто воно допомагає привнести якесь дрібне нововведення, яке робить продукт набагато зручнішим. Так сталося і у випадку з Twitter, який за допомогою нейронних мереж почав обрізати найцікавіші частини фотографій для створення їх мініатюр.
Компанія почала працювати над нововведенням вже досить давно, але детально розповіла про нього лише зараз. Дослідник в сфері машинного навчання Лукас Тис (Lucas Theis) і його керівник Зеха Вонг (Zehan Wang) розповіли, що спочатку обрізали за допомогою нової функції тільки людей, а ось з пейзажами, предметами і кішками метод не працював.
Рішенням проблеми став метод «обрізання з використанням помітної частини». Під «помітною частиною» в даному випадку мається на увазі найцікавіша частина картинки – неважливо, особа це чи ні. Співробітники Twitter скористалися даними досліджень в області відстеження очей для визначення зон зображень, на які люди дивляться в першу чергу.
Коли дослідники навчили нейронну мережу визначати такі зони, їм треба було оптимізувати технологію, щоб вона працювала на сайті в реальному часі. На щастя, обрізання фотографій для створення мініатюр досить просте – досить виділити приблизно третину картинки з найпривабливішим вмістом. Це дозволило звузити критерії відбору матеріалу.
Незабаром нововведення стане доступним всім користувачам Twitter на настільних пристроях, а також в додатках для iOS і Android.