Борис Дайма, Колоризуючий майстер на вагах; Упередження
Виклик колоризатора
Борис Дейма з Х'юстона, штат Техас, був одним з чемпіонів у нашому літньому змаганні з колоризаторів. Він розробив нейронну мережу, щоб робити чорно-білі зображення та перетворювати їх на красиві повнокольорові візуалізації. Виділіть хвилинку, щоб порівняти чорно-білі та кольорові зображення нижче.
Як ви могли передбачити, якими кольорами буде кожна квітка? Щоб зробити це вручну, вам потрібно було б дослідити кожну квітку та зробити освічені здогадки про палітру та розташування букета. Коли чорно-білі плівки забарвлені, художники ретельно уявляють кольори для кожного кадру та фарбують колір окремо, від руки. Ми закликали дослідників розфарбувати чорно-білі фотографії квітів за допомогою нейронних мереж, і наші власні результати не були чудовими.
Визначити хорошу функцію втрат для колоризатора важко, оскільки найпростіший спосіб мінімізувати відстань між передбачуваним кольором і правильним кольором - це вгадати щось посередині всіх кольорів, яке в кінцевому підсумку стає коричневим.
Перед тим, як поїхати на 2-тижневі канікули в Бразилію, Борис роздрукував стос опублікованих статей про колоризатори. Він погортав їх у літаку, прочитав реалізації на пляжі та сформулював концепцію, як підходити до проблеми, щоб, повернувшись до США, він вдарився об землю.
Він ретельно відстежував свої моделі навчальних процесів, використовуючи криві втрат реального часу від Weights & Biases, щоб визначити відхилення та припинити навчальні пробіжки рано, коли вони не працювали добре.