FaceDig: автоматизация разметки ориентиров на лицах для морфометрических исследований

FaceDig: автоматизация разметки ориентиров на лицах для морфометрических исследований

Интересное сегодня

Как предотвратить выгорание у молодых спортсменов: Влияние а...

Введение Развитие выгорания рассматривается как связано со стрессом в специфическом контексте. Школь...

Как культурные нормы влияют на связь между сном и здоровьем

Сон является основой нашего здоровья. Большое количество данных связывает плохой сон с сердечно-сосу...

Эффект жировой ткани на трансдермальное монохроматическое св...

Введение Об известности взаимодействия человеческого плода с визуальным миром известно мало. Ряд исс...

Телесные карты эмоций, вызванных физической активностью: Нов...

Телесные ощущения и эмоции являются неотъемлемой частью физической активности. Упражнения представля...

Нейронные паттерны восприятия звуков при локализации в динам...

Введение Определение местоположения стимула является ключевой функцией в сенсорной обработке и широк...

Как алекситимия и аутичные черты влияют на личность: связь с...

Ключевые моменты исследования Это исследование изучило, как аутичные черты и алекситимия связаны с о...

Рисунок 1: Схема расположения ориентиров на лице
Рисунок 1: Схема расположения ориентиров на лице
Рисунок 2: Архитектура модели FaceDig
Рисунок 2: Архитектура модели FaceDig
Рисунок 3: Структура CNN-модуля
Рисунок 3: Структура CNN-модуля
Рисунок 4: Сравнение автоматической и ручной разметки
Рисунок 4: Сравнение автоматической и ручной разметки
Рисунок 5: Влияние возраста на точность
Рисунок 5: Влияние возраста на точность
Рисунок 6: Распределение ошибок позиционирования
Рисунок 6: Распределение ошибок позиционирования
Thumbnail 1
Thumbnail 2
Thumbnail 3
Thumbnail 4
Thumbnail 5
Thumbnail 6
Оригинал исследования на сайте автора

Введение в геометрическую морфометрию лиц

Разметка ориентиров — ключевой этап геометрической морфометрии, позволяющий количественно анализировать форму биологических структур, таких как кости или мягкие ткани лица. Традиционные ориентиры соответствуют четким анатомическим точкам, а полуориентиры (скользящие точки) используются там, где точное определение локализации затруднено.

Проблемы ручной разметки

  • Трудоемкость: ручное нанесение сотен точек требует значительного времени
  • Субъективность: вариативность между исследователями снижает воспроизводимость
  • Ограничения существующих инструментов: многие конфигурации ориентиров разработаны для психологических экспериментов, а не для биометрики

Решение: FaceDig

Мы представляем FaceDig — ИИ-инструмент для автоматической разметки 72 ориентиров на фронтальных фотографиях лиц. Его особенности:

Точность на уровне эксперта с воспроизводимостью 0.97 по данным Procrustes-анализа

Технические преимущества

  • Открытый исходный код (facedig.org)
  • Совместимость с TpsDig2 и аналитическими платформами (R/Python)
  • Двухэтапная архитектура: грубая проекция + CNN-уточнение

Методология

Обучение проводилось на 3,937 этнически разнообразных фотографиях. Архитектура включает:

1. Грубая проекция

Использование MediaPipe для первичного определения 239 ориентиров с последующей линейной проекцией в целевую 72-точечную систему.

2. CNN-уточнение

Для каждого ориентира применялся ансамбль из 6 сверточных сетей, анализирующих изображение в разных масштабах (32-72 пикселя). Потери рассчитывались через Wing Loss.

Результаты тестирования

Сравнение автоматической (FDG) и ручной коррекции (HC) показало:

Метрика Значение
Корреляция по дистинктивности r=0.94 (p<0.001)
Корреляция по асимметрии r=0.92 (p<0.001)

Практическое применение

FaceDig особенно полезен для:

  • Анализа исторических фотоархивов
  • Кросс-культурных исследований
  • Работы с большими базами данных (паспорта, соцсети)

Ограничения и перспективы

Текущая версия работает только с фронтальными изображениями. В разработке — поддержка профильных снимков и улучшенная обработка возрастных изменений.

Короткие версии статей можно найти в телеграм-канале.

Посмотреть канал
Кликните еще раз для перехода