Порадьте щодо виявлення анатомічних орієнтирів у реконструйованому томі КТ

Я намагаюсь автоматично виявити деякі визначені медичними анатомічними орієнтирами в реконструйованому томі КТ. Медичні лікарі використовують ці орієнтири для вимірювання певних параметрів пацієнта. Я спробував використати дескриптор функції SIFT, оскільки ці анатомічні орієнтири є своєрідними "ключовими точками". Це не дуже вдало, оскільки орієнтири - це точки (або крихітні регіони), які взагалі не є "точками інтересу", як визначено SIFT. Я шукав багато алгоритмів узгодження шаблонів / шаблонів, але, коли у мене немає проблем з обертанням / перекладом / масштабом, я виявляю, що витягнуті функції недостатньо диференціюють кожну орієнтир (від решти орієнтирів і від решти орієнтири орієнтиру) для підготовки класифікатора, який працює досить добре (принаймні, 80% точності виявлення).

Будь ласка, дайте мені знати, якщо я не досить чітко заявляю про проблему.

Я б дуже вдячний за будь-яку пораду.

Дякую!

Приклад зображення:

Малі х хрестики - орієнтири, які я хочу виявити. Рядки представляють вжиті заходи. Це кілька фрагментів різних випадків (звичайно, я не можу розмістити повний об'єм 3D)

Маленькі х хрестики та маленькі квадрати над орієнтирами, які я хочу виявити (я забув зазначити, що у мене є навчальний набір із позначкою орієнтирів). Білі лінії відображають вжиті заходи. Це кілька фрагментів різних випадків (звичайно, я не можу розмістити повний об'єм 3D).

image-processing 3d template-matching

— Федеріко
джерело

Чи можете ви розмістити деякі представницькі фотографії та вказати на функції, які ви намагаєтесь виявити?

— Джим Клей

Я бачу Xs та поля на зображенні, але не розумію, що робить їх орієнтирами. Чи були обрані образи вручну? Якщо ви можете описати, як вони обираються, це б дуже допомогло.

— ендоліт

Так, ці орієнтири вибираються вручну медиками. Насправді, головним чином, їхнє положення в кістці та їх викривлення - це те, що робить їх помітними клініцистом. Можливо, також враховується ширина кіркової кістки (це природно для них, інженеру реально важко визначити, як вони знаходять ці точки), оскільки вона тонша, ніж в інших частинах кістки. Моя трудність насправді полягає в моделюванні всього цього в екстракторі функцій.

— Федеріко

Я вагаюся, щоб написати це як відповідь, але враховуючи, що ви просите лише поради, я це зроблю.

Я пропоную дослідити методи, засновані на двоскладному комплексному перетворенні вейвлетів (DTCWT). Вони виявились корисними для створення дескрипторів, які мають хорошу толерантність до зсуву, масштабу та обертання вихідних зображень. Це не класична проблема в тому, що ви не дозволяєте балів призначати вам, але я підозрюю, що з деякою думкою ви можете адаптувати методику до попередньо визначених орієнтирів.

Зрозуміло, що орієнтири мають певний інтерес з точки зору клініциста, тож у них є щось цікаве - це просто випадок моделювання, що в дескрипторі. Технології вейвлетів (зокрема, DTCWT), як правило, добре допомагають моделювати особливості, які підбирає око.

Можливо, відправною точкою буде цей досить недавній документ .

— Генрі Гомерсалл
джерело