Warsztaty foniatryczne Badania instrumentalne w foniatrii: wideolaryngostroboskopia, kimografia, analiza akustyczna Techniki badania i interpretacja wyników M. Just1, M.H. Tyc1

1 – DiagNova Technologies sp.j., Wrocławski Park Technologiczny

Łódź, 06–07 marca 2014

Plan • • • • • •

Wstęp Przygotowanie i konfiguracja wideostroboskopu Przygotowanie optyki – przede wszystkim ostrość Realizacja nagrania Analiza nagrania klatka po klatce Kimografia

• •

Analiza przekrojów kimograficznych Parametryzacja ruchu fałdów



Analiza akustyczna



Dokumentowanie badania foniatrycznego

– – – –

wybór fragmentu (co najmniej 2 cykle, widoczne fałdy) stabilizacja obrazu fałdów poprawianie przekroju kimograficznego weryfikacja poprawności przekroju kimograficznego

– –

segmentacja obrazu – wyznaczenie szpary głośni wyznaczenie parametrów opisujących ruch krawędzi fałdu dla każdego przekroju przez fałdy

– – – – –

rejestracja sygnału wyznaczanie częstotliwości podstawowej z weryfikacją spektrogramy parametryzacja wykorzystanie do weryfikacji badania wideostroboskopowego

– – – – – –

dobór klatek z filmu zestaw przekrojów kimograficznych sekwencja "kimograficzna" wykresy parametryzujące ruch fałdów fonowibrogram analiza akustyczna

Przygotowanie i konfiguracja wideostroboskopu

• Podłączenie

– o ile to możliwe należy wybierać łącze cyfrowe (ostatnio popularne stają się DVI oraz HDMI) – monitor o dobrej jakości kolorów i szerokich, zwłaszcza w pionie, kątach dobrego widzenia

• Oprogramowanie

– łatwe sterowanie nagrywaniem (przycisk nożny lub przy optyce) – problem opóźnienia przy nagrywaniu – Co nagrywać – klatki czy sekwencje? Sekwencje!

• Jakość obrazu

– balans bieli – światło i jeszcze raz światło

• „Slow motion” poprzez stroboskopię

– prawidłowe określanie częstotliwości pracy fałdów (warunkiem niezakłócona praca mikrofonu wideostroboskopu) – Ustawienie długości cyklu „slow motion” – 25 klatek na cykl pracy fałdów

Przygotowanie optyki – przede wszystkim ostrość

• Dezynfekcja – zaplanowanie miejsca pracy • Zapobieganie parowaniu optyki – nagrzewanie, ale nie zawsze – środki chemiczne

• Ustawienie ostrości – wstępne ustawienie ostrości – korekta „w biegu”

Realizacja nagrania

• Widoczność i rozmiar fałdów na nagraniu • Stabilność obrazu • Długość nagrania (widoczne co najmniej 2–3 cykle pracy fałdów)

• Kwestia praktyki i znalezienia własnego sposobu • Wymagania co do jakości nagrania – Im planowany zakres analiz jest większy, tym nagranie musi być staranniejsze (zasada „Z pustego i Salomon nie naleje”)

• Wideostroboskop to nie szybka kamera – ma ograniczenia

Analiza nagrania klatka po klatce

• Ciągle jest to podstawowy rodzaj analizy nagrania „slow motion” • Materiał do analizy obejmować może setki klatek • Analiza musi być uważna, o poprawnym zdiagnozowaniu patologii przesądzić może jedna klatka • Dobry dobór klatek do dokumentacji

Analiza obrazu klatka po klatce. Poprawianie obrazu

Przykłady użycia korekcji barwnej i filtracji do poprawienia obrazu endoskopowego

Analiza obrazu klatka po klatce. Uwaga na przeplot Przeplot zwykle nie jest widoczny w danych nagranych stroboskopowo, jeśli jednak istnieje, należy go bezwzględnie usunąć przed przystąpieniem do wszelkich analiz.

Kimografia • •

Kimografia to nie analiza danych. Nie są też generowane nowe dane. To tylko zmiana sposobu prezentacji danych Wynikowe przekroje kimograficzne są tak dobre, jak dobre było nagranie wejściowe kolejne klatki filmu domena czasowa

kimografia

przekrój przez fałdy domena przestrzenna (położenie na fałdzie)

Kimografia. Kolejne etapy •

Wybór fragmentu (co najmniej 2 cykle, widoczne fałdy)



Stabilizacja obrazu fałdów i kadrowanie



Wykonanie przekroju kimograficznego prostopadle do osi fałdów



Poprawianie przekroju kimograficznego



Weryfikacja poprawności przekroju kimograficznego

preprocesssing

postprocessing

Kimografia. Wybór fragmentu nagrania • •

• • • •

Poprawna sekwencja „slow motion” pracy fałdów podczas fonacji Co najmniej 2 cykle, co przekłada się na około 50 klatek filmu w wybranym fragmencie sekwencji Górna granica ilości cykli związana z możliwościami technicznymi sprzętu, zwykle około 100 klatek (4 cykle) Widoczne fałdy, o ile to możliwe, widoczne spoidło przednie i tylne Inne struktury anatomiczne nie zasłaniają (nawet chwilowo) krawędzi wewnętrznej fałdów Początek i koniec nagrania w podobnej fazie ruchu, najlepiej pośredniej pomiędzy zamknięciem i pełnym otwarciem

Kimografia. Stabilizacja obrazu fałdów i kadrowanie Funkcje • Odrzucenie zbędnych części obrazu • Usunięcie pozornych ruchów i zmiany rozmiaru fałdów związanych z niechcianym ruchem końcówki endoskopu • Ustawienie fałdów na środku z osią fałdów pokrywającą się z osią całego obrazu

Kimografia. Stabilizacja obrazu fałdów i kadrowanie Realizacja • Automatyczne śledzenie przez komputer położenia wskazanych punktów (nieruchomych w stosunku do spoideł fałdów) na kolejnych klatkach filmu Schemat postępowania • Zaznaczenie punktów do śledzenia (na rysunkach na żółto) • Zaznaczenie spoideł lub innych punktów na osi fałdów • Uruchomienie automatycznej procedury stabilizacji i kadrowania

Kimografia. Wykonanie prostopadłego przekroju przez fałdy

Kimografia. Poprawianie przekroju Usunięcie wahań jasności • Charakterystyczne dla starszych modeli wideostroboskopów klasycznych (nie migawkowych) bez synchronizacji błysku z migawką kamery przed

po

Kimografia. Weryfikacja poprawności przekroju • •

Co najmniej dwa cykle pracy fałdu Symetryczne (względem osi fałdu) krawędzie zewnętrzne fałdów, ewentualnie, przy braku widoczności jednej z krawędzi gładki przebieg linii kreślonej przez krawędź drugiego

Kimografia. Weryfikacja poprawności przekroju. Najczęstsze błędy Zbyt mała ilość cykli pracy fałdów w analizowanej sekwencji

błędny

prawidłowy

Kimografia. Weryfikacja poprawności przekroju. Najczęstsze błędy Niestabilne położenie fałdów głosowych na nagraniu

błędny

po korekcie

Kimografia. Weryfikacja poprawności przekroju. Najczęstsze błędy Błędy synchronizacji stroboskopii z ruchem fałdów

zamrożony ruch fałdów

symetryczne poszarpanie linii ruchu spowodowane nieregularnymi ruchami fałdów

Kimografia. Analiza przekrojów •

Analizę przekrojów kimograficznych prowadzić można na dwa sposoby – –



Ocenę zasięgu patologii (np. zakres fałdu ze zdiagnozowaną niedomykalnością) Ocenę stopnia patologii (poziom asymetrii pracy fałdów)

Oba sposoby mogą dotyczyć tej samej patologii (np. dla niedomykalności można podać zakres fałdu, na którym występuje, jak również jej poziom poprzez określenie stopnia zachowania szczątkowego ruchu fałdów w miejscu niedomykania)

Kimografia. Analiza przekrojów – ocena typu patologii

niedomykalność

asymetria pracy fałdów (leukoplakia prawego fałdu głosowego)

różnica fazy (niewydolność głośni)

Parametryzacja ruchu fałdów

Prezentacja wybranych klatek z zarejestrowanej sekwencji „slow motion” czy też przedstawianie przekrojów kimograficznych jest opisem jakościowym i ostatecznie opiera się na interpretacji przedstawionych obrazów przez specjalistę. Opis taki zawsze jest w pewnym stopniu subiektywny – zależny od zbioru doświadczeń diagnosty. Następny stopień obiektywizacji obrazowego badania foniatrycznego musi polegać na wprowadzeniu opisu ilościowego obserwowanych zjawisk, czyli na sparametryzowaniu ruchu fałdów. Etapy parametryzacji 1. Segmentacja – wyznaczenie szpary głośni albo wewnętrznej krawędzi fałdów 2. Wyznaczenie krzywej ruchu fałdów dla każdego przekroju przez fałdy 3. Określenie wartości parametrów na podstawie kształtu krzywych ruchu fałdów

Parametryzacja ruchu fałdów. Wyznaczenie szpary głośni

Parametryzacja ruchu fałdów. Określenie wartości parametrów

Część nie zamykająca się: 0% Część nie otwierająca się: 17%

Średnia asymetria na całej długości: 0,13 Średnia różn. fazy na całej długości: 3,12°

Część nie zamykająca się: 0% Część nie otwierająca się: 14%

Średnia asymetria na całej długości: 0,16 Średnia różn. fazy na całej długości: 0,51°

Część nie zamykająca się: 33% Część nie otwierająca się: 11%

Średnia asymetria na całej długości: 0,24 Średnia różn. fazy na całej długości: 7,67°

Część nie zamykająca się: 0% Część nie otwierająca się: 17%

Średnia asymetria na całej długości: 0,53 Średnia różn. fazy na całej długości: 38,62°

Analiza akustyczna. Schemat postępowania Wybór typu analizy (wybór treści nagrania)

Rejestracja materiału audio Korekta ustawień wyznaczania F0

Wyznaczenie częstotliwości podstawowej z weryfikacją Częstotliwość wyznaczona błędnie

Częstotliwość niewyznaczalna

nie

Diagnoza i dokumentowanie na podstawie spektrogramu

Wyznaczenie statystyk F0 i formantów

Częstotliwość wyznaczalna

Czy wykres częstotliwości płaski i fonacja „a”

tak

Pełna diagnostyka parametryczna

Analiza akustyczna. Wybór typu analizy

• Różne cele diagnostyczne wymagają różnych typów analiz

– Rejestrowany materiał audio eksponuje pożądane cechy – Dopasowany do rejestrowanego materiału audio sposób nagrywania (nagranie inicjowane przez operatora lub przez pacjenta, ew. sposób fonacji kontrolowany przez komputer) – Wyznaczane odmienne zestawy parametrów – Różne sposoby prezentowania wyników Dostępne analizy: – Klasyczna diagnostyczna (fonacja dwukrotnej głoski „a”) – Wydolnościowa (fonacja maksymalnie wydłużonej głoski „a”) – Próba obciążeniowa (wielokrotna analiza diagnostyczna rozdzielana zadaniem głosowym obciążającym narząd głosu) – Analiza frazy złożonej (wyraz lub zdanie) – Analiza powtarzalności (analiza frazy powtarzanej – analiza neurologiczna, neurologopedyczna itp.) – Analiza głosów śpiewaczych (pole głosowe, analiza przejść międzyrejestrowych)

Analiza akustyczna. Rejestracja próbki

• Warunki

– wygłuszone pomieszczenie (brak odbić dźwięku od ścian) – brak zakłóceń – odpowiednia odległość ust badanej osoby od mikrofonu (około 10 cm)

• Sprzęt

– mikrofon pojemnościowy o płaskiej charakterystyce w zakresie 100Hz – 10kHz – przedwzmacniacz do mikrofonu z zasilaniem „fantom” – Dla nagrań diagnostycznych rozdzielczość 16 bitów, częstotliwość próbkowania 22050 Hz, do nagrań „śpiewaczych” dwa mikrofony oraz częstotliwość próbkowania 44100 Hz

• Nagrywana fraza

– adekwatna do celu analizy

(przykładowo, klasyczna analiza diagnostyczna – podwójna fonacja „a” z sekundowym odstępem pomiędzy głoskami)

Analiza akustyczna. Wyznaczanie częstotliwości podstawowej • •

Problemy z najniższym formantem i subharmonikami Praktycznie zawsze niezbędna weryfikacja za pomocą spektrogramu błędnie wyznaczone

poprawnie wyznaczone (lub po korekcie)

Analiza akustyczna. Weryfikacja częstotliwości podstawowej •

Linia F0 powinna pokrywać się z najniższą, występującą jedynie podczas fonacji i możliwie ciągłą, linią spektrogramu

poprawnie

błędnie

Analiza akustyczna. Spektrogramy transformata Fouriera

domena czasowa

domena częstotliwościowa

Analiza akustyczna. Spektrogramy

Analiza akustyczna. Parametryzacja Parametryzacja jest ukoronowaniem całego szeregu analiz. Poprzedzają ją m.in.: • redukcja, • filtracja, • segmentacja. Aby parametryzacja była prawidłowa, wszystkie wcześniejsze operacje muszą być przeprowadzone prawidłowo. Szczególnie wymagający jest etap segmentacji (wyznaczenia częstotliwości podstawowej) i należy poświęcić mu odpowiednią uwagę. Sama parametryzacja jest zwykle operacją stosunkowo prostą. Parametry obliczane są za pomocą prostych wzorów, z bezpośrednim wykorzystaniem wyników segmentacji.

Analiza akustyczna. Parametryzacja – wybrane parametry

Analiza akustyczna. Parametryzacja – prezentacja wyników Głos – wizualne przedstawienie parametrów w stosunku do tzw. normy

Analiza akustyczna. Wykorzystanie do weryfikacji badania wideostroboskopowego

• Wideostroboskop musi zsynchronizować się z ruchem fałdów głosowych, w tym celu sam przeprowadza analizę akustyczną i wyznacza częstotliwość podstawową – wideostroboskop może się mylić – fałdy mogą drgać zbyt nieregularnie lub nieregularności tworzą większe segmenty

• Ostatecznym sposobem na weryfikację wybranych aspektów badania wideostroboskopowego jest analiza akustyczna (obserwacja oscylogramu i spektrogramów)

Dokumentowanie badania foniatrycznego

• Skondensowana forma (przykładowo, użycie fonowibrogramów)

• Umożliwienie obiektywnej diagnozy • W miarę możliwości zawierać powinna – – – – –

wybrane klatki z filmu zestaw przekrojów kimograficznych wykresy parametryzujące ruch fałdów fonowibrogram Wykresy analizy akustycznej (spektrogram, fragment oscylogramu, wykresy zmian wybranych parametrów, wykresy słupkowe parametrów, dobór wykresów, np. spektrogramów uzależniony od typu badania) – Jako uzupełnienie dołączać można sekwencję kimograficzną

Dokumentowanie badania foniatrycznego. Fonowibrogramy – generacja

Śladowa niedomykalność

Duża niedomykalność

Dokumentowanie badania foniatrycznego. Fonowibrogramy – przykłady

Prawie wzorcowa praca fałdów

Praca poprawna, nieco nadmiernie wydłużona faza zamknięcia

Fonowibrogram. Przykład 2

Prawie wzorcowa praca fałdów

Niedowład mięśni zwierających i napinających krtań z wrzecionowatą niewydolnością głośni, kwalifikujący się do uznania choroby zawodowej. Kolor niebieski oznacza fałd przekraczający oś symetrii

Fonowibrogram. Przykład 3

Prawie wzorcowa praca fałdów

Niedomykalność wrzecionowata, faza zamknięcia skrócona, różnica fazy pomiędzy fałdami. Kolor niebieski oznacza fałd przekraczający oś symetrii

Dokumentowanie badania foniatrycznego. Przykład

Zakończenie

Dziękujemy za uwagę