RO130303A0 - Sistem şi metodă pentru navigaţie în bronhoscopie - Google Patents
Sistem şi metodă pentru navigaţie în bronhoscopie Download PDFInfo
- Publication number
- RO130303A0 RO130303A0 ROA201400678A RO201400678A RO130303A0 RO 130303 A0 RO130303 A0 RO 130303A0 RO A201400678 A ROA201400678 A RO A201400678A RO 201400678 A RO201400678 A RO 201400678A RO 130303 A0 RO130303 A0 RO 130303A0
- Authority
- RO
- Romania
- Prior art keywords
- instrument
- patient
- virtual
- bronchoscope
- navigation
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000013276 bronchoscopy Methods 0.000 title claims abstract description 14
- 239000003550 marker Substances 0.000 claims abstract description 25
- 238000001574 biopsy Methods 0.000 claims abstract description 21
- 210000003484 anatomy Anatomy 0.000 claims abstract description 13
- 238000011835 investigation Methods 0.000 claims abstract description 4
- 238000004422 calculation algorithm Methods 0.000 claims description 11
- 206010028980 Neoplasm Diseases 0.000 claims description 10
- 238000013519 translation Methods 0.000 claims description 7
- 230000014616 translation Effects 0.000 claims description 7
- 230000009466 transformation Effects 0.000 claims description 4
- 230000003213 activating effect Effects 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 claims description 2
- 238000013507 mapping Methods 0.000 claims description 2
- 230000001131 transforming effect Effects 0.000 claims description 2
- 238000003325 tomography Methods 0.000 abstract description 6
- 239000000853 adhesive Substances 0.000 abstract description 3
- 230000001070 adhesive effect Effects 0.000 abstract description 3
- 238000004590 computer program Methods 0.000 abstract 1
- 238000003384 imaging method Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 210000004072 lung Anatomy 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 206010058467 Lung neoplasm malignant Diseases 0.000 description 1
- 101100246029 Mus musculus Ptpn2 gene Proteins 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 201000005202 lung cancer Diseases 0.000 description 1
- 208000020816 lung neoplasm Diseases 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000010845 search algorithm Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Landscapes
- Endoscopes (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Invenţia se referă la un sistem şi la o metodă de navigare, cu urmărire electromagnetică, destinate asistării procedurilor medicale de bronhoscopie. Sistemul conform invenţiei este constituit dintr-un echipament electromagnetic de determinare a poziţiei în spaţiu, alcătuit dintr-un generator () de câmp magnetic de mică intensitate, ce se poziţionează în apropierea pacientului în timpul investigaţiei, astfel încât zona anatomică de interes să fie cuprinsă în volumul câmpului magnetic, dintr-o unitate () de control ce interpretează semnalele electrice primite de la nişte senzori, şi le transformă în coordonate şi unghiuri de rotaţie, dintr-un instrument () pentru navigaţie, de formă tubulară, flexibil, de lungime egală şi diametru mai mic decât cel al canalului de lucru al unui bronhoscop (), având fixat, la capătul proximal din apropierea unor pense () de biopsie, un senzor electromagnetic de poziţie ale cărui fire electrice, conectate la un cablu şi un conector, trec printr-un tub şi ies prin capătul distal al instrumentului (), unde tubul este prevăzut cu un mâner pentru manipulare, instrumentul () putând fi introdus pe canalul de lucru al bronhoscopului (), dintr-un marker () activ, adeziv, destinat a fi lipit de pielea pacientului în apropierea zonei de investigat, şi dintr-un computer () pe care rulează un cod executabil dedicat, şi care este prevăzut cu două ecrane principale. Metoda de navigare, conform invenţiei, este implementată prin intermediul unui program de calculator ce construieşte un model tridimensional al arborelui bronşic al pacientului, calculează în timp real poziţia capului instrumentului în interiorul pacien
Description
SISTEM ȘI METODĂ PENTRU NAVIGAȚIE ÎN BRONHOSCOPIE
Invenția se referă la un sistem de navigare cu urmărire electromagnetică, destinat asistării procedurilor medicale de bronhoscopie.
In prezent, pentru diagnosticarea cancerului pulmonar, medicii pregătesc procedura de biopsie prin examinarea unui număr mare de secțiuni tomografice, realizate înaintea procedurii. După aceea, manipulează un video-broncoscop prin căile bronșice atât cât permite diametrul bronhoscopului. în final, introduc o pensă de biopsie prin canalul bronhoscopului, și apoi o extind înafara acestuia prin căile bronșice până la leziunile/tumorile periferice și execută biopsia iară niciun control vizual. în consecință, între 43% și 95% dintre proceduri eșuează în a ajunge la țintele periferice, în funcție de mărimea și locația acestora. Când aceste eșecuri intervin, medicii sunt nevoiți să repete procedura sub control radiologie, cu un grad de iradiere crescut pentru pacient si medic, ori să folosească metode mai invazive care cresc posibilitatea complicațiilor, precum biopsia percutanata.
Se cunosc o serie de echipamente de ghidare prin localizare electromagnetică a poziției unei sonde endoscopice în timpul unei proceduri neinvazive. Acestea folosesc, de regulă un generator de câmp magnetic, mai mulți senzori de poziție, dintre care cel puțin unul plasat pe dispozitivul medical sau chirurgical, iar ceilalți pe corpul pacientului, prin intermediul unor markeri adezivi, precum și niște procesoare capabile să prelucreze datele achiziționate de la senzori și să le transpună în imagini, pe care le suprapun peste imaginile scanate anterior. în ceea ce privește corelarea spațiului câmpului magnetic generat cu un spațiu tridimensional al pacientului, pentru a oferi utilizatorului imaginea poziției relative al unuia față de celălalt, este nevoie de o aplicație dedicată, capabilă să transpună datele din imaginile scanate anterior în imagini tridimensionale, prin care să fie urmărită dinamica poziției relative a instrumentului de lucru (endoscop, cateter, bronhoscop) în timp real.
Astfel, documentul W02010049834 Al, publicat la 6 mai 2010, dezvăluie o metodă și un sistem de urmărire electromagnetică într-o procedură medicală, asistată de computer. Printre altele, în document se revendică și un cod executabil capabil să comande executarea următoarelor operațiuni: obținerea poziției unor markeri, pe baza curenților induși în senzorii fixați pe markeri, primul marker fixat în anatomia-țintă, un al doilea marker în afara acesteia și un al treilea marker în apropierea anatomiei-țintă; obținerea imaginii anatomiei-țintă, care include vizualizarea celui de-al doilea marker și o regiune transpusă în imagini, asociată cu primul marker, precum și înregistrarea unui spațiu electromagnetic al anatomiei-țintă cu spațiul transpus în imagini al anatomiei-țintă, pe baza a cel puțin uneia dintre pozițiile primului, al celui de-al doilea și al celui de-al treilea marker și pe vizualizarea regiunii transpuse în imagini și a celui de al doilea și al treilea marker, urmată de urmărirea electromagnetică a unui dispozitiv chirurgical, folosind spațiile înregistrate electromagnetic și transpuse în imagini ale anatomiei-țintă. De asemenea, una dintre operațiuni presupune comanda afișării poziției dispozitivului chirurgical suprapus imaginii anatomiei-țintă, imaginile fiind obținute prin, cel puțin, tomografie computerizată, rezonanță magnetică sau ultrasunete.
Documentul US8218846 B2, publicat în 10 iulie 2012 dezvăluie un sistem și o metodă de navigare prin căile respiratorii ale unui pacient care poate construi, selecta și prezenta modelul tridimensional al rețelei căilor și a unui traseu către o țintă prin acestea. Sistemul conține și o parte de navigare utilizând modelul și o serie de puncte preselectate, utilizatorul vizual pe camera bronhoscopului trecerea de aceste puncte.
Un alt document, US8218847 B2, publicat în 10 iulie 2012 dezvăluie o metodă corelare între poziția instantanee a unui senzor în interiorul unei rețele de tuburi și o serie de imagini ale rețelei scanate anterior. Corelarea inițială se face cu ajutorul unui endoscop care vizualizează un anumit marker anatomic împreuna cu imaginea senzorului. Sistemul traseaza o linie virtuală de la senzor la marker și se calculează punctul de incidență cu markerul care este considerat punct de corelare. Algoritmul de ^-20U 0 0 6 7 6 ”
5 -Μ- MN
Pagina 3 din 15 corelare continuă prin mutarea senzorului în altă poziție și căutarea prin secțiunile scanate anterior o secțiune care se potrivește cu imaginea obținută de endoscop în noua locație.
Documentul US 2009/0209817 Al, publicat la data de 20 august 2009 prezintă o metodă de afișare a informației care îmbunătățește navigarea printr-o rețea de canale în corp, precum căile respiratorii. Astfel utilizatorul selectează o serie de puncte de trecere printr-un arbore bronșic virtual care sunt prezentate pe ecran și înlocuite cu următorul pe măsură ce utilizatorul trece cu bronhoscopul cu un senzor de poziție de fiecare dintre acestea. Utilizatorul urmărește trecerea prin toate punctele selectate în traseul către tumoră, imaginea de bronhoscopie virtuală prezentând numai aceste puncte intermediare.
Problema tehnică constă în orientarea în timp real cu instrumentul de biopsie prin arborele bronșic, fără ghidarea dată de imaginea video oferită de bronhoscop care nu poate pătrunde în ramuri bronșice de diametru mic.
Invenția rezolvă problemele tehnice prin determinarea poziției instantanee a instrumentului în raport cu pacientul și crearea în timp real a unei imagini de bronhoscopie virtuală corespunzătoare poziție capului instrumentului, care să înlocuiască imaginea video a bronhoscopului și să fie folosită de către medic la navigare. Invenția propune un sistem de navigare cu urmărire electromagnetică care se poate integra la orice bronhoscop existent, constituit dintr-un echipament electromagnetic de determinare a poziției în spațiu, alcătuit dintr-un generator de câmp magnetic de mică intensitate, care se poziționează în apropierea pacientului în timpul procedurii investigative, astfel încât zona anatomică de interes, care va fi investigată, să fie cuprinsă în volumul câmpului magnetic; un instrument/pensă pentru biopsie, la capătul distal al instrumentului fiind introdus și fixat un senzor electromagnetic de poziție, cu șase grade de libertate; un marker activ care urmează să fie lipit pe pielea pacientului, în apropiere de zona de investigat; o unitate de control, care interpretează semnalele electrice primite de la senzori și le transformă în coordonate și unghiuri de rotație; precum și un computer personal, pe care rulează un produs-program original care construiește un model tridimensional al arborelui bronșic al pacientului, care calculează în timp real poziția capului instrumentului în interiorul pacientului, și construiește o imagine de bronhoscopie virtuală corespunzătoare poziției capului instrumentului și o secțiune virtuală prin volumul CT, folosind o metoda originala bazata pe metoda curbelor geodezice in comparație cu metoda liniei mediane care este folosita de alte invenții (ref).
Avantajele aplicării invenției constau în:
- posibilitatea ghidării pentru biopsie în zonele periferice ale plămânului,
- reducerea timpului de realizare a procedurii de bronhoscopie medicală;
- creșterea gradului de succes și a calității procedurilor de bronhoscopie;
- integrarea sistemului cu echipamentul existent (de exemplu bronhoscop);
- implementarea mai rapida a algoritmului de navigație bazat pe curbe geodezice in comparație cu alte metode mai complexe (de exemplu metoda liniei mediane).
Se dă în continuare un exemplu de realizare al invenției, în legătură și cu figurile 1-12, care reprezintă:
- fig.l - schema de principiu a unui sistem de navigare pentru bronhoscopie, conform invenției;
- fig.2 - arborele bronșic cu punctele de selecție și markerii anatomici;
- fig.3 - ecranul EI al aplicației software;
- fig.4 - ecranul EII al aplicației software;
Sistemul de navigare, conform invenției, este constituit din următoarele elemente:
- un echipament electromagnetic de determinare a poziției în spațiu, alcătuit dintr-un generator 4 de câmp magnetic de mică intensitate (v. fig. 1), care se poziționează în apropierea pacientului în timpul procedurii investigative, astfel încât zona anatomică de interes, care va fi investigată, să fie cuprinsă în volumul câmpului magnetic; o unitate 5 de control, care interpretează semnalele electrice primite de la niște senzori și le transformă în coordonate și unghiuri de rotație (vector de poziție și $-2 0 1 4 0 0 6 7 8
5 -09- 2014
Pagina 4 din 15 orientare), relativ la generatorul 4 de câmp magnetic;
- un instrument/pensă (v. fig. 1) pentru navigație către tumoră și biopsie, de formă tubulară, flexibil, de lungime egală și diametru mai mic decât cel al canalului de lucru al bronhoscopului 6. La capătul proximal al instrumentului 1, în apropierea penselor de biopsie 2 este introdus și fixat un senzor electromagnetic de poziție ale cărui fire electrice conectate la un cablu si un conector specific trec printrun tub și ies prin capătul distal al instrumentului 1 (v. fig. 1), unde tubul este prevăzut cu un mâner pentru manipulare. Instrumentul 1 se introduce pe canalul de lucru al endoscopului 6;
- un marker activ 3 adeziv care urmează să fie lipit pe pielea pacientului (v. fig. 1) înaintea procedurii de bronhoscopie, în apropiere de zona de investigat.
- un computer 7 pe care rulează un cod executabil dedicat, cu două ecrane principale (v. fig. 3 și 4), având arhitectura generală prezentată în Fig. 6, și care este dezvoltat să comande executarea următoarelor operații:
i. citească niște secțiuni imagistice seriate ale unui volum scanat prin tomografie computerizată sau rezonanță magnetică, în format standard DICOM (Digital Imaging and Communications in Mediane');
ii. să recunoscă căile respiratorii și plămânii pe fiecare secțiune, prin variația tonurilor de gri și, utilizând contururi succesive și construind suprafețele prin acestea, să realizeze un model digital tridimensional al anatomiei scanate denumit în continuare MA-3D;
iii. să construiască modelul virtual tridimensional al arborelui bronșic 8 (v. fig. 2) al pacientului denumit în continuare AB-3D, prin metoda marching cubes utilizând accelerarea hardware prin metoda histogramei piramidelor, cu implementare folosind librăriile OpenGL și Open CL și capacitățile computaționale ale GPU (graphics processing unit), precum și linia mediană a căilor respiratorii prin metoda skeletonizării. Algoritmul este aplicat fără folosirea unor etape intermediare de extragere a arborelui, ci direct, pe datele inițiale DICOM și permite selectarea în timp real a isosuprafeței cautate.
iv. să permită identificarea pe secțiunile CT și pe modelul virtual AB-3D poziția tumorii, poziția a 3 markeri anatomici 10a,b,c (v. fig. 2) și poziția markerului activ 3 (v. fig. 1);
v. să propună un traseu al instrumentului de biopsie către tumoră 11 (v. fig. 2) după calea geodezică minimă pe exteriorul peretelui bronsic, folosind algoritmi de căutare (v. Fig. 7 si 8) în grafuri de tip Dijkstra, A Star sau Fast Marching, și să permită modificarea lui de către utilizator;
vi. să achiziționeze date de poziție, furnizate de senzorii încorporați în instrumentul de biopsie 1 și markerului activ 3 în câmpul magnetic generat;
vii. să creeze o cameră video virtuală în capul instrumentului de biopsie care să prezinte o imagine (denumită în continuare IV) prin AB-3D asemănătoare celei furnizate de camera video a bronhoscopului prin corpul pacientului, în funcție de poziția instantanee a capului instrumentului 1 în timpul procedurii. Modelul 3D generat anterior este folosit ca data de intrare pentru generarea imaginii virtuale bronhoscopice conform algoritmului (v fig. 8), prin aplicarea tehnicii High Dynamic Range pentru vizualizarea ultrarealistă.
viii. să segmenteze și să compare automat imaginea IV prin AB-3D cu cea a camerei bronhoscopului la selecția markerilor anatomici 10 și să modifice poziția camerei virtuale prin translații și rotații astfel încât să obțină o diferență minimă între cele două imagini (v. fig. 5);
ix. alinieze MA-3D și AB-3D cu pacientul utilizând cei 4 markerii virtuali de pe CT și cei 4 markeri reali de pe pacient, problema orientării absolute între sistemele de coordonate ale celor două volume fiind rezolvată printr-un algoritm folosind quatemioni pentru calculul transformării;
x. să calculeze și să afișeze în timp real poziția capului instrumentului 1 în interiorul MA-3D și AB-3D, conform datelor de poziție furnizate de senzorul acestuia;
xi. să realizeze o secțiune virtuală (denumită în continuare SV) prin modelul MA-3D, poziționată prin axa senzorului din capătul instrumentului și de orientare variabilă, stabilită de utilizator;
xii. să calculeze și să afișeze diverse date, precum distanța până la tumoare, eroarea de calibrare, i\- 2 : - t o O 3 7 8 - O 5 -09Pagina 5 din 15 alte erori de sistem, pierderea legăturii senzorilor cu sistemul, prin ieșirea din volumului câmpului magnetic generat, alte mesaje.
xiii. să permită operații manuale de reorientare folosind 6 controale pentru 3 translații x,y,z și 3 rotații, pe care utilizatorul să le poată realiza în cazul în care observă o diferență între imaginea IV și cea furnizată de camera bronhoscopului, din cauza respirației pacientului sau modificării geometriei anatomiei interne.
xiv. la navigarea pe căi respiratorii înguste să înregistreze continuu poziția senzorului din capul instrumentului, să compare aceste poziții cu traseul stabilit înaintea proceduri și să facă automat ajustări ale corelării dintre modelele virtuale și pacient prin translații și/sau rotiri ale acestora și prin verificarea coliziunii cu suprafața interioară a modelului AR-3D, folosind suprafața extrasă prin marching cubes, în combinație cu linia mediană extrasă prin skeletonizare, prin algoritmul prezentat în continuare.
xv. Reprezentarea virtuală a instrumentului medical ar trebui să rămână permanent în interiorul căilor respiratorii. Totuși, datorită erorilor inerente ale sistemului de urmărire și localizare, pot exista momente când instrumentul este reprezentat în bronhoscopia virtuală în afara suprafeței căilor respiratorii. Pentru a evita această reprezentare greșită, care ar putea să inducă în eroare utilizatorul, se va folosi conform invenției, un algoritm de detecție și rezolvare a coliziunilor care va păstra permanent reprezentarea instrumentului medical în interiorul căilor respiratorii. Se presupune că inițial, înainte de începerea detecției coliziunilor, instrumentul este reprezentat în interiorul suprafeței căilor respiratorii. Poziția instrumentului va fi furnizată la momente discrete de timp. De asemenea, reprezentarea suprafeței căilor respiratorii este formată din triunghiuri mici. Pașii de detecție și rezolvare a coliziunilor sunt următorii (v. fig. 9):
- fiind date două poziții Pt, Pt+i la două momente succesive de timp t, (t + 1), se evaluează intersecția segmentului PtPt+i cu triunghiurile de pe suprafață. Pentru a evita calcule prea lungi, se vor grupa triunghiurile într-o structură de date care va permite luarea în calcul doar a triunghiurilor din “vecinătatea” segmentului. Dacă nicio intersecție nu a fost detectată, atunci poziția Pt+i a rămas în interiorul suprafeței.
- dacă segmentul PtPt+i intersectează un triunghi (notat Tr în fig. 9 iar Ρττ este punctul de intersecție), atunci Pt+ι este adus de aceeași parte a triunghiului Trcași Pt de-a lungul unei căi “minime” ( Pt+i —► P't+i). O dreaptă perpendiculară pe planul Tr este trasată din poziția Pw. Intersecția cu Tr este notată prin P't, și, dacă intervalul de timp în care sunt furnizate două poziții succesive este suficient de mic, ar trebui să fie în interiorul triunghiului Tr. Dacă nu, atunci sunt necesare corecții suplimentare (v. fig. 10). O paralelă la planul Tr este trasată din punctul Pt, în planul (PtPt+ιΡ'τι·)· Intersecția celor două drepte “trasate” anterior reprezintă poziția corectată P't+i a instrumentului medical.
în cazul în care proiecția poziției Pt+1 pe planul Tr este de fapt în afara triunghiului Tr (compară Fig. 9, A și Fig. 9 B), atunci dreapta formată de punctele PTr and P'Tr este intersectată cu perimetrul triunghiului (v. fig. 10 B), intersecția este notată Ρ·π·). Intersecția dreptelor (PtPt+i) și (Pt+iPTr) reprezintă, în acest caz, poziția corectată Pt+i a instrumentului medical.
Operațiunile de la vii la xv presupun alinierea volumelor CT și pacientului, pentru determinarea poziției instrumentului 1 în raport cu modelele digital MA-3D și AB-3D. Pentru aliniere se vor folosi 4 markeri: markerul activ 3 de pe pieptul pacientului, precum și alți 3 markeri anatomici 10a,b,c aflați la primele 3 intersecții ale ramurilor bronșice (v. fig. 2). Toți cei 4 markeri vor fi identificați pe volumul CT prin selecție cu mouse-ul pe planele de tomografie sau pe AB-3D. Pe pacient, markerul activ 3 va fi plasat de preferință pe osul xifoid iar markerii anatomici 10 vor fi identificați în faza de calibrare a procedurii, prin atingere cu capul bronhoscopului/instrumentul de biopsie.
La atingerea fiecărui marker anatomic cu bronhoscopul, sistemul va segmenta și compara imaginea video a bronhoscopului cu imaginea camerei virtuale în AB-3D. Sistemul va calcula și efectua operații fine de translație sau rotație a camerei video virtuale (v. fig. 5), resegmentând și comparând, până când cele două imagini sunt similare, și va înregistra această nouă poziție ca fiind poziția corectă
Of 2 O 1 4 o o O ? 8 - ’
5 -09- 20M
Pagina 6 din 15 de atingere a markerului anatomic respectiv. Se vor elimina astfel erorile date de atingerea incorectă de către utilizator în căile respiratorii ale pacientului, a markerului anatomic stabilit anterior pe CT/AB3D. Sistemul va face alinierea celor două volume prin suprapunerea celor două seturi de câte 4 puncte, problema orientării absolute între sistemele de coordonate ale celor două volume fiind rezolvată printrun algoritm folosind quatemioni pentru calculul transformării similar metodei Horn (http://dx.d0i.0rg/l 0.1364/JOSAA.4.000629).
Utilizarea sistemului, conform invenției, presupune din partea utilizatorului parcurgerea următoarelor etape:
- realizarea unei investigații imagistice a pacientului, printr-una din metodele tradiționale, precum tomografie computerizată sau rezonanță magnetică. Se va obține o stivă de secțiuni seriate. Pacientul este mutat în camera pentru bronhoscopie.
- conectarea markerului 3 la unitatea de control 5 a echipamentului electromagnetic de determinare a poziției;
- introducerea instrumentului 1 în canalul de lucru al bronhoscopului 6. Se conectează instrumentul 1 la unitatea de control 5 a echipamentului electromagnetic de determinare a poziției;
- plasarea markerului activ 3 pe pieptul pacientului, într-o poziție ușor identificabilă pe tomografie, spre exemplu osul xifoid;
- conectarea generatorului de câmp magnetic 4 la unitatea de control 5 și plasarea generatorului în apropierea pacientului. Unitatea 5 se conectează la computerul 7.
- lansarea aplicației informatice care afișează inițial pe monitor ecranul EI (v. fig. 3) și încărcarea stivei de secțiuni seriate realizate în etapa precedentă.
- segmentarea automată a imaginilor și crearea unui model digital tridimensional (volum digital) al pacientului denumit în continuare MA-3D, prin intermediul programului din cadrul sistemului de de navigație precum și un model digital tridimensional al arborelui bronșic al pacientului denumit în continuare AB-3D și a liniei mediane a acestuia. Implementarea funcțiilor de segmentare și reconstrucție tridimensională prin secțiuni imagistice se va face prin metoda marching cubes utilizând histograma piramidelor, cu implementare folosind librăriile OpenGL și Open CL și capacitățile computaționale ale GPU (graphics processing unit). Imaginile medicale sunt calibrate și aliniate într-un sistem de coordonate general, conform standardului Digital Imagingand Communications in Medicine (DICOM), prin care sunt livrate unui utilizator de către laboratorul de imagistică;
- identificarea de către utilizator pe planele de tomografie (ferestrele 1-3, fig. 3) sau pe AB-3D, a locației markerului activ 3 și a trei markeri anatomici 10a,b,c care poți fi atinși cu bronhoscopul în arborele bronșic al pacientului, de preferință primele 3 intersecții ale ramurilor bronșice (v. fig. 2), a tumorii 12 (v. fig. 2). Sistemul propune utilizatorului, un traseu 11 pe linia geodezică minimă pe care instrumentul de biopsie îl va urma spre tumoră (v fig. 2). Utilizatorul are posibilitatea de a valida sau modifica traseul.
Programul va reține acest traseu de navigație denumit în continuare TN și va face corecții ale traiectoriei instrumentului în cazul în care se observă abateri peste o anumită valoare de la această traiectorie. Se afișează pe ecranul I patru ferestre: fereastrele 1-3 care reprezintă planele clasice de tomografie și fereastra 4 care prezintă modelul virtual AB-3D.
- lansarea ecranului EII (v. fig. 4) cu cele 4 ferestre. Medicul intră cu bronhoscopul în arborele bronșic și atinge cu capul instrumentului markerii anatomici 10a,b,c în aceeași ordine ca și selecția lor pe modelele virtuale. Prin intermediul senzorului de poziție din instrument, sistemul are astfel poziția reală în pacient a markerilor anatomici virtuali. Deoarece există erori inevitabile la atingerea de către utilizator a markerilor anatomici aleși pe modelul virtual, sistemul conține un algoritm pentru diminuarea acestor erori. Astfel, la atingerea fiecărui marker anatomic cu bronhoscopul/instrumentul de biopsie, sistemul va crea pentru poziția respectivă din interiorul AB-3D, imaginea dată de o cameră video virtuală plasată în vârful instrumentului. Sistemul va segmenta și compara imaginea video reală a iȚ - 2 0 1 4 fj G m ~ O
O 5 -os- 20M
Pagina 7 din 15 bronhoscopului din acel moment cu imaginea acestei camere virtuale. Sistemul va calcula și efectua operații fine de translație sau rotație a camerei video virtuale (v. fig. 5) resegmentând și comparând, până când cele două imagini sunt similare, și va înregistra această nouă poziție ca fiind poziția corectă de atingere a markerului anatomic respectiv.
- alinierea volumelor CT și al pacientului prin suprapunerea poziției celor 4 markeri (3 și 10a,b,c) virtuali cu pozițiile corepondenților reali, problema orientării absolute între sistemele de coordonate ale celor două volume fiind rezolvată printr-un algoritm folosind quatemioni pentru calculul transformării similar metodei Horn. Se va realiza astfel o operație de mapare biunivocă între modelele digitale MA-3D și AB-3D și pacient, fiecărui punct al modelelor digitale corespunnu zându-i un singur punct în corpul pacientului. Odată calibrarea efectuată, sistemul este capabil să calculeze poziția capului bronhoscopului în interiorul volumelor digitale, prin transformare de coordonate folosind spre exemplu operații matematice cu quatemioni.
- sistemul afișează un ecran cu patru ferestre: fereastra 1 (v. fig. 4) reprezintă secțiunea virtuală SV, fereastra 2 afișează imaginea furnizată de camera video a bronhoscopului, fereastra 3 afișează modelul virtual MA-3D și fereastra 4 afișează modelul virtual AB-3D. în acest moment se poate începe procedura de bronhoscopie cu navigație.
în timpul bronhoscopiei, medicul urmărește pe ecranul EII, fereastra 3, poziția instantanee a capului instrumentului/bronhoscopului în pacient și verifică dacă traiectoria către țintă este cea corectă, precum și distanța față de aceasta. Totodată compară imaginile din ferestrele 2 și 3 si poate să realizeze operații manuale de reorientare prin acționarea unor funcții specifice ale softului și acționarea unui mouse 3D pentru efectuarea de translații sau rotații până când observă vizual similitudinea celor două imagini.
în momentul în care ramurile bronșice sunt prea mici ca diametru pentru a înainta cu bronhoscopul, medicul extinde instrumentul de biopsie și continuă navigația către tumoră utilizând pentru orientare numai ferestrele 3 și 4. în această etapă a navigației, sistemul va înregistra continuu pozițiile senzorului din capul instrumentului pe care le va compara cu traseul TN stabilit înaintea proceduri. Sistemul va face ajustări ale corelării dintre modelele virtuale și pacient prin translații și/sau rotiri ale acestora, în cazul în care sesizează abateri mai mari decât diametrul căii bronșice în care instrumentul se găsește în acel moment sau coliziuni cu suprafața interioară a modelului AR-3D.
Pentru vizualizarea țesuturilor situate înafara peretelui căilor bronșice, medicul poate folosi imaginea din fereastra 1.
Ajuns la țintă medicul poate efectua în mod clasic cu pensa biopsia țesutului suspect.
Claims (2)
1. Sistem de navigație pentru bronhoscopie constituit dirpUrmătoarele elemente:
- un echipament electromagnetic de determinare a ppziției în spațiu, alcătuit dintr-un generator (4) de câmp magnetic de mică intensitate, care se poziționează în apropierea pacientului în timpul procedurii investigărive, astfel încât zona anatomicăde interes, care va fi investigată, să fie cuprinsă în volumul câmpului magnetic, /
- o unitate (5) de control, care interppeiează semnalele electrice primite de la niște senzori și le transformă în coordonate și unghiuri de rotație;
- un marker (3) activ, care upfiează să fie lipit pe pielea pacientului, în apropiere de zona de investigat; /
- un instrument de biopsie (1) cu senzor de poziție pentru orientarea în arborele bronșic;
- un computer, pe cțtre rulează un produs-program, caracterizat prin aceea tia permite navigarea în timp real a instrumentului (1) în interiorul arborelui
2 O 1 4 0 o δ
0 5 -09- 2014 *
Pagina 7 din 15 bronhoscopului din acel moment cu imaginea acestei camere virtuale. Sistemul va calcula și eft operații fine de translație sau rotație a camerei video virtuale (v. fig. 5) resegmentând și coruparând, până când cele două imagini sunt similare, și va înregistra această nouă poziție ca fiind poziția corectă de atingere a markerului anatomic respectiv. / /
- alinierea volumelor CT și al pacientului prin suprapunerea poziției celor Ț'markeri (3 și 10a,b,c) virtuali cu pozițiile corepondenților reali, problema orientării absolute între sistemele de coordonate ale celor două volume fiind rezolvată printr-un algoritm folosind quatemioni pentru calculul transformării similar metodei Horn. Se va realiza astfel o operație de mapare biupivocă între modelele digitale MA-3D și AB-3D și pacient, fiecărui punct al modelelor digitale corespunnu zându-i un singur punct în corpul pacientului. Odată calibrarea efectuată, sistemul este capabil săcalculeze poziția capului bronhoscopului în interiorul volumelor digitale, prin transformare de coordpnate folosind spre exemplu operații matematice cu quatemioni.
- sistemul afișează un ecran cu patru ferestre: fereastra 1 (v. fig/4) reprezintă secțiunea virtuală SV, fereastra 2 afișează imaginea furnizată de camera video a bronhoscopului, fereastra 3 afișează modelul virtual MA-3D și fereastra 4 afișează modelul virtual AB-3D. în acest moment se poate începe procedura de bronhoscopie cu navigație.
în timpul bronhoscopiei, medicul urmărește pe ecranulΈΙΙ, fereastra 3, poziția instantanee a capului instrumentului/bronhoscopului în pacient și verifică dacă traiectoria către țintă este cea corectă, precum și distanța față de aceasta. Totodată compară imagipile din ferestrele 2 și 3 si poate să realizeze operații manuale de reorientare prin acționarea unor iuncții specifice ale softului și acționarea unui mouse 3D pentru efectuarea de translații sau rotații până când observă vizual similitudinea celor două imagini. ./ în momentul în care ramurile bronșice șnnt prea mici ca diametru pentru a înainta cu bronhoscopul, medicul extinde instrumentul de biopsie și continuă navigația către tumoră utilizând pentru orientare numai ferestrele 3 și 4. în această etapă a navigației, sistemul va înregistra continuu pozițiile senzorului din capul instrumentului >pe care le va compara cu traseul TN stabilit înaintea proceduri. Sistemul va face ajustări ale corelării dintre modelele virtuale și pacient prin translații și/sau rotiri ale acestora, în cazul în care sesizează abateri mai mari decât diametrul căii bronșice în care instrumentul se găsește în acel moment sau coliziuni cu suprafața interioară a modelului AR-3D.
Pentru vizualizarea țesuturilor/situate înafara peretelui căilor bronșice, medicul poate folosi imaginea din fereastra 1. /
Ajuns la țintă medicul poaț<ț efectua în mod clasic cu pensa biopsia țesutului suspect.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| ROA201400678A RO130303A0 (ro) | 2014-09-05 | 2014-09-05 | Sistem şi metodă pentru navigaţie în bronhoscopie |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| ROA201400678A RO130303A0 (ro) | 2014-09-05 | 2014-09-05 | Sistem şi metodă pentru navigaţie în bronhoscopie |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RO130303A0 true RO130303A0 (ro) | 2015-06-30 |
Family
ID=53477064
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| ROA201400678A RO130303A0 (ro) | 2014-09-05 | 2014-09-05 | Sistem şi metodă pentru navigaţie în bronhoscopie |
Country Status (1)
| Country | Link |
|---|---|
| RO (1) | RO130303A0 (ro) |
-
2014
- 2014-09-05 RO ROA201400678A patent/RO130303A0/ro unknown
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230145993A1 (en) | Apparatuses and Methods for Registering a Real-Time Image Feed From an Imaging Device to a Steerable Catheter | |
| US11871913B2 (en) | Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same | |
| US20200146588A1 (en) | Apparatuses and methods for endobronchial navigation to and confirmation of the location of a target tissue and percutaneous interception of the target tissue | |
| CN106659373B (zh) | 用于在肺内部的工具导航的动态3d肺图谱视图 | |
| JP2022523445A (ja) | 動的な介入的3次元モデル変形 | |
| CA2986168C (en) | Electromagnetic navigation registration using ultrasound | |
| RO130303A0 (ro) | Sistem şi metodă pentru navigaţie în bronhoscopie | |
| US12324635B2 (en) | Systems and methods for providing surgical guidance | |
| EP4431042A1 (en) | Medical support device, and operation method and operation program of medical support device |