Simple Science

Scienza all'avanguardia spiegata semplicemente

# Informatica# Visione artificiale e riconoscimento di modelli

Un nuovo metodo per segmentare oggetti curvilinei

FreeCOS migliora la segmentazione di forme complesse usando tecniche auto-supervisionate e dati sintetici.

― 4 leggere min


FreeCOS: Un CambiamentoFreeCOS: Un Cambiamentonel Gioco dellaSegmentazionedella segmentazione.etichettatura e migliora l'accuratezzaMetodo rivoluzionario riduce i costi di
Indice

Segmentare oggetti curvilinei, come vasi sanguigni o strade, è fondamentale in settori come la salute e i trasporti. Di solito, questo richiede lavoro manuale, che può essere stancante e soggetto a errori. Di conseguenza, non ci sono molte banche dati pronte all'uso con dati etichettati per addestrare i modelli. Questo articolo presenta un nuovo metodo che utilizza l'Apprendimento Auto-Supervisionato per rendere questo compito più facile ed efficace.

La Sfida

Gli oggetti curvilinei spesso hanno forme complesse con tanti piccoli rami e sono circondati da sfondi rumorosi. I metodi tradizionali si basano pesantemente sul deep learning supervisionato, che ha bisogno di molte annotazioni manuali. Produrre queste annotazioni è costoso e richiede tempo. Inoltre, i metodi tradizionali faticano con la variabilità nell'aspetto tra diversi tipi di immagini di oggetti curvilinei, portando a prestazioni scarse.

Anche se alcune strategie mirano a ridurre la necessità di etichette manuali, come l'adattamento del dominio o la segmentazione non supervisionata, non sono ancora sufficienti. L'adattamento del dominio si basa su dati annotati di buona qualità, mentre i metodi non supervisionati spesso non funzionano bene sugli oggetti curvilinei a causa delle loro forme intricate.

Metodo Proposto: FreeCOS

Per superare queste sfide, il metodo proposto, chiamato FreeCOS, utilizza una combinazione di tecniche di apprendimento auto-supervisionato con dati sintetici creati da frattali. Questo metodo impara a identificare le caratteristiche che distinguono le strutture curvilinee dai loro sfondi senza necessitare di un'ampia quantità di dati etichettati.

Componenti Chiave

  1. Sintesi Frattale-FDA (FFs): Questa parte genera forme curvilinee usando frattali, che sono schemi matematici che si ripetono a scale diverse. Queste forme vengono quindi aggiunte a immagini non etichettate per creare immagini di addestramento sintetiche. In questo modo, il modello impara sia dalle forme sintetiche sia dagli sfondi delle immagini reali.

  2. Allineamento delle Informazioni Geometriche (GIA): Questa tecnica allinea le caratteristiche delle immagini sintetiche e di quelle target. Aiuta il modello a concentrarsi sulle forme geometriche degli oggetti curvilinei piuttosto che sulle differenze di luminosità o intensità luminosa. Allineando le caratteristiche, il modello può imparare in modo più efficace dai dati.

Implementazione

Il metodo prende immagini non etichettate e le combina con strutture curvilinee sintetiche create attraverso il sistema frattale. Il modulo FFS genera immagini in cui queste strutture sono integrate in immagini reali per addestrare il modello. Poi il GIA riduce le differenze di intensità tra le immagini sintetiche e quelle reali, facilitando l'apprendimento del modello.

Il processo inizia generando strutture curvilinee attraverso i frattali, che vengono adattati per mimare l'aspetto di oggetti reali. Queste immagini sintetiche vengono poi mescolate con immagini reali per produrre un set di addestramento variegato.

Risultati

Per valutare l'efficacia di FreeCOS, sono stati condotti diversi esperimenti utilizzando vari dataset pubblici. I risultati hanno mostrato che FreeCOS ha superato i metodi esistenti non supervisionati e tradizionali di un margine significativo. Le metriche di valutazione hanno indicato miglioramenti sostanziali, dimostrando l'efficacia del metodo nel segmentare accuratamente gli oggetti curvilinei.

Vantaggi di FreeCOS

  1. Riduzione delle Necessità di Annotazione: Utilizzando dati generati, FreeCOS riduce la dipendenza dalle annotazioni manuali, rendendo più efficiente la preparazione dei dataset.

  2. Adattabilità: Il metodo può essere applicato a vari dataset, dimostrando la sua versatilità in diversi contesti, come l'imaging medico e i trasporti.

  3. Apprendimento delle Caratteristiche: L'uso di immagini sintetiche aiuta il modello a identificare caratteristiche cruciali degli oggetti curvilinei che potrebbero essere difficili da distinguere in sfondi rumorosi.

Confronto con Altri Metodi

FreeCOS è stato confrontato con diversi metodi all'avanguardia. Mentre i metodi tradizionali spesso si basano su caratteristiche fatte a mano e richiedono una meticolosa messa a punto dei parametri, FreeCOS utilizza tecniche di machine learning che apprendono automaticamente dai dati.

Rispetto agli ultimi metodi auto-supervisionati, FreeCOS ha mostrato prestazioni superiori, in particolare nei casi in cui il rumore di fondo potrebbe confondere gli approcci di segmentazione tradizionali.

Conclusione

Il metodo FreeCOS proposto rappresenta un passo significativo in avanti nella segmentazione di oggetti curvilinei. Utilizzando l'apprendimento auto-supervisionato con dati sintetici, combina efficacemente i vantaggi degli approcci di apprendimento sia supervisionato che non supervisionato, consentendo una segmentazione più efficiente senza un'eccessiva dipendenza dai dati etichettati manualmente.

Questa innovazione non solo semplifica il processo di segmentazione, ma apre anche nuove possibilità nel campo dell'analisi delle immagini, in particolare per le applicazioni in medicina e nello sviluppo delle infrastrutture.

Fonte originale

Titolo: FreeCOS: Self-Supervised Learning from Fractals and Unlabeled Images for Curvilinear Object Segmentation

Estratto: Curvilinear object segmentation is critical for many applications. However, manually annotating curvilinear objects is very time-consuming and error-prone, yielding insufficiently available annotated datasets for existing supervised methods and domain adaptation methods. This paper proposes a self-supervised curvilinear object segmentation method that learns robust and distinctive features from fractals and unlabeled images (FreeCOS). The key contributions include a novel Fractal-FDA synthesis (FFS) module and a geometric information alignment (GIA) approach. FFS generates curvilinear structures based on the parametric Fractal L-system and integrates the generated structures into unlabeled images to obtain synthetic training images via Fourier Domain Adaptation. GIA reduces the intensity differences between the synthetic and unlabeled images by comparing the intensity order of a given pixel to the values of its nearby neighbors. Such image alignment can explicitly remove the dependency on absolute intensity values and enhance the inherent geometric characteristics which are common in both synthetic and real images. In addition, GIA aligns features of synthetic and real images via the prediction space adaptation loss (PSAL) and the curvilinear mask contrastive loss (CMCL). Extensive experimental results on four public datasets, i.e., XCAD, DRIVE, STARE and CrackTree demonstrate that our method outperforms the state-of-the-art unsupervised methods, self-supervised methods and traditional methods by a large margin. The source code of this work is available at https://github.com/TY-Shi/FreeCOS.

Autori: Tianyi Shi, Xiaohuan Ding, Liang Zhang, Xin Yang

Ultimo aggiornamento: 2023-07-14 00:00:00

Lingua: English

URL di origine: https://arxiv.org/abs/2307.07245

Fonte PDF: https://arxiv.org/pdf/2307.07245

Licenza: https://creativecommons.org/licenses/by/4.0/

Modifiche: Questa sintesi è stata creata con l'assistenza di AI e potrebbe presentare delle imprecisioni. Per informazioni accurate, consultare i documenti originali collegati qui.

Si ringrazia arxiv per l'utilizzo della sua interoperabilità ad accesso aperto.

Altro dagli autori

Articoli simili