David RutkevichML · medical imaging

←

SeesDisease

82 %AP75, self-learning modelselbstlernendes Modell
1click per cell instead of a maskKlick pro Zelle statt einer Maske
2countries with pilot deploymentsLänder mit Pilotbetrieb

What it isWorum es geht

Blood and tissue analysis still depends on expensive microscopes and on people who can annotate cells pixel by pixel. SeesDisease went after both: a model that learns from one click per cell, and cheap hardware that runs it on the spot.

Blut- und Gewebeanalyse hängt noch immer an teuren Mikroskopen und an Menschen, die Zellen pixelgenau annotieren können. SeesDisease ging beides an: ein Modell, das aus einem Klick pro Zelle lernt, und günstige Hardware, auf der es direkt läuft.

ContributionsBeiträge

  • One click per cell. W-LOI-Net learns instance segmentation from point annotations with collaborative training instead of full masks. The self-learning model reached 82 % AP75.
  • DEPooling. A pooling module that loses less information through encoder–decoder bottlenecks.
  • Haematology pipeline. Leukocyte classification with an SVM and a cascaded U-Net, plus blood cell segmentation models small enough for edge devices.
  • Hardware. A 3D-printed microscope with modular optics that runs the models directly.
  • Deployment. Pilot use in research settings in Germany and Burkina Faso; I found the pilot users and supported the deployments on site.
  • Ein Klick pro Zelle. W-LOI-Net lernt Instanzsegmentierung aus Punktannotationen mit kollaborativem Training statt aus vollständigen Masken. Das selbstlernende Modell erreichte 82 % AP75.
  • DEPooling. Ein Pooling-Modul, das an den Engstellen von Encoder-Decoder-Netzen weniger Information verliert.
  • Hämatologie-Pipeline. Leukozyten-Klassifizierung mit SVM und kaskadiertem U-Net, dazu Blutzellsegmentierungsmodelle, die auf Edge Devices laufen.
  • Hardware. Ein 3D-gedrucktes Mikroskop mit modularer Optik, auf dem die Modelle direkt laufen.
  • Einsatz. Pilotbetrieb in Forschungseinrichtungen in Deutschland und Burkina Faso; ich habe die Pilotnutzer gewonnen und die Einsätze vor Ort begleitet.

RecognitionAuszeichnungen

Winner of the Bundeswettbewerb Künstliche Intelligenz; national finalist at the Social Impact Award 2024 in Vienna.

Gewinner des Bundeswettbewerbs Künstliche Intelligenz; nationaler Finalist beim Social Impact Award 2024 in Wien.

Stack