26. September 2023

Entfesseln Sie die Kraft der KI, um das Verhalten von Tieren zu verfolgen

Salk-Wissenschaftler entwickeln GlowTrack, um das Verhalten von Menschen und Tieren mit besserer Auflösung und mehr Vielseitigkeit zu verfolgen

Salk-Nachrichten


Entfesseln Sie die Kraft der KI, um das Verhalten von Tieren zu verfolgen

Salk-Wissenschaftler entwickeln GlowTrack, um das Verhalten von Menschen und Tieren mit besserer Auflösung und mehr Vielseitigkeit zu verfolgen

LA JOLLA – Bewegung bietet einen Einblick in die Funktionsweise des Gehirns und die Steuerung des Körpers. Von der Beobachtung mit dem Klemmbrett und dem Stift bis hin zu modernen, auf künstlicher Intelligenz basierenden Techniken hat die Verfolgung von Bewegungen von Menschen und Tieren einen langen Weg zurückgelegt. Aktuelle Spitzenmethoden nutzen künstliche Intelligenz, um Körperteile automatisch bei ihrer Bewegung zu verfolgen. Allerdings ist das Training dieser Modelle immer noch zeitintensiv und dadurch begrenzt, dass die Forscher jedes Körperteil hunderte bis tausende Male manuell markieren müssen.

Nun, außerordentlicher Professor Eiman Azim und ihr Team haben GlowTrack entwickelt, eine nicht-invasive Methode zur Bewegungsverfolgung, die fluoreszierende Farbstoffmarkierungen verwendet, um künstliche Intelligenz zu trainieren. GlowTrack ist robust, zeiteffizient und hochauflösend – es kann eine einzelne Ziffer auf der Pfote einer Maus oder Hunderte von Orientierungspunkten auf einer menschlichen Hand verfolgen.

Menschliche Hand, markiert mit fluoreszierenden GlowTrack-Tags.
Menschliche Hand, markiert mit fluoreszierenden GlowTrack-Tags.
Hier tippen für ein hochauflösendes Bild.
Bildnachweis: Salk Institute

Die Technik, veröffentlicht in Nature Communications veröffentlicht am 26. September 2023 hat Anwendungen, die von der Biologie über die Robotik bis zur Medizin und darüber hinaus reichen.

„In den letzten Jahren hat es eine Revolution in der Verhaltensverfolgung gegeben, da leistungsstarke Werkzeuge der künstlichen Intelligenz ins Labor gebracht wurden“, sagt Azim, leitender Autor und Inhaber des William Scandling Developmental Chair. „Unser Ansatz macht diese Werkzeuge vielseitiger und verbessert die Art und Weise, wie wir verschiedene Bewegungen im Labor erfassen. Eine bessere Quantifizierung der Bewegung gibt uns einen besseren Einblick in die Art und Weise, wie das Gehirn das Verhalten steuert, und könnte bei der Untersuchung von Bewegungsstörungen wie Amyotropher Lateralsklerose (ALS) und Parkinson-Krankheit hilfreich sein.“

Aktuelle Methoden zur Erfassung von Tierbewegungen erfordern häufig, dass Forscher Körperteile manuell und wiederholt auf einem Computerbildschirm markieren – ein zeitaufwändiger Prozess, der menschlichen Fehlern und Zeitbeschränkungen unterliegt. Aufgrund der menschlichen Annotation können diese Methoden normalerweise nur in einer engen Testumgebung verwendet werden, da sich Modelle der künstlichen Intelligenz auf die begrenzte Menge an Trainingsdaten spezialisieren, die sie erhalten. Wenn sich beispielsweise das Licht, die Ausrichtung des Tierkörpers, der Kamerawinkel oder eine Reihe anderer Faktoren ändern würden, würde das Modell das verfolgte Körperteil nicht mehr erkennen.

Um diese Einschränkungen zu beseitigen, verwendeten die Forscher fluoreszierende Farbstoffe, um Teile des tierischen oder menschlichen Körpers zu markieren. Mit diesen „unsichtbaren“ fluoreszierenden Farbstoffmarkierungen kann schnell eine enorme Menge visuell vielfältiger Daten erstellt und in die Modelle der künstlichen Intelligenz eingespeist werden, ohne dass menschliche Anmerkungen erforderlich sind. Sobald diese robusten Daten zugeführt werden, können diese Modelle verwendet werden, um Bewegungen in viel vielfältigeren Umgebungen und mit einer Auflösung zu verfolgen, die mit manueller menschlicher Kennzeichnung weitaus schwieriger zu erreichen wäre.

Von links: Daniel Butler und Eiman Azim
Von links: Daniel Butler und Eiman Azim.
Hier tippen für ein hochauflösendes Bild.
Bildnachweis: Salk Institute

Dies ermöglicht einen einfacheren Vergleich von Bewegungsdaten zwischen Studien, da verschiedene Labore dieselben Modelle verwenden können, um Körperbewegungen in verschiedenen Situationen zu verfolgen. Laut Azim sind Vergleich und Reproduzierbarkeit von Experimenten für den Prozess wissenschaftlicher Entdeckungen von entscheidender Bedeutung.

„Fluoreszierende Farbstoffmarker waren die perfekte Lösung“, sagt Erstautor Daniel Butler, Bioinformatik-Analyst bei Salk. Wie die unsichtbare Tinte auf einem Dollarschein, die nur dann aufleuchtet, wenn Sie es möchten, können unsere fluoreszierenden Farbstoffmarkierungen im Handumdrehen ein- und ausgeschaltet werden, sodass wir eine riesige Menge an Trainingsdaten generieren können.“

Das Team freut sich darauf, in Zukunft verschiedene Anwendungen von GlowTrack zu unterstützen und seine Fähigkeiten mit anderen Tracking-Tools zu kombinieren, die Bewegungen in drei Dimensionen rekonstruieren, sowie mit Analyseansätzen, die diese riesigen Bewegungsdatensätze auf Muster untersuchen können.

„Unser Ansatz kann einer Vielzahl von Bereichen zugute kommen, die empfindlichere, zuverlässigere und umfassendere Werkzeuge zur Erfassung und Quantifizierung von Bewegungen benötigen“, sagt Azim. „Ich bin gespannt, wie andere Wissenschaftler und Nicht-Wissenschaftler diese Methoden übernehmen und welche einzigartigen, unvorhergesehenen Anwendungen sich daraus ergeben könnten.“

Weitere Autoren sind Alexander Keim und Shantanu Ray von Salk.

Die Arbeit wurde vom UC San Diego CMG Training Program, einem Jesse and Caryl Philips Foundation Award, den National Institutes of Health (R00NS088193, DP2NS105555, R01NS111479, RF1NS128898 und U19NS112959), dem Searle Scholars Program, den Pew Charitable Trusts und unterstützt die McKnight Foundation.

DOI: https://doi.org/10.1038/s41467-023-41565-3

INFORMATIONEN ZUR VERÖFFENTLICHUNG

JOURNAL

Nature Communications veröffentlicht

TITEL

Großflächige Erfassung versteckter fluoreszierender Markierungen zum Trainieren verallgemeinerbarer markerloser Bewegungserfassungsmodelle

AUTOREN

Daniel J. Butler, Alexander P. Keim, Shantanu Ray, Eiman Azim

Forschungsgebiete

Für mehr Informationen

Büro für Kommunikation
Tel: (858) 453-4100
press@salk.edu

Das Salk-Institut für biologische Studien:

Die Geheimnisse des Lebens selbst zu entschlüsseln, ist die treibende Kraft hinter dem Salk Institute. Unser Team aus erstklassigen, preisgekrönten Wissenschaftlern verschiebt die Grenzen des Wissens in Bereichen wie Neurowissenschaften, Krebsforschung, Alterung, Immunbiologie, Pflanzenbiologie, Computerbiologie und mehr. Das von Jonas Salk, dem Entwickler des ersten sicheren und wirksamen Polio-Impfstoffs, gegründete Institut ist eine unabhängige, gemeinnützige Forschungsorganisation und ein architektonisches Wahrzeichen: klein durch Wahl, intim von Natur aus und furchtlos angesichts jeder Herausforderung.