Uniwersytet Tsinghua opracowuje pierwszy na świecie mózgopodobny komplementarny układ wizyjny „Tianmou Core”
Zespół z Centrum Badań nad Obliczeniami Mózgopodobnymi Uniwersytetu Tsinghua opracował niedawno pierwszy na świecie mózgopodobny komplementarny układ wizyjny „Tianmou Core”, który został opublikowany jako artykuł na okładce w międzynarodowym czasopiśmie naukowym Nature 30 maja.
W otwartym świecie inteligentne systemy muszą nie tylko radzić sobie z ogromnymi ilościami danych, ale także z ekstremalnymi zdarzeniami, takimi jak nagłe niebezpieczeństwa w scenach jazdy, drastyczne zmiany oświetlenia u wylotu tunelu i silne zakłócenia błyskowe w nocy – powiedział Shi Luping, autor korespondencyjny artykułu i profesor Wydziału Precyzyjnych Instrumentów na Uniwersytecie Tsinghua. W obliczu takich scen tradycyjne układy percepcji wizualnej często mają zniekształcenia, awarie lub duże opóźnienia, co ogranicza stabilność i bezpieczeństwo systemu.
Nowy paradygmat percepcji wizualnej
Aby lepiej rozwiązać powyższe problemy, zespół z Centrum Badań nad Obliczeniami Mózgopodobnymi na Uniwersytecie Tsinghua skupił się na technologii mózgopodobnych układów percepcji wizualnej i zaproponował nowy paradygmat mózgopodobnej percepcji wizualnej oparty na komplementarnych prymitywach wizualnych z dwoma ścieżkami. Na zdjęciu „Tianmou Core”. (Wydział Precyzyjnych Instrumentów, Uniwersytet Tsinghua)
„Ten paradygmat czerpie z podstawowych zasad ludzkiego systemu wzrokowego, rozkłada informacje wizualne otwartego świata na reprezentacje informacji oparte na prymitywach wizualnych i poprzez organiczne połączenie tych prymitywów naśladuje cechy ludzkiego systemu wzrokowego, tworząc dwie komplementarne zalety i kompletne ścieżki percepcji wizualnej informacji.” – powiedział Shi Luping.
Kluczowe cechy i zastosowania
W oparciu o ten nowy paradygmat zespół opracował również pierwszy na świecie mózgopodobny komplementarny układ wizyjny „Tianmaicin”, który realizuje szybkie, precyzyjne i o dużym zakresie dynamicznym pozyskiwanie informacji wizualnych kosztem bardzo niskiej przepustowości i zużycia energii i może skutecznie radzić sobie z różnymi ekstremalnymi scenariuszami, aby zapewnić stabilność i bezpieczeństwo systemu.
Jednocześnie, w oparciu o „Tianmou core”, zespół niezależnie opracował również wysokowydajne oprogramowanie i algorytmy oraz przeprowadził weryfikację wydajności na platformie pojazdów w otwartym środowisku. W wielu ekstremalnych scenariuszach system realizuje wnioskowanie percepcyjne w czasie rzeczywistym z niskim opóźnieniem i wysoką wydajnością, pokazując swój potencjał zastosowania w dziedzinie inteligentnych systemów bezzałogowych.
Zhao Rong, autor korespondencyjny artykułu i profesor na Wydziale Precyzyjnych Instrumentów na Uniwersytecie Tsinghua, powiedział, że Tianmou Core otwiera nową drogę dla ważnych zastosowań, takich jak autonomiczna jazda i ucieleśniona inteligencja.
Znaczenie i perspektywy na przyszłość
W połączeniu z dorobkiem technologicznym zespołu w zakresie zastosowania mózgopodobnego układu obliczeniowego „ruch dnia”, mózgopodobnego łańcucha narzędzi programowych i mózgopodobnego robota, dodanie „Tianmouxin” będzie w stanie dodatkowo ulepszyć ekologię inteligencji mózgopodobnej i skutecznie promować rozwój sztucznej inteligencji ogólnej. Według doniesień jest to drugi raz, kiedy zespół pojawił się na okładce Nature po heterogenicznym fuzji obliczeń mózgopodobnych „Ruch dnia”, co oznacza przełom w obu kierunkach obliczeń mózgopodobnych i percepcji mózgopodobnej.
