TonyPi Pro, modułu WonderEcho i dysk SSD PCIe NVMe oraz akceleratora Hailo-8L

Mam przyjemność zaprezentować kolejne modyfikacje robota TonyPi Pro firmy Hiwonder, opartego na komputerze jednopłytkowym Raspberry Pi 5 z 8 GB RAM.

Wprowadzone zmiany:

• instalacja modułu WonderEcho Pro AI Voice Interaction Box, który miał wspierać sterowanie głosowe (mikrofon i głośnik) oraz integrację z dużym modelem językowym (LLM),

• zastąpienie karty microSD (dotychczas wykorzystywanej do uruchamiania systemu) dyskiem SSD PCIe NVMe oraz dodanie akceleratora Hailo-8L poprzez zastosowanie nakładki Pineboards AI Bundle.

W przesłanej aktualizacji robota znalazł się nie tylko moduł WonderEcho z przewodem USB, ale również nowe tylne plecy obudowy. Nowa obudowa nie tylko posiada cztery otwory montażowe dla modułu, ale jest także głębsza, z powiększonym wycięciem zapewniającym lepszy dostęp do portów. Dzięki temu możliwe jest wykorzystanie wszystkich portów USB oraz Ethernetu — wcześniej dostępne były jedynie dwa porty USB!

Większa głębokość tylnej obudowy umożliwiła również bezproblemową instalację nakładki AI Bundle pod płytą Raspberry Pi, bez konieczności ingerencji w konstrukcję. Wystarczyło jedynie wywiercić dodatkowe otwory, aby przymocować nowe plecy do korpusu robota.

Niestety, potwierdziło się, że moduł WonderEcho obsługuje jedynie język angielski i chiński, a wydawanie poleceń możliwe jest tylko w tych dwóch językach. Co więcej, aktualizacja modułu wymaga przejścia dość skomplikowanego procesu. Dodatkowym minusem jest jakość zastosowanego mikrofonu – nie spełnił moich oczekiwań. Na szczęście zintegrowany głośnik działa poprawnie. Obecnie nadal korzystam z zewnętrznego mikrofonu USB, podłączonego za pośrednictwem huba.

Jak obecnie działa robot wykorzystując LLM w następnym poście :)

TonyPi i analiza obrazu z kamery za pomocą AI.

 W poprzednich odcinkach pokazywałem jak za pomocą głosu można sterować robotem TonyPi Pro firmy Hiwonder. Wspominałem również, że można za pomocą poleceń słownych uzyskać odpowiedz z AI. 

Firma Hiwonder przygotowała moduł WonderEcho Pro AI Voice Interaction Box, którego zadaniem ma być wsparcie sterowania głosem oraz LLM.

Ograniczeniem jest jednak dodatkowe oprogramowanie zarządzające modułem oraz ograniczenie do dwóch języków angielskiego i chińskiego. Przedstawiony nowy film pokazuje jak można to wykonać prościej. 

A to zdjęcie wykonane za pomocą kamery TonegoPi oraz jego interpretacja przy pomocy AI

TonyPi - kolejna modyfikacja

 Teraz po powitaniu podaje adres IP i włącza sterowanie głosem. Pozwala również na połączenie z AI :)

TonyPi kolejna zmiana

 Teraz Tony korzysta z wyświetlacza na ręce. Chodziło o podanie i wyświetlenie adresu IP. Niestety przy starcie systemu IP jest tylko wyświetlany głośnik nie zostaje połączony z raspberry przez bluetooth :(

Nadrabia to autostart podczas logowania :)

Kolejny problem to ilość kabelków do podłączenia różnych sensorów.

U mnie to MP3, sensor do pomiaru odległości i teraz wyświetlacz a są tylko 2 kabelki 4 pinowe!

 

Cześć dzisiaj trochę z innej beczki.

Film pokazuje moje ostatnie zabawy z małym programowalnym robotem opartym na Raspberry PI  5. RPI to mini komputer jednopłytowy firmy Raspberry Pi.  

RPI 5 jest umieszczony w szkielecie robota TonyPI sprzedawanym przez firmę Hiwonder.

Sprzedawana wersja jest dość ciekawa TonyPi Pro Hiwonder Humanoid Robot Professional Development Kit Powere. Pozwala ona na rozbudowę i modyfikację robota humanoidalnego. 

Ja korzystam z wersji Pro i Pytona. Rozbudowałem go o hab USB, aby zwiększyć ilość gniazd, która przez obudowę została ograniczona z 2 x USB2 i 2 x USB3 do 2 x USB3. Dodałem również prosty mikrofon, po USB.   

Dołączyłem również głośnik, ale po bluetooth co niestety trochę komplikuje rozwiązanie szczególnie w kontekście mobilności robota.

Co chciałem uzyskać:

•  Sterowanie głosem online, np. recognize_google oraz offline vosk, whisper …?
• Korzystanie z AI online oraz offline OLLAMA

Jak to u mnie działa filmik poniżej. Na razie TonyPi podłączony do Internetu.

Historia lubi się powtarzać :)

 Minął kolejny rok od mojego ostatniego wpisu a jest on dalej aktualny;( 

Niestety przestępcy dalej wykorzystują te same metody ataku dodając nowe pomysły i nowe rozwiązania techniczne np. AI! Tak zwane deepfake, czyli zmanipulowane nagrania video przez sztuczna inteligencje z wykorzystaniem wizerunków i głosu znanych osób.

Nawet osoby, które wydawać by się mogły są świadome takich manipulacji im ulegają!   Przykładem może tu być poseł Poseł ofiarą oszustwa. Meldował: "Ruszam do Żabki", "Wróciłem do pokoju". Stracił w hotelu sejmowym 150 tys. zł czy senator Senator oszukany metodą na policjanta. Stracił aż 430 tys. zł .

Ale to też ludzie! Pamiętajcie że każdy może być zmanipulowany!

Mimo tego życzę Wam 

                      zdrowych i spokojnych Świąt Bożego Narodzenia 

                                                            i 

                                szczęśliwego Nowego Roku 2025. 

I ja też TonyPi :)

Minął rok od mojego ostatniego wpisu! ;(

Minął prawie rok od mojego ostatniego wpisu a jest on dalej aktualny;( 

Niestety przestępcy dalej wykorzystują te same metody ataku dodając nowe pomysły i nowe rozwiązania techniczne np. AI! Kilka ostatnich przykładów w kontekście ostatnio najbardziej popularnego ataku na fałszywe inwestycje! Tak zwane deepfake, czyli zmanipulowane nagrania video przez sztuczna inteligencje z wykorzystaniem wizerunków i głosu znanych osób.

Wypowiedz Pana Prezydenta Kwaśniewskiego - https://twitter.com/marian_baczal/status/1720034631582458079

Wypowiedz Pana Prezydenta Dudy - https://youtu.be/s3ev1vp3g7o

Wypowiedz Pana Premiera Morawieckiego - https://youtu.be/hSTOvE_aBGQ

Czy TVN – https://youtu.be/wHcrX-eaz9Y

Ostatnie trzy nagrania został opatrzone komentarzem PREBYTES, że są to nagrania stworzone przez cyberprzestępców, ale gdybyśmy tego niewiedzieni to łatwo w takie nagrania uwierzyć!

Kolejnym problemem, na który według mnie zwrócić uwagę to spoofing a zasadzie spoofing telefoniczny CLI. Chodzi tu o podszywanie się pod znane nr telefon różnych instytucji np. banków. Co prawda ruszyła Ustawa o zwalczaniu nadużyć w komunikacji elektronicznej znana bardziej, jako „Ustawa anty-spoofingowa i anty-smishingowa”, ale wprowadzenie jej w życie trochę potrwa i nie jest ona rozwiązaniem na wszystkie te bolączki? Link do tej ustawy Akt prawny (sejm.gov.pl)