cvlab-ai / polish_banknotes Goto Github PK

Check if blinds use their smartphones with turned off screens and if our app support it.

Jak w tytule - chyba jasne

Potrzebujemy ogarnąć najnowsze banknoty z lat 2020-2021, żeby wrzucić je do danych treningowych

Trzeba rozbudować aktualnie istniejące dane. Najlepiej jakby każdy wrzucił parę zdjęć od razu na OneDrive'a. I jak już ktoś będzie robił filmik to niech potem nie wrzuca każdej klatki, tylko najlepiej wybierać klatki co np. 1 sekunde, żeby zdjęcia były w miarę możliwości różnorodne.

Trzeba wybrać w czym będziemy robić nasz sieci neuronowe, żeby było wspólne środowisko na przyszłość

Give option to manage cooperating with talkback.

Trzeba ogarnąć wszystkie karty i etapy dla tego projektu

The feature for visually impaired.

Przegląd

Wątek będzie poświęcony wymaganej dokumentacji. Stworzone branche będą dawały możliwość stałego zapisywania "logów swojej pracy". Jest to niezbędne do późniejszego prostszego przełożenia podjętych działań na dokument. Po każdym podjętym działaniu zostawmy po sobie choćby ślad.

Potrzebujemy podczas przeglądania danych zebrać informację na temat ( przynajmniej części testowej )

• oświetlenie
• filmy/zdjęcia
• jakość
• miejsce
• tło
• poruszone/wyraźne
• lampa błyskowa
• zgięcie
• przód / tył
• INNE TYPOWE/NIETYPOWE RZECZY - wymyślić ;)
• propozycje "czego nie ma, a by się przydało"

Move code responsible for enabling/disabling torch from CameraFragment to TorchManager

When there is label of recognized banknote on the screen and you try to enter options the app crashes with NullPointerException

Deadline: koniec stycznia
Android: ZROBIONE

Potrzebujemy założyć konta, żeby mieć dostęp do serwerów obliczeniowych i przyjemnie trenować sieci

https://cemet.eti.pg.gda.pl/course/view.php?id=2

Tak propsuje to wiki, także tworzę kartę na ogarnięcie co i jak tam się dzieje

Set language to english by default when there is no default language.

Make a settings activity with nice animation and the possibility to go back.

Trzeba przejrzeć kod z poprzednich lat i uporządkować go i wrzucić w sensownej postaci do nas, jednak trzeba się zastanowić czy nie chcemy zabierać się do tego od zera

Apka z 2021 roku:
https://github.com/theATM/Vison-Project-Repository?fbclid=IwAR3HBpQuoYLtyh7VXsPHpzIIjjn8vIhWPTB4Q3-4lyreNeEyyWEbuwPnucI

Brightness should be measured based on image properties instead of light sensor.

Chodzi o dodanie automatycznego włączania lampy błyskowej, która doświetliłaby banknot przy pewnym progu światła.

On older devices vibration occur every constant number of times. On newer devices it is set to 1 sec. This issue addresses making older devices act the same.
=> Auto count how much inferences to vibrate based on inference time. (1/inference time)

Zacząłem szukać i rozważać wytyczne co do naszych aplikacji w #25 i natrafiłem na pewną ścianę w myśleniu. Jak my korzystamy z aplikacji prototypowych to widzimy klasyfikację, ale dla użytkowników trzeba dać jedną odpowiedź, która będzie im przedstawiona.

Czy założymy pewien próg w modelu, po którym uznamy, że "to jest ten banknot"?

Musimy się zastanowić w jakim kierunku chcemy trenować nasze sieci:

• Image Classification - tak jak poprzednie projekty - dane najprawdopodobniej zostaną bez zmian, ewentualnie jakieś nowe dane, jednak taka sieć nie będzie w stanie wykrywać paru banknotów na zdjęciu/video
• Object Detection - nowość, trzeba będzie siąść w 9 osób i przystosować dane do treningu ( dokładnie to pozaznaczać współrzędne banknotów i jakie to banknoty )

Może jakieś głosowanko czy coś?

Trzeba przejrzeć dane jakie mamy

Dataset 2020:
https://www.kaggle.com/datasets/bartomiejgawrych/polish-banknotes-polskie-banknoty?select=README.md

Dataset 2021:
https://www.kaggle.com/datasets/99636797e98397fa6161113867b50bed663be07900885852cda713b1cc76e52d?select=info.txt

Fajnie, aby pojawił się już pierwszy prototyp aplikacji na androida

Wrzucić dostępne dane z poprzednich lat na OneDrive, tak żeby każdy miał możliwość dodania lub usunięcia dowolnego zdjęcia.

Link do danych na OneDrive

The app will beep on 200 and double beep on 500 zł.

LONG STORY SHORT

I will separate current app into two versions - dev and client.

A FEW WORDS MORE

The dev would be used by developers to check stats etc.
The client version would contain only modules, functionality (and so on) used by the blinds. It will be close to release but debuggable.

IMPLICATION (important)

This separation will require knowledge of opening specific version from the rest of the team.

Można dodać testy CI które będą automatycznie uruchamiane dla każdego commita
https://docs.github.com/en/developers/apps/guides/creating-ci-tests-with-the-checks-api

Będzie fajne miejsce do jakiś ciekawszych dyskusji, głosowań i ogłoszeń tylko muszę to ogarnąć

Trzeba dodać użytkowników, żeby mogli sobie przerzucać karty

Feature aims to give possibility for AI android devs to put ml_models in specific location. Thanks to it they should no more need to build apk every time they want to test their trained models.

After organization meeting we made a decision to infer all the time.

Przegląd

Ten wątek jest przeznaczony do zbierania wszelkich ustaleń i wiedzy związanych z funkcją TalkBack w aplikacji na androida. Będzie ona odpowiedzialna za głosową wiadomość zwrotną uzyskaną z algorytmu AI odnośnie rozpoznanego banknotu.

Zamierzony wynik

W pełni gotowy prototyp funkcji gotowy do implementacji w etapie tworzenia aplikacji.

Lista zadań (bieżący stan wątku)

Lista zadań będzie w miarę możliwości odpowiadała bieżącemu etapowi pracy nad funkcją

• Research związany z TalkBack.

Lista funkcjonalności (bez kolejności)

• tutaj będą funkcjonalności

Porządek

Zanim ktoś doda kolejne zadanie albo funkcjonalność proszę dodać komentarz w wątku, przedyskutować to na DC, bądź skontaktować się ze mną bezpośrednio.

I am waiting for Sławomir Gajewski's respond whether we should pay on our own for putting the app in Google Store.