gdsc-deu / 2022-solutionchallenge-candrink Goto Github PK

Summary

• global TOP 50 내용 추가

References

• https://developers.google.com/community/gdsc-solution-challenge/winners

Summary

• 기타 등등 리팩토링
• Line Length를 80에서 140으로 수정

Summary

• 앱에 icon 적용하기

References

• https://asufi.tistory.com/entry/Flutter-Flutter-%EC%95%B1-%EC%B6%9C%EC%8B%9C-%ED%95%98%EA%B8%B0-release-build-apk

전제 조건

• openCV , pyzbar, numpy 사용

참고 링크

• Python OpenCV 파이썬 바코드(barcode), QR코드 인식 프로그램 코드

이미지 데이터 수집을 위한 크롤러

Related Issue

#1

Summary

None

References

None

Summary

• 지금까지 학습한 모델 파일들 업로드 (/ml/models)
• 모델 파일명 컨벤션 문서 작성

References

None

Summary

• README.md에 ML 학습 환경 구성과 관련된 내용을 추가하기
• Hardware, Software 등

References

• https://www.tensorflow.org/install/pip

참고 링크

• assets_audio_player

TODO

• 출력할 소리 결정

참고 링크

• flutter_vibrate

Spec

• 음료 인식이 안되었을 때: 1초마다 약하게 진동
• 음료 인식은 되었는데 어떤 음료일지 모를 때: 0.5초마다 중간 진동
• 음료 인식 성공 시: 0.2초마다 세게 진동

Summary

• README.md 에서 어색한 표현, 직설적인 표현 등 문장 개선

References

Secret

전제 조건

• TensorFlow 사용

참고 링크

• TensorFlow Lite를 활용한 Object Detection Example

개요

바코드 정보(예: 8801068091632)로 제품을 조회하는 기능 구현이 필요.

클라이언트에서 바코드 정보를 인식하고, 이를 백엔드에 요청하여 정보를 조회하도록 함.

참고 링크

• 바코드 검색으로 상품 정보 조회

Summary

• 데모 동영상 촬영 및 편집
• README.md 에 추가

References

None

Summary

• 바코드에 적혀있는 유통기한을 사용자에게 알려주는 기능

References

• https://blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=karchimman&logNo=222297005759&categoryNo=2&parentCategoryNo=0&viewDate=&currentPage=1&postListTopCurrentPage=1&from=postView

Summary

• 코드 전체 리팩토링
• 끊김 방지를 위한 Isolation 도입
• 바운딩박스 제대로 표시되도록 하기

References

None

Summary

• README.md 파일 통합 밑 업데이트

Summary

• 여러 종류의 음료수에서 STT를 통해 특정 음료수가 있는지 알려주는 기능

TODO

• 탭을 하는 동안 더 강하게 진동을 울리면서 STT 듣기 모드로 진입
• STT 듣기 모드에서는 음료수의 이름을 듣고 현재 인식되어있는 음료수 목록에서 찾아야 함
• 감지 결과를 TTS로 사용자에게 알려주기

References

• STT 라이브러리: https://pub.dev/packages/speech_to_text

Summary

• 앱 용량 줄이기

References

None

Summary

• 최종 생성된 모델 파일로 업데이트

References

None

Summary

• 바운더리 박스 표시가 제대로 되지 않고 있음

References

None

개요

학습된 모델을 앱에서 다운받은 후 모델을 불러올 수 있어야 함

참고 링크

• pub.dev/packages/tflite

사용 라이브러리

camera
tflite

Summary

• README.md 내용을 개선하기

TODO

• Top 50 부분에 https://developers.google.com/community/gdsc-solution-challenge/winners 로 링크걸기
• icon 추가
• 아키텍트 사진 추가
• 중복된 여러 개의 LICENSE 항목 하나로 통합

... 이 외에도 추가 사항 있으면 수정해주세요

References

None

Summary

• 압축 파일 형식 지원을 통해 models, labels를 분류할 필요성이 없어짐

음료 구별을 위한 학습 데이터를 수집해야 합니다.

논의 사항

• 어떤 음료 사진을 수집할 건지?
• 몇 장 정도 수집하면 적절할지?
• 처음에 몇 개 정도 판별해볼 것인지?

Stack

• FastAPI

VPS

• GCP

Summary

• 실시간으로 모델을 평가할 때 걸린 시간을 앱 화면에 표시

References

• https://github.com/am15h/object_detection_flutter/blob/master/lib/tflite/classifier.dart

Summary

YouTube embed가 제대로 표시되지 않음

Reference

https://stackoverflow.com/questions/11804820/how-can-i-embed-a-youtube-video-on-github-wiki-pages

Yolov5 모델 테스트용 서버 추가

개요

수집한 이미지를 회전, Contrast, Gamma 등을 랜덤으로 조정하여 학습 데이터를 증가시킨다.

라이브러리

• https://github.com/looooongChen/tfAugmentor (0 Star)
• https://github.com/aleju/imgaug (12.3k Star)

참고 링크

• text_to_speech

Summary

• MobileNet 및 자체 제작 모델을 사용하는 대신 Yolov5를 도입하여 객체 인식 및 캔 인식의 정확도를 향상

References

• https://pub.dev/packages/tflite_flutter
• https://github.com/syu-kwsk/flutter_yolov5_app