azure custom vision - precision, recall

ms azure의 custon vision 서비스(?)를 이용해서 학습을 시도하는데

"하나의 태그당 15개 이상의 이미지 필요" 라는 제약조건이 걸려있다.

 

학습 시간에 따라서도 다르게 나오긴 한데

4시간 학습 걸어놨는데 1시간 조금 넘어서 멈춘걸 보면

학습치가 수렴하면 자동 종료하게 해둔 듯 한다.

 

 

 

 

 

precision이야 정확도일 것 같고, recall 번역이 안되네 -_ㅠ

"옳을 것으로 예상되어진 모든 태그들 중에 올바르게 찾은 퍼센트"

 

precision은 결과값에 대한 true가 true 인 조건

recall은 원본 데이터의 true에 대한 결과의 true가 true인 조건

 

+

Recall이 낮아졌다가 다시 높아졌는데 어느게 좋은건가 찾아보니 Precision과 Recall도 둘다 높은게 좋은거라고

[링크 : https://sumniya.tistory.com/26]

 

다운로드 받으면 metadata_properties.json 파일이 존재하는데 (tflite, onnx, onnx float16 확인)

학습시 별다른 옵션이 없던걸 봐서는 azure custom vision은 SSD 알고리즘만 지원하는 듯.

{     "CustomVision.Metadata.AdditionalModelInfo": "",     "CustomVision.Metadata.Version": "1.2",     "CustomVision.Postprocess.Method": "SSD",     "CustomVision.Postprocess.Yolo.Biases": "[]",     "CustomVision.Postprocess.Yolo.NmsThreshold": "0.0",     "CustomVision.Preprocess.CropHeight": "0",     "CustomVision.Preprocess.CropMethod": "NoCrop",     "CustomVision.Preprocess.CropWidth": "0",     "CustomVision.Preprocess.MaxDimension": "0",     "CustomVision.Preprocess.MaxScale": "0.0",     "CustomVision.Preprocess.MinDimension": "0",     "CustomVision.Preprocess.MinScale": "0.0",     "CustomVision.Preprocess.NormalizeMean": "[0.0, 0.0, 0.0]",     "CustomVision.Preprocess.NormalizeStd": "[1.0, 1.0, 1.0]",     "CustomVision.Preprocess.ResizeMethod": "Stretch",     "CustomVision.Preprocess.TargetHeight": "320",     "CustomVision.Preprocess.TargetWidth": "320",     "Image.BitmapPixelFormat": "Rgb8",     "Image.ColorSpaceGamma": "SRGB",     "Image.NominalPixelRange": "Normalized_0_1" }