Test

[SAgiKPJH]

Collector, Parser 분리한 이유

• TIFF 파일 압축 해제하는데 오랜 시간이 걸리기에
• Collector, Parser를 분리하였습니다.

ByPass를 Transfer -> Loader에 넣은 이유

• ByPass과정이 Loader에 있으면 Transfer까지 가지 않아도 되기 때문 (시간 단축을 위함)
• ByPass의 Rule을 추가하여 ByPass유무를 관리합니다.
• 전략패턴, 빌드업 패턴 적용하여 구현했습니다.

Collector Service

• watch directory
  • LOTEND 파일 안에 Lot Id가 존재
  • SMF버전
    • DM : 100_1
    • 설비 : 1_2
  • LB와 듀폰은 LOTEND가 없습니다.

Loader

• Quere 2개
  • ByPass Queue
  • Paser Queue

중간에 정지되면 작업 날아가는 문제 개선

• Docker의 Gracefull Stop
• 오류가 발생해도 우아하게 종료한 다음에 다시 실행하여 재작업

Transfer

• DM은 Image를 보내지 않아도 됍니다.
• 설비는 Image와 파일을 같이 보내야 됩니다.

AutoDelete

• .env에 정의
• Directory의 수정날짜를 보고 지웁니다.
• CRON
  • Quartz.Net NugetPackage
• DB정보도 지웁니다.
  • pgAgent Jobs에서 자동으로 지우도록 했으나, 동작하지않아 따로 만듦

기타 사항

• ADC Edge Demo버전 ppt가 있다.
  Defect.json은 inference에서 만들고
  Inspection의 defect 정보를 만들어서 넣는다.
  컨테이너향 서비스
  메시지 TTL
• CRON
  • 주기적으로 스케쥴링 할 때 사용

RabbitMQ

RabbitMQ는 선점 방식 (Prefetch Count)

• 라우터

메서드에 플로우가 보이면 좋다

[SAgiKPJH]

adc6.0 스터디

주석 사용 여부

• 사용해야 하는가?
• 사용해도 괜찮다
• Todo 주석 활용하고 있다.
• 우리 프로젝트에는 별로 없어도 좋다
• 예시로 Akka.net은 주석이 많은데, 오픈소스이고 라이브러리이기 때문에 주석이 필요하다.

이름 명명 법(비즈니스 포함 여부)

• 비즈니스 명명 방법
• ViewModel이 있고 VM으로 줄인다.
  • android에도 vm이 활용
• th : threshold
• 고객 중심으로 보면 용어
• 때문에 설계에서 ddd용어 수립이 필요

테스트 메서드 이름

• 어떻게 생각하는지 공유

ADC 6.0 코드 검토

• 실제 ADC 6.0 코드에서 사용하는 주석 공유
• 실제 ADC 6.0 코드에서 사용하는 명명 법 공유
• 임시로 구성한 ADC6.0 테스트 메서드 공유
• ADC 6.0 코드 토론
  • vm에 command가 많으면 쪼개자
  • 무조건 동적인 코드는 좋지 않다. 코드가 복잡해 진다.

[SAgiKPJH]

ADC 6.0 공청회

• Recipe Creator

  • GPDM을 보고 프로젝트 시작하게 되었습니다.
  • Message Bus는 Recipe Creator에서만 사용합니다.
  • Recipe Creator Base 수정시 master 브랜치에서 진행해야 합니다.
  • Develop Icon 변경할 것.

• Image Analyze

  • Logic Creator (박이사)
    • Iron Python (지원이 잘 안되어 속도가 느립니다.)
    • Image Analyzer

• Model

  • handler 기능 추가

• Master Data

  • [+] Recipe Link Test Dialog Margin 추가
  • [+] Link Test 버튼 띄어놓기
  • [?] Parameter Modify Icon 검토

• Classification

  • [+] Image Code Round
  • [+] Classification Temporary Save, Save 단축키 추가
  • [+] Image View Page Text Box -> Label로 변경
  • [+] Defect No 폰트 스타일 변경할 것
  • 박주형 사원 개인적인 생각
    • [+] Save, Temporary Save 명칭 및 아이콘 검토
    • [+] Image View 창 남아있는 문제

• Parameter Set

  • 현재 Parameter Set 그룹 이름 일일이 입력해줘야 한다.

• User

  • [+] Log Icon 변경
  • [+] Add User Id Validation 적용
  • [+] Group Setting Description Height 추가할 것
  • [+] Group Setting List View Height 고정할 것
    • Scroll 추가하는게 자연스럽다.
  • [+] Group Setting Dialog 크기 늘릴 것

• System Server

  • [+] System Server Delete 지울 것
  • [+] Details의 Description Height를 추가할 것

• Train recipe

  • Modify 추가할 것

• Icon

  • Training icon
    • Recipe Creator -> Status 변경
    • Master Data -> Status 변경

기타

• master 브랜치는 DAQ6.0이다.
• 단축키 공통 추가 검토 필요
• Dialog Size 변경 가능하도록 개선

Tip

• ///을 활용한 문서화 가능

[SAgiKPJH]

ADC 6.0 Beta 버전 셋업 및 설명회

• Parameter Set

  • 파라미터 셋 관리 화면 DataGrid 최 하단까지 확장하도록 개선
  • 파라미터 셋 관리 화면 상세정보 Title이랑 Margin 설정 개선

• Training Test

  • 백만장 1Epoch (40h)
  • Defect Count, Image Count 늦게 업데이트 되는 문제
  • 새로고침할 때 Focus 문제 개선
  • Training cancel될때 문제 확인

Exception - GRPC 문제

classification

##Message
task canceled

### Exception Stack Trace
at ImageDatasetService.cs line 35
at Mirero.RecipeCreator.Server\Extensions\GrpcGenericServerStreamReaderExtension.cs line 45

Inference Recipe

## Message
starting gRPC call. InvalidDataException: Unexpected end of content while reading the message content." DebugException="System.IO.InvalidDataException: Unepected end of content while reading the message content.")
## Exception Stack Trace
At Mirero.RecipeCreator.Server.Services.Workflow.WorkflowService.ListWorkflowAsync(~~) in WorkflowService.cs line 69

스파파이어 대시보드

• 첫 번째 페이지 (UI 웹코딩)
  • 주차별 표
  • 정합성
• 두 번째 페이지 (엑셀)
• 로딩 시간이 오래 걸려서 보기 어렵다
• 24시간 마다 업데이트 되어야 하는데
• 지금은 DB에 직접 접속해서 확인중
• 준환부장님에게 코드 받아서 확인하자.

대시보드

목적

• Inference 성능 나타내야 합니다.
  • 인퍼런스 얼마나 잘 되는지
  • 오류가 나타나면 딱 눈에 보이게

스파파이어 보드에 대한 현재 상황

• 로딩 시간이 오래 걸려서 보기 어렵다
• 24시간 마다 업데이트 되어야 하는데
• 지금은 DB에 직접 접속해서 확인중
• 준환부장님에게 받은 코드를 활용중 (python 코드)
• 현재 inference 할 때마다 스파파이어 보드에 결과 파일 보낸다.
  • 성은대리 통해서 포멧 받는다.
  • column: lineid, scantime(실제 처리 시간), stepidORG, lotid, slot no, defect no, radc no, class no, top1 score, size(none), result img1, 3, createtime, result img2
  • result image, size는 대시보드에서 필요없다

현재 사용중인 스파파이어 대시보드 내용

첫 번째 페이지 (UI 웹코딩)

• KPI 기간별로 보는 화면
  • 일간, 주간(주로 많이 씁니다), 월간, 연간(잘 안씁니다)
• 라인 그래프차트
  • Acc 라인
    • Match Count (리뷰랑 ADC랑 매치된 값) / (231 코드 제외한 값)
  • contribution 라인
    • (top1 Score에 기준값을 정해서 231코드로 빼는데, 231을 제외한 실제 기준 대비 어느정도 잘 뱉는지)
      막대
  • Lot Count (필요없음) or Defect Count 막대 차트

두 번째 페이지 (엑셀)

• step별로 한달치 보는 화면
• Step별 Defect Count, Acc, Contribution
• 총합계
• 몇백개 Step이 있으면 어려워질 지도 모릅니다.

세 번째 페이지

Step별 Acc

KPI 기간별로 보는 화면
KPI step 별로 보는 화면 (한달치)
Defect 화면을 Step별로 쪼개서 서로 비교

[SAgiKPJH]

ADC60

• Classcode
  • Equip별로 다르다
  • Smf에 있지만 참고용, 없다.
• ImageCode
  • Equip별로 다르다

Parameter Set

• recipe creator에서 user variable 추가한 뒤 Parameter Set 화면에서 조회하면 user variable 나타나지 않는 버그
• UI, paremeter set detail 화면에서 title 내부 control이 위 아래로 strech하지 않습니다

Create Recipe

• [v] Pattern matching image select 설정 순서
  • Template 값 키보드로 수정 가능하도록 변경
• 원격실행 할 때마다 화면전환이 된다
  • 없으면 좋겠고 확인창만 있으면 된다

daq backend 문제

• Adc60이나 daq recipecreator나 grpc exception이 평소 자주 발생합니다.

adc 60

• 작업이 조금 더 줄였으면 좋겠다

다운로드 두번안됨, cancel 검토

• 지금은 학습중이니 사용할 수 없습니다.
  총 Gpu 현재 사용량
  메모리 관리

• recipe 찾는 기능

  • 응기팀:지금 필요한지 판단이 서지 않는다.
  • 현재는 filtering에서 검색하고 있다.

추가 요구사항

• 지금 특별히는 없고, 담당자가 ui화면을 보면서 피드백 생길 예정
• 임부장님이 생각하는 dashboard는?
  • lot단위로 라벨링 얼마나 했는지(?) 순위 딱딱딱
• 고객들은 inference 결과를 간단히 알 수 있는 dashboard를 원하신다고 생각.

[SAgiKPJH]

ADC 6.0 공청회 준비

1. 모델 배포 추가
   • Recipe 에서 자동으로 띄워주는 기능 추가 예정
   • 지금은 수동으로 올려주어야 합니다.
2. ADC Server Workflow 복구 시급합니다.
3. 모델 등록시 Handler를 먼저 선택하도록 개선
4. 학습 후 모델 등록 방법 고민
   • 자동 등록(고객중심)
     • 기본 제공되는 handler로만 등록
   • 수동등록(응기팀)
     • custom handler 등록