AIMMO Enterprise 바로가기
How to use 📖
▪️ 계정
회원가입내 계정관리개인정보 수정하기비밀번호 찾기▪️ Enterprise 훑어보기
Enterprise 시작하기라벨링 워크플로우▪️ Organization
Organization 만들기Organization 관리하기Organization 멤버 초대하기Organization 삭제 및 나가기▪️ 프로젝트
프로젝트 설계하기프로젝트 멤버 설정작업 할당하기프로젝트 진행 중 관리가이드와 Q&A▪️ 데이터셋
데이터셋 업로드Naver Cloud Platform에서 가져오기파일 관리하기스마트 라벨링▪️ 산출물 추출
산출물 내보내기산출물 공유하기Naver Cloud Platform으로 보내기▪️ 스튜디오
스튜디오의 기능이미지 툴시퀀스 (오픈 예정)단축키▪️ 라벨러 가이드
작업하기검수하기관리자의 작업 기능▪️ 릴리즈 노트
릴리즈 노트© AIMMO 2022 – V1.0
프로젝트 통계 지표
관리자는 프로젝트 통계 지표를 통해 프로젝트 진행 상황을 파악할 수 있고, 작업자 모니터링과 일정 예상을 할 수 있습니다.
프로젝트 진행 정보
프로젝트 관리 → 프로젝트 통계 → Overview 페이지에서는 현재 프로젝트의 진행 현황과 일별 작업 현황, 작업자 수의 변화를 확인할 수 있습니다.
- 프로젝트 진행률
- 일별 지표
- 작업량
- 활동 작업자 수
프로젝트 진행률에서는 각 작업단계별 파일 분포도와 전체 진행률을 파악할 수 있습니다. 여기서 전체 진행률은 모든 작업단계를 거쳐 작업이 완료된 파일을 뜻합니다. 각각의 지표들은 엑셀 다운로드가 가능합니다.
일자 별로 작업자들이 작업한 인스턴스 개수 혹은 파일 개수를 나타냅니다.
일자 별로 작업 단계별 활동을 한 작업자 수를 확인할 수 있습니다.
작업자의 속도와 정확도
관리자는 작업자들의 속도와 정확도를 모니터링 하고, 작업물 안배와 작업 일정 산정을 할 수 있습니다. 또한 이 지표는 작업 유형별로 누적되어 작업자의 적합한 프로젝트를 판단하는 기준이 됩니다.
- 작업자 속도
- 작업자의 속도는 크게 '총 작업 시간'과 '파일당 작업시간'으로 파악할 수 있습니다.
- 예를 들어, 제출 파일 수와 instance 개수 대비 파일당 작업시간이 작을 수록 속도가 빠른 작업자입니다.
- 작업자 정확도
- 작업자 정확도는 검수 파일 수 및 instance 수와 검수율을 통해 기본적인 정보를 확인할 수 있습니다.
- 'Geometric 지표'는 작업한 도형(라인, 폴리곤)의 위치나 크기가 잘못된 경우를 판단할 때 활용할 수 있습니다.
- 'Geometric 오류'는 검수 instance중 최초 제출 이후 영역이 수정된 instance 개수를 의미합니다. 마우스 오버 시 최초 제출 이후 영역이 수정된 instance 개수가 나타나며, 이를 기반으로 정밀도(Precision)와 재현율(Recall), F1 점수(F1 score)가 산정됩니다.
- 'Attribute 오류'는 검수 instance중 최초 제출 이후에 클래스 및 attribute가 수정된 개수를 의미합니다. 마우스 오버 시 최초 제출 이후에 클래스 및 attribute가 수정된 개수가 나타나며, 이를 기반으로 정밀도(Precision)와 재현율(Recall), F1 점수(F1 score)가 산정됩니다.
레이블링 개수
- Annotation 탭에서는 데이터셋에서 생성된 인스턴스의 클래스 분포를 확인할 수 있습니다. 또한 작업 유형의 개수와 각 클래스 별 Instance 개수 정보를 제공합니다.
- 작업 유형과 클래스별 레이블링 개수
프로젝트 설정 변경하기
- 프로젝트 관리 → 설정 페이지에서는 프로젝트의 설정값을 변경할 수 있습니다.
- 프로젝트 형성 시 작성한 클래스와 Attribute, 작업 스튜디오 설정, 멤버 설정, 그리고 프로젝트 명과 같은 정보를 수정할 수 있습니다.
클래스와 Attribute 수정
- 클래스 수정하기
- 어트리뷰트 수정하기
'클래스 세부설정'의 클래스 리스트에서 추가한 클래스의 명을 클릭하여 변경할 수 있습니다.
어트리뷰트 명의 경우, 어트리뷰트 카드에서 직접 수정할 수 있습니다. 하위 어트리뷰트의 경우, '어트리뷰트 세부설정'의 하위 어트리뷰트 리스트에서 추가한 하위 어트리뷰트를 클릭하여 변경할 수 있습니다.
작업단계 설정 변경
- 작업단계 탭에서는 작업 단계를 확인할 수 있습니다.
- 프로젝트 형성 시 설정한 작업 단계는 추후 수정이 불가합니다.
Tool Preference 설정 변경
- Tool Preference 탭에서는 작업 스튜디오의 설정 값을 변경할 수 있습니다.
- 설정값 변경 시 프로젝트 내 모든 작업자의 작업대에 적용됩니다.
프로젝트 작업자 변경
- 프로젝트 멤버 탭에서는 프로젝트에 참여 중인 작업자를 추가하거나 삭제할 수 있습니다. 또한 작업자마다 담당하는 작업 단계를 변경할 수 있습니다.
프로젝트 작업자 추가
- '작업자 추가하기' 버튼을 클릭하면 프로젝트 작업자 추가를 위한 창이 나타납니다. 현재 Organization에 초대된 멤버 충 프로젝트에 참여하지 않은 멤버가 목록에 노출됩니다.
- 선택한 멤버가 담당할 작업 단계를 선택 후 '추가' 버튼을 눌러 작업자 추가를 마무리합니다.
프로젝트 작업자 삭제
- 작업자 리스트 우측의 '삭제' 아이콘을 클릭하면 작업자를 삭제할 수 있습니다. 삭제한 작업자에게 할당된 파일은 재할당이 필요한 파일로 전환됩니다.
기본 정보 변경
- '정보' 탭에서는 프로젝트의 이름을 변경할 수 있습니다. 프로젝트 형성 시 선택한 프로젝트의 유형은 확인할 수 있으며, 변경은 불가능합니다.
