베타 테스터 모집 : AIF BUG SLAY 👾

📆 베타 테스트 일정

모든 분야 공통
- 슬레이어 모집 마감일: 4월 18일 (화) → ❗️모집 마감일이 4월 25일 (화)로 연기되었습니다
- 슬레이어 선발 결과 발표 : 4월 19일 (수) → ❗️결과 발표일이 4월 26일 (수)로 연기되었습니다
- 리워드 지급기간 : 모든 분야 테스트 종료 후 별도 안내
3개 분야 개별
분야별 테스트 기간이 다르니 아래 일정을 잘 확인해주세요!
1. 이미지 모델 분야
  - 상세 내용 공개일시 : 4월 27일 (목) 00시
  - 이미지 모델 분야 퀘스트 상세내용 확인하기 (4/27 공개)
  - 제출 테스트 및 피드백 글 작성 기간 : 4월 27일 (목) 00:00 ~ 4월 30일 (일) 23:59
2. 자연어 모델 분야
  - 상세 내용 공개일시 : 5월 4일 (목) 00시
  - 자연어 모델 분야 퀘스트 상세 내용 확인하기 (5/4 공개)
  - 제출 테스트 및 피드백 글 작성 기간 : 5월 4일 (목) 00:00 ~ 5월 7일 (일) 23:59
3. 시계열 모델 분야
  - 상세 내용 공개일시 : 5월 11일 (목) 00시
  - 시계열 모델 분야 퀘스트 상세 내용 확인하기 (5/11 공개)
  - 제출 테스트 및 피드백 글 작성 기간 : 5월 11일 (목) 00:00 ~ 5월 14일 (일) 23:59

*위 일정은 운영상황에 따라 변동될 수 있으며, 변동 시 본 페이지 및 지원자 이메일로 안내드립니다.

👾 내용 소개

[베타 테스트 : AIF BUG SLAY] 오--픈 !
인공지능팩토리가 자체적으로 개발한 추론 자동화 기능을 테스트 해주실 분을 모집합니다!

Q. .. 그런데 추론 자동화가 뭔가요?

A. 경진대회에서의 추론 자동화는 인공지능팩토리가 참가자의 인공지능 모델을 그대로 받아 이를 추론하고 평가할 수 있게 하는 기술입니다.

이전까지 인공지능 대회를 개최할 때 AIF는 참가자에게 학습셋 데이터와 함께 평가셋의 x값에 해당하는 데이터를 제공 했는데요,
그러면 참가자는 학습 데이터셋으로 모델을 개발한 후 자신의 모델에 평가셋 x값 데이터를 넣어서 나오는 결과값 y를 AIF에 제출했습니다.

이후 그 결과값 y는 AIF가 보유하고 있는 (=정답에 해당하는) y값과 비교되어 채점된 후 그 점수가 리더보드에 기록 되었는데요,
‘정답지 y값과 가장 유사한 y값을 도출한 참가자의 모델 성능이 더 좋다’ 라고 판단해온 것이죠.

추론 자동화 개발 전, 참가자는 평가 데이터셋의 x값을 넣어서 나온 y값(=Model Result)으로 모델 성능을 평가 받았습니다.

그러나 이렇게 평가셋 x값 데이터를 제공하는 경우, 아무리 x값만 제공된다 할지라도 정답지의 일부가
노출된다는 지적을 피하긴 어려웠습니다 (물론 저희 AIF의 엄격한 재현검증 방식으로 이러한 문제들을 예방 해왔지만요!).
또한 대회에서 제공된 평가셋 데이터에 대해서만 모델 성능이 좋게 나타나는 과적합(오버피팅) 현상이 일어날 가능성이 높았고
참가자가 여러 번의 시도를 통해 실제 정답을 유추해 볼 수도 있는 등 아쉬운 부분이 있었습니다 🥲

– BUT, IT'S DIFFERENT NOW! --

이런 아쉬운 부분을 보완하고자 AIF의 데이터사이언스팀과 소프트웨어엔지니어링팀이 긴밀히 협력하여 자체 추론 자동화 기술을 개발했고
그 결과, 평가셋 데이터를 일절 공개하지 않고 참가자가 개발한 모델 그대로를 받아 추론하여 모델의 성능을 채점할 수 있게 되었답니다 👏🏻

추론 자동화 개발 후, 참가자는 개발한 모델 그대로를 제출해서 모델 성능을 평가 받습니다!

Q. 오호, 흥미롭네요. 그럼 이번 베타 테스트에 참가한 사람은 뭘 하게 되나요?

A. 이번 [베타 테스트 : AIF BUG SLAY] 에 참가하시는 분들은 아래 두 step으로 추론 자동화 기술을 테스트 하시게 됩니다 :

Step1 | AI 모델개발 및 제출 테스트 하기
- 3개 모델 개발 분야 중 1개를 선택하셔서 베타 테스트에 참가합니다.
- 실제 AI모델 개발 경진대회와 유사하게, 간단한 AI모델을 개발하고 제출하여 정상적으로 채점 되는지 테스트합니다.
Step 2 | 피드백 글 작성하기
- 주어진 피드백 글 양식에 알맞게 피드백을 작성해서 제출합니다.
- 피드백 글 양식 확인하기

…여기까지 읽으신 분이라면 이번 베타 테스트에 큰 관심이 있다는 뜻이겠죠 ><?
아래 내용까지 참고하신 뒤 본 페이지 상단의 ‘참여하기’ 버튼을 통해 지금 바로 [베타 테스트 : AIF BUG SLAY]에 지원하세요!

🪬 테스터 [BUG SLAYER] 지원 방법

테스트는 총 3개의 개별적인 분야로 진행되며 제출하시는 접수폼을 토대로 AIF 내부 선별을 통해 각 분야 당 10명만 모집합니다 :

슬레이어 자격 : 아래 자격요건 중 2개 이상 충족할 경우 지원 가능합니다!
- (필수) 인공지능 모델 개발이 가능한 개발 용사
- 가보지 않은 길을 개척하는 것에 큰 기쁨을 느끼는 자 (예. ESTP/ ENFP/ ENTP/INP/INTJ 외 11개 mbti)
- 버그/에러/이슈를 모두 잡을 수 있는 무자비함과 집요함을 갖춘 자
- 평소 사소한 디테일을 캐치 해내는 꼼꼼함을 갖춘 자

슬레이어 모집분야 : 아래 3개 중 1개만 분야에만 참가 가능합니다!
1. (10명) 이미지 모델 퀘스트 | 꽃 품종 데이터셋을 활용한 이미지 분류 문제
  - 이미지 분야 | 꽃 품종 데이터셋을 활용한 이미지 분류 태스크
2. (10명) 자연어 모델 퀘스트 | 네이버 영화 리뷰 데이터셋(nsmc)을 활용한 감성 분류 문제
  - 자연어 분야 | 네이버 영화 리뷰 데이터셋(nsmc)을 활용한 감성 분류 태스크
3. (10명) 시계열 모델 퀘스트 | Household Power Consumption(UCI Machine Learning Repository) 데이터셋을 활용한 글로벌 유효 전력 소비량 예측 문제
  - 시계열 분야 | Household Power Consumption(UCI Machine Learning Repository) 데이터셋을 활용한 글로벌 유효 전력 소비량 예측 태스크

슬레이어 인원 : 제출하시는 접수폼을 토대로 AIF 선별을 통해 각 분야 당 10명의 슬레이어를 선발합니다!
- 선별은 지원자님께서 작성하신 접수폼을 토대로 AIF 내부기준을 통해 이뤄집니다

💰리워드 지급 방식

아래 지급 조건을 만족하는 슬레이어 분께 감사의 마음을 담아 💶 3만원을 지급드립니다 :
- 제출 테스트 기간 내 최소 10회 제출 성공
- 주어진 양식에 맞춰 피드백 글 작성 : 양식은 위 ‘토론’ 탭에서 확인 가능합니다
- 주어진 일정 내 제출과 피드백 글 작성을 모두 완수
리워드 지급을 위하여 추후 아래 서류를 제출하셔야 합니다 🙇🏻‍♀️ :
1. 본인 신분증 사본
2. 본인 통장 사본

👾 [베타 테스트 : AIF BUG SLAY] 규칙

참가 관련
- 본 테스트는 1인이 1개 분야에만 참가 가능합니다.
- 본 테스트는 인공지능팩토리 회원을 대상으로 하며 ‘참여하기’를 눌러 지원폼을 제출하셔야 합니다.
- 지원폼 제출 후 최종 선발 결과는 4월 26일 지원폼에 기재하신 메일로 안내됩니다.
결과물 제출 관련
- 모든 분야에서 공통적으로 ‘제출 가이드’가 함께 제공됩니다.
- 제공되는 제출 가이드 내용을 따라 개발 결과물을 제출합니다.
결과물 검증 관련
- 본 테스트는 제출된 결과물에 대하여 검증을 진행하지 않습니다.
리워드 지급 관련
- 아래 기준을 모두 충족 하셔야 리워드가 지급됩니다 :
  1. 제출 테스트 기간 내 최소 10회 제출에 성공 하셔야 합니다.
  2. 주어진 양식과 작성 규칙에 맞춰 피드백 글을 작성 하셔야 합니다.
  3. 주어진 일정 내 모델 제출과 피드백 글 작성을 모두 완수 하셔야 합니다.
- 아래 서류를 제출 하셔야 리워드가 지급됩니다 :
  1. 본인 신분증 사본
  2. 본인 통장 사본

문의처

인공지능팩토리 (AIF)
- 📨 : cs@aifactory.page
- 회원가입하신 분께서는 본 페이지 상단의 Q&A 탭에서도 질문을 남기실 수 있습니다

=== 여러분의 많은 지원 부탁드립니다 ===