최근 들어 Transformer 구조 자체를 Computer Vision 분야에 적용한 Vision Transformer 계열의 연구들이 활발하게 수행되고 있습니다. 많은 사람은 이러한 Vision Transformer의 성공은 Attention mechanism 때문이라고 믿고 있습니다. 그렇다면 Attention mechanism은 ViT에서 필수불가결한 요소일까요? 이를 대체할 수는 없을까요? 본 세미나에서는 Keras를 활용한 ShiftViT 실습 예제를 통해 해당 질문에 대한 가능성을 알아보도록 하겠습니다.
💁 세미나 안내
- 날짜 : 2022년 10월 27일 목요일
- 시간 : PM 4:00 ~ PM 4:50
- 장소 : 온라인
- 접속링크 : 실시간 라이브
🧑🏫 세미나 내용
- 연계 케라스 예제 : A Vision Transformer without Attention
- 1차시: Vision Transformer (ViT) 설명
- 2차시: ShiftViT 설명
- 3차시: 실습 코드 리뷰
🧑🚀 연사 소개
- 배성수 (KAIST AI 대학원 박사과정)
- Linkedin: https://kr.linkedin.com/in/seongsu-bae-17297b180
✍ 세미나 신청하기
회원 가입 후 상단 [참여하기] 버튼을 클릭하시면 됩니다
✨ 주최/주관
- 주최 : 대덕특구 SPACE-S
- 주관 : 케라스 코리아 페이스북 그룹 운영진
- 운영 : 따뜻한 메이커 연구소, 인공지능팩토리
🗓 DLD 2022 전체 프로그램 소개
본 세미나는 DLD 2022 프로그램 중 하나입니다. 아래 링크에서 전체 프로그램인 케라스 실용 예제 및 개발 가이드를 확인해주세요.
[DLD 2022] 케라스 실용 예제 및 개발 가이드 컨퍼런스
🖼 썸네일 프롬프트 소개
본 태스크의 썸네일은 케라스 마스코트인 유니콘과 우주인 조합으로 스테이블 디퓨전 모델을 통해 만들어졌습니다. 이때 사용된 프롬프트는 아래와 같습니다.
a illustration of an astronaut riding a unicorn horse which has white horns, red hair and red tail by michael whelan and tomer hanuka, karol bak, full of details, by makoto shinkai and thomas kinkade, matte painting, trending on artstation and unreal engine