Research Engineer (Foundation Model Applications)
Division
인공지능연구소
Experience Level
Experience irrelevant
Job Types
Full-time
Locations
SIA대한민국 대전광역시 유성구 유성대로1689번길 70

[직무소개]

• 본 ​포지션은 ​군용 ​객체(항공기, 선박 ​등)의 세부분류(Fine-grained Classification) 성능 ​고도화를 ​담당합니다.

• Visual ​Foundation Model Backbone과 ​Visual/Text Prompt ​를 ​결합한 Multi-modal ​Classification ​Model ​을 연구 개발합니다.

• ​영상 ​정보만으로 구분이 어려운 ​조건에서도, ​시계열/메타 ​데이터를 Text/Context Prompt로 ​활용하여 안정적으로 ​분류할 ​수 있는 ​모델을 연구합니다.



[주요업무]

1. ​멀티모달 ​분류 모델 설계 ​및 개발

• ​Vision-Language 학습, Contrastive Learning, Instruction Learning/Tuning 을 활용한 분류 모델 설계

• Visual Prompt, Text Prompt, Metadata-derived Context 를 결합한Classification Pipeline 구성


2. 다운스트림 설계/적용

• Visual Foundation Model Backbone 에 대하여 PEFT(Parameter Efficient Fine-Tuning, LoRA/Adapter) 활용, 모델 전체/부분 파인튜닝 전략 수립

• Downstream Task 헤드 구성 및 Multi-Task Learning 및 Remote Sensing 도메인에서 발생하는 Long-tailed Distribution, Class Ambiguity 등 실제 운용환경의 문제를 분석하고 개선


3. 협업 및 성능관리

• Class-level Metric, Long-tail 성능, Domain Shift 등 다양한 조건을 반영한 평가체계 설계

• 지속적으로 취득되는 데이터에 대해 모델을 배포하며, 정기적으로 성능 개선 및 관리

• Data, DataOps 및 Foundation Model 팀과 지속적으로 대화하고 협업하여 제품/사업 요구사항 연구방향 접목



[자격요건]

* 보안 규정 상 대한민국 국적 보유자에 한해 지원 가능

• Computer Vision, Machine Learning, NLP, AI 관련분야 석사 이상 또는 이에 준하는 연구경력

• Visual-Language Model(VLM), CLIP, Prompt Learning/Tuning, Multimodal classification 관련 연구 및 구현 경험

• Pytorch기반의 모델학습과 Transformers(Huggingface) 등 딥러닝 프레임워크 활용경험

• ViT/MAE/DINO 계열의 Backbone Netowrk의 파인튜닝 경험

• 모델 평가, 성능 분석, 배포까지의 ML 사이클에 대한 이해가 있으신 분

• 실험관리, 재현성 및 결과분석역량이 뛰어나신 분

• 영문 문서 독해 및 기술 커뮤니케이션이 가능하신 분



[우대사항]

• EO/SAR 영상, 항공영상, GIS 데이터 등 Remote sensing 도메인 실무 경험

• Fine-grained object detection / classification 경험

• Multi-modal fusion, Metadata-conditioned learning 경험

• 공개코드가 없는 논문을 재현하거나 목표에 맞게 재구성한 경험

• 모델 배포, 추론 최적화, 지속적 성능 개선 경험  



[채용 전형]

서류전형 > 커피챗 > 1차 인터뷰(직무 적합성) > 2차 인터뷰(조직 적합성)  > 레퍼런스 체크 & 처우협의 > 채용검진 > 최종합격 & 입사일 조율



[근무지]

대전 본사

Share
Research Engineer (Foundation Model Applications)

[직무소개]

• 본 ​포지션은 ​군용 ​객체(항공기, 선박 ​등)의 세부분류(Fine-grained Classification) 성능 ​고도화를 ​담당합니다.

• Visual ​Foundation Model Backbone과 ​Visual/Text Prompt ​를 ​결합한 Multi-modal ​Classification ​Model ​을 연구 개발합니다.

• ​영상 ​정보만으로 구분이 어려운 ​조건에서도, ​시계열/메타 ​데이터를 Text/Context Prompt로 ​활용하여 안정적으로 ​분류할 ​수 있는 ​모델을 연구합니다.



[주요업무]

1. ​멀티모달 ​분류 모델 설계 ​및 개발

• ​Vision-Language 학습, Contrastive Learning, Instruction Learning/Tuning 을 활용한 분류 모델 설계

• Visual Prompt, Text Prompt, Metadata-derived Context 를 결합한Classification Pipeline 구성


2. 다운스트림 설계/적용

• Visual Foundation Model Backbone 에 대하여 PEFT(Parameter Efficient Fine-Tuning, LoRA/Adapter) 활용, 모델 전체/부분 파인튜닝 전략 수립

• Downstream Task 헤드 구성 및 Multi-Task Learning 및 Remote Sensing 도메인에서 발생하는 Long-tailed Distribution, Class Ambiguity 등 실제 운용환경의 문제를 분석하고 개선


3. 협업 및 성능관리

• Class-level Metric, Long-tail 성능, Domain Shift 등 다양한 조건을 반영한 평가체계 설계

• 지속적으로 취득되는 데이터에 대해 모델을 배포하며, 정기적으로 성능 개선 및 관리

• Data, DataOps 및 Foundation Model 팀과 지속적으로 대화하고 협업하여 제품/사업 요구사항 연구방향 접목



[자격요건]

* 보안 규정 상 대한민국 국적 보유자에 한해 지원 가능

• Computer Vision, Machine Learning, NLP, AI 관련분야 석사 이상 또는 이에 준하는 연구경력

• Visual-Language Model(VLM), CLIP, Prompt Learning/Tuning, Multimodal classification 관련 연구 및 구현 경험

• Pytorch기반의 모델학습과 Transformers(Huggingface) 등 딥러닝 프레임워크 활용경험

• ViT/MAE/DINO 계열의 Backbone Netowrk의 파인튜닝 경험

• 모델 평가, 성능 분석, 배포까지의 ML 사이클에 대한 이해가 있으신 분

• 실험관리, 재현성 및 결과분석역량이 뛰어나신 분

• 영문 문서 독해 및 기술 커뮤니케이션이 가능하신 분



[우대사항]

• EO/SAR 영상, 항공영상, GIS 데이터 등 Remote sensing 도메인 실무 경험

• Fine-grained object detection / classification 경험

• Multi-modal fusion, Metadata-conditioned learning 경험

• 공개코드가 없는 논문을 재현하거나 목표에 맞게 재구성한 경험

• 모델 배포, 추론 최적화, 지속적 성능 개선 경험  



[채용 전형]

서류전형 > 커피챗 > 1차 인터뷰(직무 적합성) > 2차 인터뷰(조직 적합성)  > 레퍼런스 체크 & 처우협의 > 채용검진 > 최종합격 & 입사일 조율



[근무지]

대전 본사