인비트로 비전: 대규모 AI 모델로 Embryo 개발 자동화 설명

인비트로 비전(InVitroVision): Embryo 개발 자동화 설명을 위한 다중 모드 AI 모델

인비트로 비전(InVitroVision)은 자연어로 Embryo 개발 자동화 설명을 위한 다중 모드 AI 모델입니다. 연구팀은 IVF 데이터의 다중 모드 특성을 활용하지 않고 주로 주석이 된 데이터에 의존하는 AI를 개선하기 위해 연구를 진행했습니다.

연구 방법

연구팀은 공개된 Embryo 시간 라프스 데이터를 사용하여 PaliGemma-2라는 다중 모드 비전-언어 모델을 1,000장의 이미지와 해당 캡션으로만 fine-tuning했습니다. PaliGemma-2는 대규모 언어 모델(LLM)인 파이토치(PyTorch)와 transformers를 기반으로 한 모델입니다.

결과

결과적으로 비전-언어 모델은 Embryo 형태학, 발생 세포 주기 및 발달 단계를 설명하는 자연어 캡션을 예측할 수 있었습니다. 연구 결과, fine-tuning된 모델 인 인비트로 비전(InVitroVision)은 상업용 모델인 ChatGPT 5.2과 기본 모델보다 성능이 우수했습니다. 또한 더 큰 훈련 데이터셋을 사용할수록 성능이 향상되었습니다.

성능 평가

인비트로 비전(InVitroVision)의 성능을 평가하기 위해 BLEU 점수와 ROUGE 점수를 사용했습니다. BLEU 점수는 자연어 캡션의 정확도를 평가하는 데 사용되는 지표입니다. ROUGE 점수는 자연어 캡션의 재현력을 평가하는 데 사용되는 지표입니다.

결론

이 연구는 대규모 언어 모델(LLM)에서 IVF 작업에 일반화할 수 있는 근본적인 비전-언어 모델의 잠재력을 보여주었습니다. 인비트로 비전(InVitroVision)은 Embryo 개발 자동화 설명을 위한 다중 모드 AI 모델로 개발되었으며, IVF 작업에 활용할 수 있습니다.