애플이 왠일로, 오픈소스로 Multimodal LLM Ferret 페럿을 공개했는데요. 애플이 오픈소스 공개도 드문데 MLLM 이라뉘.. 오.. 페럿이 무슨 뜻인가 했는데 동물 이름이네요. 의외로 야생으로는 못살고 애완용으로 해외에서는 꽤 사랑받나봐요.. 귀엽. ㅎㅎ 페럿 모델은 이미지에서 특정 영역을 잘 참조하고 위치를 파악해서 처리하는 데 특화되어 있어요. 그러고보니 이런 처리 그간 애플이 이미 워낙 잘했으니까요. 연구 자체는 콜롬비아 대학과 함께 했구요. 아무튼. 오픈소스에 더불어 가중치 데이터도 공개되었기 때문에 멀티모달 연구에 매우 도움이 될 듯 합니다. 단, 돌리려면 Nvidia A100 GPU8대가 있어야 한다고.. git repo: https://github.com/apple/ml-ferret paper: https://arxiv.org/abs/2310.07704v1