TL;DR

  • Hugging Face와 Open Source for Science Fund가 과학 모델 개발에 쓰이는 오픈소스 소프트웨어 인프라를 파악하고 유지관리자를 지원하는 협력에 나섬.
  • Hugging Face에는 매달 과학 분야의 오픈소스·오픈 웨이트 모델 약 200개가 공유되고, 과학 모델 다운로드 횟수는 4,000만 회 이상임.
  • 데이터 준비, 모델 훈련과 미세 조정, 벤치마크 평가, 연구자 대상 서비스 제공은 거의 전적으로 오픈소스 소프트웨어 스택에 의존함.
  • 협력의 주요 과제는 과학 모델 기여자가 가장 많이 사용하는 라이브러리를 확인하고, 유지관리자 지원 기회를 모색하며, 오픈소스 모델링 커뮤니티의 병목을 드러내는 일임.
  • Open Source for Science Fund는 Renaissance Philanthropy의 기금으로, Biohub와 Wellcome의 초기 지원을 받아 여러 분야의 자본과 지원을 모으는 자선 사업임.

과학 모델을 뒷받침하는 오픈소스 생태계

  • Hugging Face에는 매달 과학 분야의 신규 오픈소스 및 오픈 웨이트 모델 약 200개가 공유되고, 과학 모델은 4,000만 회 이상 다운로드됨.
  • 단백질 구조 예측, 분자 동역학, 신약 개발, 의료 영상, 기상 예측, 천문학 등 다양한 분야의 모델은 활용 가능한 상태를 만드는 커뮤니티의 노력에 의존함.
  • 연구자들은 모델 학습에 쓰이는 데이터셋을 선별하고 공유하며, 진척을 측정할 벤치마크와 리더보드를 구축함.
  • 모델을 패키징하고 문서화하며 유지관리하는 작업 덕분에 한 연구소가 공개한 모델을 다른 연구소에서도 실제로 실행할 수 있음.

과학 인공지능의 소프트웨어 기반

  • 데이터 준비, 모델 훈련, 미세 조정, 벤치마크 평가, 다른 연구자에게 모델 제공까지 모든 과정은 기반 소프트웨어 스택 없이는 이뤄지지 않으며, 이 스택은 거의 전적으로 오픈소스임.
  • 과학을 변화시키는 인공지능 모델을 구축하고 실행하는 데 수백 개의 핵심 오픈소스 소프트웨어 라이브러리가 일상적으로 사용됨.
  • 그러나 이 라이브러리를 대규모로 식별하고, 유지관리자에게 보상하며, 커뮤니티를 지속시키는 일은 여전히 어려움.
  • 오픈소스 인공지능 커뮤니티가 의존하는 소프트웨어 인프라 계층은 관심과 자금, 공로 인정이 가장 부족한 계층인 경우가 많음.

Hugging Face와 Open Source for Science Fund의 협력

  • Hugging Face와 Open Source for Science Fund가 새로운 협력을 시작함.
  • Renaissance Philanthropy의 기금인 Open Source for Science Fund는 Biohub와 Wellcome의 초기 지원을 받은 다중 기부자 자선 사업임.
  • 이 기금은 자선 단체부터 공공 부문, 산업계, 연구 기관까지 여러 분야의 자본과 지원을 모아 인공지능 기반 및 데이터 집약적 과학에 필요한 오픈소스 소프트웨어 인프라를 유지하고 발전시키는 사업임.
  • 양측은 과학 모델 기여자가 가장 많이 의존하는 소프트웨어 라이브러리를 파악하고, 해당 라이브러리의 유지관리자를 지원할 구체적인 기회를 살펴보며, 오픈소스 모델링 커뮤니티가 직면한 핵심 병목을 드러낼 예정임.

협력에 참여하는 두 인사의 발언

“2022년에 공개된 단백질 언어 모델 ESM-2는 지금도 Hugging Face에서 매달 수십만 회 다운로드됨. 이는 모델을 둘러싼 소프트웨어가 계속 유지관리되기 때문에 가능한 일임. Hub의 모든 모델에는 의존 라이브러리가 표시되며, 수천 개 과학 모델의 정보를 모으면 과학 연구가 의존하는 인프라 지도가 만들어짐. 이 지도를 활용해 Fund가 가장 중요한 라이브러리를 찾고 이를 유지관리하는 사람들을 지원하도록 할 것임.”

— Georgia Channing, Hugging Face 인공지능 과학 부문 책임자

“이번 협력은 개방형 계산 과학을 가능하게 하는 두 커뮤니티, 즉 오픈 모델을 구축하는 사람들과 그 기반 소프트웨어를 유지관리하는 사람들을 한데 모음. 지원과 투자가 가장 필요한 곳을 찾으려면 소프트웨어 계층을 드러내야 함.”

— Dario Taraborelli, Open Source for Science Fund 디렉터