Hub documentation
Model Card 가이드북
Model Card 가이드북
Model cards는 기계 학습 모델에 대한 중요한 문서화 및 투명성 프레임워크입니다. 우리는 model cards가 boundary objects로 기능할 잠재력을 가지고 있다고 믿습니다. boundary objects란 model cards와 상호작용하는 다양한 배경과 목표를 가진 사용자, 즉 개발자, 학생, 정책 입안자, 윤리학자, 기계 학습 모델에 영향을 받는 사람들, 기타 이해관계자 등에게 모두 접근 가능한 단일 산출물을 의미합니다. 이러한 다면적인 목적을 위해 단일 산출물을 개발하는 것은 어렵고, 잠재적 사용자 및 사용 사례에 대한 신중한 고려가 필요하다는 점을 인지하고 있습니다. 지난 몇 달간 Hugging Face 과학 팀의 목표는 이러한 도전 과제를 고려하여 Hugging Face와 더 넓은 ML 커뮤니티에서 model cards를 해당 비전 방향으로 구체화하는 것을 돕는 것이었습니다.
이 목표를 달성하기 위해, 모델 카드가 오늘날의 모습으로 성장하는 데 기여한 세심하고 헌신적인 노력을 인식하는 것이 중요합니다. 이는 많은 대규모 조직에서 모델 카드를 표준 관행으로 채택한 것부터, 모델 카드를 호스팅하고 생성하기 위한 정교한 도구 개발에 이르기까지 다양한 측면을 포괄합니다. Mitchell et al. (2018)이 모델 카드를 제안한 이후, 기계 학습 문서화의 지형은 확장되고 진화해 왔습니다. 데이터, 모델 및 ML 시스템을 위한 수많은 문서화 도구와 템플릿이 제안되고 발전해 왔으며, 이는 수백 명의 연구자, 영향을 받는 커뮤니티 구성원, 옹호자 및 기타 이해관계자의 놀라운 작업을 반영합니다. 책임 있는 AI의 변화 이론과 ML 문서화 간의 관계에 대한 중요한 논의는 지속적인 중요한 논의를 만들어냈고, 때로는 의견의 분열을 초래하기도 했습니다. 또한 우리는 모델 카드가 직면한 도전과제를 인식하며, 이는 더 넓은 의미에서 기계 학습 문서화 및 책임 있는 AI 노력이 직면한 도전과제를 어느 정도 반영합니다. 그리고 앞으로 몇 개월과 몇 년 동안 모델 카드와 이들이 기능하는 생태계를 긍정적으로 형성하는 데 도움이 될 기회들이 앞당겨져 있음을 봅니다.
이번 작업은 Hugging Face를 비롯한 다양한 곳에서 모델 카드가 현재 어디에 위치해 있으며, 미래에는 어디로 나아갈 수 있다고 생각하는지에 대한 관점을 제시합니다. 이 작업은 ML 문서 산출물이 다양한 방식으로 구현된 현황에 대한 분석을 바탕으로 모델 카드의 현재 상태를 담은 “스냅샷”입니다. 이는 모델 카드의 현재 상태와 더 이상적인 비전에 대한 여러 관점 중 하나를 나타냅니다. 이 블로그 게시물에서는 ML 문서 도구의 더 넓고 성장하는 생태계, 모델 카드의 다양한 대상 독자 및 이에 대한 의견, 그리고 모델 카드 콘텐츠의 새로운 템플릿 가능성에 대한 논의를 포함하여 우리의 작업을 요약합니다. 또한 Hugging Face Hub의 맥락에서 ML 모델의 모델 카드를 탐색하고 개발하며, Hub의 기능을 활용하여 ML 모델의 모델 카드를 공동으로 작성, 논의 및 배포하는 과정을 다룹니다.
이 가이드북의 출시와 함께 몇 가지 새로운 리소스를 소개하고, Model Cards에 대한 이전 작업을 하나로 연결합니다:
1) huggingface_hub 라이브러리의 modelcard_template.md 파일로 배포된 업데이트된 Model Card 템플릿으로, 학술계와 산업계 전반의 Model Card 관련 작업을 통합했습니다.
2) 주석이 달린 모델 카드 템플릿으로, 카드를 작성하는 방법을 자세히 설명합니다.
3) 카드를 프로그래밍 없이 쉽게 생성하고, 팀이 서로 다른 섹션의 작업을 공유할 수 있도록 돕는 Model Card Creator Tool
4) Hugging Face에서 모델 카드 사용에 대한 사용자 연구
5) 모델 문서화 분야의 최첨단 기술에 대한 경관 분석 및 문헌 조사.
이 작업에 대한 추가 세부 사항이 포함된 부록도 함께 제공합니다.
인용 방법: Ozoani, Ezi and Gerchick, Marissa and Mitchell, Margaret. Model Card Guidebook. Hugging Face, 2022. https://huggingface.co/docs/hub/en/model-card-guidebook
Update on GitHub