「.NET 開発基盤部会 Wiki」は、「Open棟梁Project」,「OSSコンソーシアム .NET開発基盤部会」によって運営されています。
目次 †
概要 †
- Hugging Face社は、自然言語処理(NLP)を中心とした機械学習のOSS-PFを提供する米国のAI企業。
- Hugging Face Hubは、GitHub、Docker Hub、Kaggle に似ている。
- 多くのAI開発者が利用するOSSのLLMモデル・ライブラリのホスティングPF
- 様々なファインチューニングされたモデルがアップロードされている。
- Libraryは「Transformer」が有名、Datasetsでデータセットを非常に簡単に使える。
詳細 †
Hugging Face(以下、HFと略す)
モデル †
https://huggingface.co/models
- 世界中の研究者・開発者が作成した モデルの共有・検索プラットフォーム
- LLM(Llama、Phi、Gemma、Qwen)など特にファインチューニングされたもの。
- その他、CV(画像)、音声など幅広い分野に対応
- [Use this model] → [Google Colaboratory]で簡単に試用可能。
- 他にも、[Deploy]から、エンドポイント、プロバイダを選択できる。
データセット †
https://huggingface.co/datasets
- 機械学習向けの大規模な公開データセット を簡単にダウンロード・前処理できるツール
スペース †
https://huggingface.co/spaces
- Notebookではなく、Gradio や Streamlit をベースにした AIアプリのホスティング環境
- GUIでモデルのデモが作成可能、コードをアップロードしてすぐ共有できる
- 無料枠や共有リソースを使用している場合、混雑で使用できないことがある。
エンドポイント †
https://endpoints.huggingface.co
- HFのモデルを Web APIとしてデプロイし、外部から呼び出せるようにする仕組み。
- 無料ではなく有料(定額+利用量ベース)で、別サイトになっており、HFと認証連携してログイン。
- HFのモデルの[Deploy]から、HF Inference Endpointを選択する。
プロバイダ †
https://huggingface.co/inference/get-started
- HFのモデルをバックエンド(プロバイダ)で推論させるか選択できる柔軟な仕組み。
- 選択肢の「委任先インフラ」には、前述のエンドポイントも含まれ、HF社がルーティングする。
- HFのモデルの[Deploy]から、HF Inference Providersを選択する。
ライブラリ †
https://huggingface.co/docs
モデル †
推論 †
学習 †
パラメタ系 †
データ †
APIキー †
https://huggingface.co/settings/tokens
参考 †