HuggingFace
最終更新：ID:DqSiI5hXpw 2023年02月02日(木) 22:49:31履歴
🤗
Hugging Face
謎のAI企業。潤沢な資金と無限のストレージを持っている。
Stable Diffusionモデルを公式からダウンロードした人ならアカウントを持っているはず。
以下、🤗と記載する。
アカウント作成
フリーメール推奨
以下の条件を満たすと登録メールアドレスがリポジトリの履歴に残ってしまうらしいので注意。
1. メールアドレスを1つしか登録しない
2. (ブラウザではなくPythonの)Huggingface Hubでlogin()する
3. ログイン後にgitに認証情報を流用する
4. gitでpushする Models
アップロード
自作のマージモデルを公開する手段としておすすめ。
ブラウザでやる方法(容量不問)
hubでやる方法(5GB以下の場合)
gitでやる方法(5GB以上の場合)
ダウンロード
コピー(fork)
Datasets
アップロードとダウンロード方法
Spaces
あくまでデモ用で、実用ツールはColabで動かしたほうが良さそう。
Organization
Hugging Face 
謎のAI企業。潤沢な資金と無限のストレージを持っている。
Stable Diffusionモデルを公式からダウンロードした人ならアカウントを持っているはず。
以下、🤗と記載する。
アカウント作成
- メールアドレスが必要。
フリーメール推奨
以下の条件を満たすと登録メールアドレスがリポジトリの履歴に残ってしまうらしいので注意。
1. メールアドレスを1つしか登録しない
2. (ブラウザではなくPythonの)Huggingface Hubでlogin()する
3. ログイン後にgitに認証情報を流用する
4. gitでpushする
Models
アップロード
自作のマージモデルを公開する手段としておすすめ。
- PublicかPrivateが選択できる。
- 容量無制限。
- 永遠に無料。ほんまかいな。
ブラウザでやる方法(容量不問)
- https://huggingface.co/new をブラウザで開く
- ownerを選ぶ(自分とか所属のOrgとか)
- repo_id を決める
- 自分/Orgメンバーだけに公開するならPrivateにする
- Files の Upload Files(画像参照)
- ドラッグしてボタン押して待つ
hubでやる方法(5GB以下の場合)
- write権限のあるtokenが必要。ブラウザから発行できる。
- Huggingface Hub(pythonモジュール)のインストールが必要。
- Colabの「ファイルのアップロード」に書いてあるのでそっちを参照
gitでやる方法(5GB以上の場合)
- write権限のあるtokenが必要。ブラウザから発行できる。
- lfsファイル以外をcloneしてくる
- ファイルをaddしてcommitしてpush
ダウンロード
- URLかgit(🤗Hub)経由で出来る。
- Privateだとログイン済みのブラウザか🤗Hubでread権限のtokenが必要。
- gitだと大量のファイルに便利だが.gitのせいでストレージ容量を最低2倍食う。
- できればSSD上でgit cloneしてファイルだけHDDに移動して消すのが吉。
- あるいは数個程度ならgitを使わないとか。
コピー(fork)
- https://huggingface.co/spaces/osanseviero/repo_dup...
- 秒で終わる
- 公開設定がPublicになるのでPrivateにしたかったら設定で変える
Datasets
- 画像とかキャプションテキストとかを置く
- 規約に明記されてないけどNSFW画像は置いてる人がいない
- zipは勝手にプレビュー用に展開される
アップロードとダウンロード方法
- Modelと同じ
Spaces
あくまでデモ用で、実用ツールはColabで動かしたほうが良さそう。
- 🤗にデモアプリが置ける。
- CPUは無料。16GBのメモリと2コアのCPUらしい。
- GPUは有料。月額+従量課金らしい。
- gradio(python)で実装するNotebookって感じ。
- バックエンドは共有なので順番待ちが必要。
Organization
- Teamを作れる。
- Organization ModelsをPrivate設定するとTeamメンバーだけで共有できる。
- write権限のあるtokenが発行できない
- 所属している個人がwrite権限を持っていれば個人のwriteトークンで代用できます
コメントをかく