Chrome extension

sonoisa/clip-vit-b-32-japanese-v1

Model

This is a CLIP text/image encoder model for Japanese.

21

18 commits

1 repos using this model

3 linked in READMEs

updated Dec 12, 2024

README

日本語版CLIPモデル

This is a CLIP text/image encoder model for Japanese.

英語版CLIPモデルのテキストエンコーダーを一種の蒸留を用いて日本語化したモデルです。作り方や精度、使い方、サンプルコードは下記の解説記事をご参照ください。

解説記事:
- 概要: 【日本語モデル付き】2022年にマルチモーダル処理をする人にお勧めしたい事前学習済みモデル
- 使い方の解説: 【日本語CLIP】画像とテキストの類似度計算、画像やテキストの埋め込み計算、類似画像検索
- (公開準備中) 応用解説: いらすとや画像のマルチモーダル検索（ゼロショット編）
- (公開準備中) 応用解説: いらすとや画像のマルチモーダル検索（ファインチューニング編）
- (公開準備中) 応用解説: 画像とテキストの両方を用いたマルチモーダル分類
サンプルコードのリポジトリ: https://github.com/sonoisa/clip-japanese
デモ:
- いらすとや画像のマルチモーダル検索（ゼロショット）

bert

clip

endpoints_compatible

feature-extraction

pytorch

safetensors

sentence-similarity

transformers

Similar repos

sonoisa/clip-japanese

日本語CLIPモデル

13

line-corporation/clip-japanese-base

clip-japanese-base

30

rinna/japanese-clip-vit-b-16

rinna/japanese-clip-vit-b-16

25

rinna/japanese-cloob-vit-b-16

rinna/japanese-cloob-vit-b-16

13

tattn/japanese-clip

Japanese CLIP by rinna Co., Ltd.

0

oshizo/japanese-clip-qwen2_vl-exp-0101

SentenceTransformer

0

SoSo3j/crosslingual_kotenseki_CLIP

0

sentence-transformers/clip-ViT-B-32-multilingual-v1

sentence-transformers/clip-ViT-B-32-multilingual-v1

195

Used in code

kambehmw/nishika-bokete-7th-place-solution

0

Linked in READMEs

openai/CLIP

CLIP (Contrastive Language-Image Pretraining), Predict the most relevant text snippet given an…

34,490

sonoisa/clip-japanese

日本語CLIPモデル

13

tattn/japanese-clip

Japanese CLIP by rinna Co., Ltd.

0

sonoisa/clip-vit-b-32-japanese-v1

Model

This is a CLIP text/image encoder model for Japanese.

21

18 commits

1 repos using this model

3 linked in READMEs

updated Dec 12, 2024

README

日本語版CLIPモデル

This is a CLIP text/image encoder model for Japanese.

英語版CLIPモデルのテキストエンコーダーを一種の蒸留を用いて日本語化したモデルです。作り方や精度、使い方、サンプルコードは下記の解説記事をご参照ください。

解説記事:
- 概要: 【日本語モデル付き】2022年にマルチモーダル処理をする人にお勧めしたい事前学習済みモデル
- 使い方の解説: 【日本語CLIP】画像とテキストの類似度計算、画像やテキストの埋め込み計算、類似画像検索
- (公開準備中) 応用解説: いらすとや画像のマルチモーダル検索（ゼロショット編）
- (公開準備中) 応用解説: いらすとや画像のマルチモーダル検索（ファインチューニング編）
- (公開準備中) 応用解説: 画像とテキストの両方を用いたマルチモーダル分類
サンプルコードのリポジトリ: https://github.com/sonoisa/clip-japanese
デモ:
- いらすとや画像のマルチモーダル検索（ゼロショット）

bert

clip

endpoints_compatible

feature-extraction

pytorch

safetensors

sentence-similarity

transformers

Similar repos

sonoisa/clip-japanese

日本語CLIPモデル

13

line-corporation/clip-japanese-base

clip-japanese-base

30

rinna/japanese-clip-vit-b-16

rinna/japanese-clip-vit-b-16

25

rinna/japanese-cloob-vit-b-16

rinna/japanese-cloob-vit-b-16

13

tattn/japanese-clip

Japanese CLIP by rinna Co., Ltd.

0

oshizo/japanese-clip-qwen2_vl-exp-0101

SentenceTransformer

0

SoSo3j/crosslingual_kotenseki_CLIP

0

sentence-transformers/clip-ViT-B-32-multilingual-v1

sentence-transformers/clip-ViT-B-32-multilingual-v1

195

Used in code

kambehmw/nishika-bokete-7th-place-solution

0

Linked in READMEs

openai/CLIP

CLIP (Contrastive Language-Image Pretraining), Predict the most relevant text snippet given an…

34,490

sonoisa/clip-japanese

日本語CLIPモデル

13

tattn/japanese-clip

Japanese CLIP by rinna Co., Ltd.

0