FastVLM ガイド一覧
手順
- 1
FastVLM 対応版 Transformers をインストールします。
- 2
互換モデルと AutoProcessor を読み込みます。
- 3
image と text を分けたメッセージを構築します。
- 4
generate 前に apply_chat_template を使用します。単純な文字列だけでは動作しません。
例
Transformers
from transformers import AutoProcessor, FastVlmForConditionalGeneration
model_id = "KamilaMila/FastVLM-0.5B"
model = FastVlmForConditionalGeneration.from_pretrained(
model_id, device_map="auto"
)
processor = AutoProcessor.from_pretrained(model_id)