resnetv2_50x1_bit.goog_in21k
timm
Clasificación de imagen
Un modelo de clasificación de imágenes ResNet-V2-BiT (Big Transfer con ResNet de preactivación). Entrenado en ImageNet-21k por los autores del artículo. Este modelo usa Normalización de Grupo (GN) en combinación con Estandarización de Pesos (WS) en lugar de Normalización por Lotes (BN).
Como usar
Clasificación de Imágenes
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))
model = timm.create_model('resnetv2_50x1_bit.goog_in21k', pretrained=True)
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # redimensionar una imagen sola en un lote de 1
top5_probabilities, top5_class_indices = torch.topk(output.softmax(dim=1) * 100, k=5)
Extracción de Mapa de Características
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))
model = timm.create_model(
'resnetv2_50x1_bit.goog_in21k',
pretrained=True,
features_only=True,
)
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # redimensionar una imagen sola en un lote de 1
for o in output:
# imprimir la forma de cada mapa de características en la salida
# e.g.:
# torch.Size([1, 64, 112, 112])
# torch.Size([1, 256, 56, 56])
# torch.Size([1, 512, 28, 28])
# torch.Size([1, 1024, 14, 14])
# torch.Size([1, 2048, 7, 7])
print(o.shape)
Embeber de Imágenes
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))
model = timm.create_model(
'resnetv2_50x1_bit.goog_in21k',
pretrained=True,
num_classes=0, # eliminar clasificador nn.Linear
)
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # la salida es un tensor con forma (tamaño_del_lote, num_características)
# o de manera equivalente (sin necesidad de establecer num_classes=0)
output = model.forward_features(transforms(img).unsqueeze(0))
# la salida no es agrupada, es un tensor con forma (1, 2048, 7, 7)
output = model.forward_head(output, pre_logits=True)
# la salida es un tensor con forma (1, num_características)
Funcionalidades
- Clasificación de imágenes
- Extracción de mapa de características
- Embeber de imágenes
Casos de uso
- Clasificación de imágenes
- Extracción de mapas de características para análisis avanzados
- Generación de embeber de imágenes para aplicaciones de aprendizaje profundo