resnetv2_50x1_bit.goog_in21k

timm
Clasificación de imagen

Un modelo de clasificación de imágenes ResNet-V2-BiT (Big Transfer con ResNet de preactivación). Entrenado en ImageNet-21k por los autores del artículo. Este modelo usa Normalización de Grupo (GN) en combinación con Estandarización de Pesos (WS) en lugar de Normalización por Lotes (BN).

Como usar

Clasificación de Imágenes

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model('resnetv2_50x1_bit.goog_in21k', pretrained=True)
model = model.eval()

# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # redimensionar una imagen sola en un lote de 1

top5_probabilities, top5_class_indices = torch.topk(output.softmax(dim=1) * 100, k=5)

Extracción de Mapa de Características

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
'resnetv2_50x1_bit.goog_in21k',
pretrained=True,
features_only=True,
)
model = model.eval()

# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # redimensionar una imagen sola en un lote de 1

for o in output:
 # imprimir la forma de cada mapa de características en la salida
 # e.g.:
 # torch.Size([1, 64, 112, 112])
 # torch.Size([1, 256, 56, 56])
 # torch.Size([1, 512, 28, 28])
 # torch.Size([1, 1024, 14, 14])
 # torch.Size([1, 2048, 7, 7])

 print(o.shape)

Embeber de Imágenes

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
'resnetv2_50x1_bit.goog_in21k',
pretrained=True,
num_classes=0, # eliminar clasificador nn.Linear
)
model = model.eval()

# obtener transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # la salida es un tensor con forma (tamaño_del_lote, num_características)

# o de manera equivalente (sin necesidad de establecer num_classes=0)

output = model.forward_features(transforms(img).unsqueeze(0))
# la salida no es agrupada, es un tensor con forma (1, 2048, 7, 7)

output = model.forward_head(output, pre_logits=True)
# la salida es un tensor con forma (1, num_características)

Funcionalidades

Clasificación de imágenes
Extracción de mapa de características
Embeber de imágenes

Casos de uso

Clasificación de imágenes
Extracción de mapas de características para análisis avanzados
Generación de embeber de imágenes para aplicaciones de aprendizaje profundo