regnetx_002.pycls_in1k

timm
Clasificación de imagen

Un modelo de clasificación de imágenes RegNetX-200MF. Preentrenado en ImageNet-1k por los autores del artículo. La implementación de RegNet de timm incluye una serie de mejoras no presentes en otras implementaciones, incluyendo: profundidad estocástica, checkpointing de gradiente, decaimiento de la LR por capa, stride de salida configurable (dilatación), capas de activación y norma configurables, opción para un bloque de embotellamiento de pre-activación usado en la variante RegNetV y las únicas definiciones de modelo RegNetZ conocidas con pesos preentrenados.

Como usar

Clasificación de Imágenes, Extracción de Mapa de Características, Embeddings de Imágenes

from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model('regnetx_002.pycls_in1k', pretrained=True)
model = model.eval()

# obtener las transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # unsqueeze imagen individual en un batch de 1

top5_probabilities, top5_class_indices = torch.topk(output.softmax(dim=1) * 100, k=5)
from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
'regnetx_002.pycls_in1k',
pretrained=True,
features_only=True,
)
model = model.eval()

# obtener las transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # unsqueeze imagen individual en un batch de 1

for o in output:
# imprimir la forma de cada mapa de características en la salida
# por ejemplo:
#  torch.Size([1, 32, 112, 112])
#  torch.Size([1, 24, 56, 56])
#  torch.Size([1, 56, 28, 28])
#  torch.Size([1, 152, 14, 14])
#  torch.Size([1, 368, 7, 7])

print(o.shape)
from urllib.request import urlopen
from PIL import Image
import timm

img = Image.open(urlopen(
'https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'
))

model = timm.create_model(
'regnetx_002.pycls_in1k',
pretrained=True,
num_classes=0, # eliminar el clasificador nn.Linear
)
model = model.eval()

# obtener las transformaciones específicas del modelo (normalización, redimensionamiento)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)

output = model(transforms(img).unsqueeze(0)) # la salida es un tensor con forma (batch_size, num_features)

# o equivalentemente (sin necesidad de establecer num_classes=0)

output = model.forward_features(transforms(img).unsqueeze(0))
# la salida es sin pooling, un tensor con forma (1, 368, 7, 7)

output = model.forward_head(output, pre_logits=True)
# la salida es un tensor con forma (1, num_features)

Funcionalidades

Profundidad estocástica
Checkpointing de gradiente
Decaimiento de la LR por capa
Stride de salida configurable (dilatación)
Capas de activación y norma configurables
Opción para un bloque de embotellamiento de pre-activación usado en la variante RegNetV
Únicas definiciones de modelo RegNetZ conocidas con pesos preentrenados

Casos de uso

Clasificación de imágenes
Extracción de características de imágenes
Cálculo de embeddings de imágenes