cs3darknet_l.c2ns_in1k
timm
Clasificación de imagen
Un modelo de clasificación de imágenes CS3-DarkNet (Cross-Stage-Partial con 3 convoluciones). Entrenado en ImageNet-1k en timm utilizando la plantilla de receta descrita a continuación. Basado en las recetas de ResNet Strikes Back C sin aumento repetido y con una combinación más fuerte. Optimizado con SGD (con Nesterov) y AGC (recorte de gradiente adaptativo). No se utilizó profundidad estocástica en esta variación de la receta. Usa un programa de LR coseno con calentamiento.
Como usar
Clasificación de imágenes
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen('https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'))
model = timm.create_model('cs3darknet_l.c2ns_in1k', pretrained=True)
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, cambio de tamaño)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # expandir una sola imagen en un lote de 1
top5_probabilities, top5_class_indices = torch.topk(output.softmax(dim=1) * 100, k=5)
Extracción de mapa de características
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen('https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'))
model = timm.create_model('cs3darknet_l.c2ns_in1k', pretrained=True, features_only=True)
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, cambio de tamaño)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # expandir una sola imagen en un lote de 1
for o in output:
print(o.shape)
Embeddings de imagen
from urllib.request import urlopen
from PIL import Image
import timm
img = Image.open(urlopen('https://huggingface.co/datasets/huggingface/documentation-images/resolve/main/beignets-task-guide.png'))
model = timm.create_model('cs3darknet_l.c2ns_in1k', pretrained=True, num_classes=0) # eliminar nn.Linear del clasificador
model = model.eval()
# obtener transformaciones específicas del modelo (normalización, cambio de tamaño)
data_config = timm.data.resolve_model_data_config(model)
transforms = timm.data.create_transform(**data_config, is_training=False)
output = model(transforms(img).unsqueeze(0)) # la salida es un tensor con forma (batch_size, num_features)
# o de forma equivalente (sin necesidad de establecer num_classes=0)
output = model.forward_features(transforms(img).unsqueeze(0))
# la salida no está agrupada, es un tensor con forma (1, 1024, 8, 8)
output = model.forward_head(output, pre_logits=True)
# la salida es un tensor con forma (1, num_features)
Comparación del modelo
Explore el conjunto de datos y las métricas de tiempo de ejecución de este modelo en los resultados del modelo timm.
Funcionalidades
- Modelo de clasificación de imágenes / columna vertebral de características
- Parámetros (M): 21.2
- GMACs: 4.9
- Activaciones (M): 8.6
- Tamaño de imagen: entrenamiento = 256 x 256, prueba = 288 x 288
Casos de uso
- Clasificación de imágenes
- Extracción de mapas de características
- Generación de embeddings de imagen