Los modelos de segmentación realizan una clasificación por píxeles en la que los píxeles se clasifican en clases diferentes. Los píxeles clasificados corresponden a objetos o regiones diferentes de la imagen. Estos modelos tienen una gran variedad de casos de uso en múltiples dominios. Cuando se utilizan con imágenes de satélite y aéreas, estos modelos pueden ayudar a identificar entidades como huellas de edificios, carreteras, masas de agua, campos de cultivo, etc.
En general, es preciso entrenar todos los modelos de segmentación desde el principio mediante el uso de un dataset etiquetado con los objetos de interés. Esto puede tardar en realizarse y ser complicado. La finalidad de Segment Anything Model (SAM) de Meta AI es crear un modelo fundacional que se pueda utilizar para segmentar cualquier cosa utilizando aprendizaje zero-shot y generalizarse a través de los dominios sin entrenamiento adicional.
SAM se entrena en un dataset de 1 billón de máscaras (SA-1B), que comprende un conjunto variado de 11 millones de imágenes y más de 1 billón de máscaras. Esto hace que el modelo sea muy eficaz a la hora de identificar límites de objetos y diferenciar varios objetos entre dominios, aunque no los haya visto nunca antes. Utilice este modelo para extraer máscaras de varios objetos en cualquier imagen.
Requisitos de licencia
Para completar este flujo de trabajo, los requisitos de licencia son los siguientes:
- ArcGIS Desktop: extensión ArcGIS Image Analyst para ArcGIS Pro
- ArcGIS Enterprise: ArcGIS Image Server
- ArcGIS Online: ArcGIS Image for ArcGIS Online
Detalles del modelo
Este modelo tiene las siguientes características:
- Entrada: imágenes de 3 bandas de 8 bits.
- Salida: clase de entidad que contiene máscaras de varios objetos de la imagen.
- Calcular: este flujo de trabajo requiere potencia de cálculo y se recomienda una GPU con una capacidad de cálculo CUDA mínima de 6.0. Este modelo requiere una GPU dedicada con al menos 8 GB de memoria GPU.
- Geografías aplicables: está previsto que este modelo funcione en todo el mundo.
- Arquitectura: este modelo se basa en Segment Anything Model (SAM) de código abierto de Meta AI.
Acceder al modelo y descargarlo
Descargue el modelo preentrenado Segment Anything Model (SAM) desde ArcGIS Living Atlas of the World. También puede acceder al modelo directamente desde ArcGIS Pro con la herramienta Detectar objetos con aprendizaje profundo o usarlo en ArcGIS Image for ArcGIS Online.
- Vaya a ArcGIS Living Atlas of the World.
- Inicie sesión con sus credenciales de ArcGIS Online.
- Busque Segment Anything Model y abra la página de elemento desde los resultados de búsqueda.
- Haga clic en el botón Descargar para descargar el modelo.
Puede usar el archivo .dlpk descargado directamente en ArcGIS Pro o cargarlo y utilizarlo en ArcGIS Enterprise. Además, si es necesario, puede ajustar el modelo preentrenado.
Notas sobre la versión
Las notas de la versión son las siguientes:
| Fecha | Descripción |
|---|---|
| Mayo de 2023 |
Primera versión de Segment Anything Model (SAM) |