O que é o Segment Anything?

Segment Anything é um novo modelo de IA da Meta AI que pode "recortar" qualquer objeto, em qualquer imagem, com um único clique. É um sistema de segmentação promptable com generalização de zero-shot para objetos e imagens desconhecidos, sem a necessidade de treinamento adicional.

Como o Segment Anything funciona?

O Segment Anything utiliza uma variedade de prompts de entrada, incluindo a especificação do que segmentar em uma imagem, permitindo uma ampla gama de tarefas de segmentação sem a necessidade de treinamento adicional. Ele também pode receber prompts de entrada de outros sistemas, como um detector de objetos, e pode gerar múltiplas máscaras válidas para prompts ambíguos.

Recursos do Segment Anything

• Design promptable permite integração flexível com outros sistemas
• Saídas extensíveis podem ser usadas como entradas para outros sistemas de IA
• Generalização de zero-shot para objetos e imagens desconhecidos sem a necessidade de treinamento adicional
• Pode receber prompts de entrada de outros sistemas, como um detector de objetos
• Pode gerar múltiplas máscaras válidas para prompts ambíguos

Preço

O modelo é de código aberto e está disponível no GitHub, e o conjunto de dados está disponível para download.

Treinamento do modelo

O modelo foi treinado em um conjunto de dados de 11 milhões de imagens e 1,1 bilhão de máscaras de segmentação, usando um "motor de dados" interativo no loop do modelo que anotava imagens e atualizava o modelo.