Microsoft está testando publicamente um recurso inovador chamado Copilot 3D. Agora, qualquer pessoa pode tentar transformar suas fotos planas em modelos 3D texturizados diretamente na versão web do Copilot – sem necessidade de assinatura Pro. Os usuários simplesmente fazem o upload de uma imagem 2D padrão (JPG ou PNG, até 10 MB) no Copilot 3D. A rede neural analisa automaticamente a imagem e tenta construir um objeto tridimensional a partir dela. Nenhum comando de texto é necessário.
Com base no feedback inicial de testadores, incluindo jornalistas do The Verge, os melhores resultados ocorrem quando o assunto se destaca claramente do fundo (um fundo de cor sólida funciona melhor) e ao usar imagens de objetos inanimados. A ferramenta teve um desempenho particularmente bom com móveis e itens simples como bolas de praia ou bananas. Até formas complexas, como um guarda-chuva, podem resultar quase perfeitas com a imagem fonte certa, embora a IA às vezes capte elementos indesejados como sombras.
Converter fotos de animais ou pessoas em 3D é atualmente desafiador. O Copilot 3D também bloqueia tentativas de criar modelos de celebridades ou conteúdo presumivelmente protegido por direitos autorais (como Mario), exibindo um erro: "Geração de conteúdo restrita." O sistema exige que os usuários façam o upload apenas de imagens originais que têm o direito de usar.
Os objetos 3D criados são armazenados para o usuário por 28 dias. Eles podem ser baixados no formato GLB, compatível com muitos editores 3D, motores de jogos (Unity, Unreal Engine) e aplicativos de realidade aumentada (AR). Se necessário, arquivos GLB podem ser convertidos para STL para impressão 3D. O novo recurso pode ser testado na versão web do Microsoft Copilot. Embora o Copilot 3D mostre um potencial impressionante para design, prototipagem e AR, sua capacidade de lidar com sujeitos vivos ou cenas complexas ainda tem um longo caminho a percorrer.