O que é o Microsoft Multi-Stream IntelliFrame e a Câmera Inteligente?

O Microsoft Teams Multi-Stream IntelliFrame é uma plataforma de IA (Inteligência Artificial) que permite que usuários na sala inspirem e compartilhem experiências para usuários remotos.

O IntelliFrame fornece uma experiência de vídeo imersiva para usuários remotos por meio de uma melhor compreensão da reunião, identificando o alto-falante ativo e uma exibição da sala.

Os dispositivos com certificação IntelliFrame Multi-Stream do Microsoft Teams incluem um alto-falante, microfone e uma câmera de IA que podem produzir vários fluxos de vídeo e rastreamento de alto-falante ativo com tecnologia de IA, reconhecendo movimentos e gestos faciais. Os vários fluxos de vídeo de uma câmera de vários fluxos permitem que o serviço Teams corresponda o participante capturado em vídeo ao seu perfil facial registrado e exiba um rótulo de nome abaixo do quadro de vídeo. Essa é uma melhoria em relação a uma câmera normal das Salas do Teams, que exibe apenas o nome da sala atribuído ao fluxo de vídeo.

Pré-requisitos

  • Salas do Microsoft Teams no dispositivo Windows
  • Licença das Salas do Microsoft Teams Pro
    • As Salas do Microsoft Teams com licença Pro são necessárias para habilitar o IntelliFrame e os recursos de reconhecimento de pessoas nas Salas do Microsoft Teams.
    • A licença básica não dá suporte ao reconhecimento de pessoas ou IntelliFrame. Se você tiver a licença Básica das Salas do Teams, a câmera mostrará apenas o alto-falante ativo e as exibições panorâmicas.
    • Verifique este link para determinar se você tem a licença correta.
  • Política de usuários finais configurada para permitir o registro de voz e rosto.

Provisionamento de dispositivos

Câmeras compatíveis

Esses dispositivos de Salas do Microsoft Teams dão suporte a Multi-Stream IntelliFrame e reconhecimento de pessoas:

  • Jabra Panacast 50
  • Lenovo ThnkSmart Bar 180
  • Yealink SmartVision 40
  • Yealink SmartVision 60
  • Pacote Yealink MVC S90

Nota

Câmeras adicionais são certificadas o tempo todo, Marque com o fabricante da câmera para obter detalhes adicionais.

Configurar sua câmera IntelliFrame Multi-Stream certificada para sua sala do Microsoft Teams

Conecte o cabo USB fornecido à porta USB no dispositivo de Sala do Microsoft Teams.

Entre nas configurações de Salas do Microsoft Teams como administrador e verifique se a câmera está selecionada. Pode ser necessário ajustar as configurações de câmera específicas do OEM para ignorar monitores ou definir zonas de rastreamento se você tiver paredes de vidro em sua sala de conferência. Consulte a documentação da sua câmera para obter orientações específicas do dispositivo.

Habilitando o registro facial e o reconhecimento de pessoas

Para que o reconhecimento de pessoas funcione, você precisa preparar suas organizações habilitando o registro de Face e o reconhecimento de People.

Importante

  • Você é responsável pela conformidade com as leis e regulamentos locais ao instalar uma câmera inteligente de IA e usar o Face Enrollment e o People Recognition em uma jurisdição específica, inclusive no que diz respeito às obrigações relacionadas a notificação, consentimento e retenção de dados.
  • Instale a sinalização apropriada fora de qualquer sala de reunião, onde você instala uma câmera inteligente de IA, aconselhando as pessoas sobre os recursos de reconhecimento de pessoas, registro facial e reconhecimento de voz.
  • Você deve primeiro se inscrever para o reconhecimento de voz antes de se inscrever para o reconhecimento facial.

Habilitar o registro de reconhecimento facial

Uma câmera IntelliFrame de vários fluxos usa informações de perfil de rosto e voz de um usuário registrado para reconhecer quem está falando da sala para habilitar os seguintes recursos:

  • Rótulos de nomes nos vídeos de palco dos participantes da sala.
  • Entrada de lista em participantes da sala de chamada.
  • Transcrição ao vivo com reconhecimento (quem disse o quê).

CsTeamsAIPolicy está habilitado por padrão para permitir o registro facial do usuário final. Saiba mais aqui sobre essa política, juntamente com o registro de voz: registro de voz e rosto.

Nota

  • Você deve primeiro se inscrever para o reconhecimento de voz antes de se inscrever para o reconhecimento facial.

Captura de tela que mostra o reconhecimento de voz.

Possibilitando o reconhecimento de pessoas

Habilitar o reconhecimento de pessoas requer configuração nas configurações do dispositivo das Salas do Teams ou no locatário CsTeamsMeetingPolicyroomPeopleNameUserOverride seja "On" e roomAttributeUserOverride seja Atributo para permitir que perfis individuais de voz e rosto sejam usados para reconhecimento em reuniões.

Para obter mais informações sobre como definir políticas de reunião, consulte Habilitar o People Recognition e Microsoft Teams PowerShell.

Ser identificado durante uma reunião

Quando você agenda uma reunião, os usuários que desejam ser identificados devem ser convidados para a reunião ou reunião encaminhados a eles antes que a transcrição da reunião seja iniciada. A identificação só funciona para usuários inscritos no Face, todos os outros serão tratados como participantes.

Nota

As reuniões ad hoc ou 1:1 não terão identificações faciais, quando não houver compromisso do Outlook com uma lista de participantes. Sempre agende uma reunião para usar recursos como IntelliFrame e reconhecimento de People.

Problemas conhecidos

# Comportamento Mitigação
1 Quando o modo de exibição da sala é um modo de exibição de orador ativo e não o modo de exibição IntelliFrame, o rótulo de nome está ausente no vídeo do participante. Não disponível
2 Intermitentemente, os participantes da sala não conseguem ser adicionados à lista. Opção 1: Pare e inicie a câmera. Opção 2: reiniciar o dispositivo
3 A caixa delimitadora roxa ao redor da sala é sempre realçada, mesmo quando não há voz ou som da sala. Não disponível
4 O tempo necessário para alternar do IntelliFrame para o alto-falante ativo, após a alternância do IntelliFrame, e para os rótulos de nome aparecerem/desaparecerem após a alternância de reconhecimento de pessoas é de cinco a sete segundos. Não disponível
5 Para a Identificação de pessoas, o convite do Outlook dá suporte a um total de 64 usuários, o que inclui usuários que participam online e até 12 usuários simultâneos na sala para Rótulos de Nome . Não disponível
6 Os participantes da sala são identificados:
  • Se eles fizerem parte do convite da reunião do Outlook
  • Se o convite da reunião foi encaminhado a um participante antes de 30 minutos da reunião.
  • Não disponível