A Agência Sueca de Pesquisa em Defesa (FOI) desenvolveu o WiFireNet para detectar armas ocultas usando sinais de Wi-Fi. Nos testes controlados, a configuração WiFi-regular obteve precisão média (AP) de 72,5% para a classe pistola com limiar de interseção sobre união (IoU) de 25% e de 53,8% com IoU de 50%. Os dois valores medem a mesma classe e configuração, em diferentes exigências de sobreposição das caixas de detecção. O estudo da FOI
O que significam 72,5 e 53,8?
AP, sigla de average precision (precisão média), é uma métrica de desempenho da detecção de uma classe. IoU, ou interseção sobre união, mede a sobreposição entre a caixa prevista pelo modelo e a caixa de referência; um limiar maior exige uma correspondência mais precisa. Assim, 53,8% é a AP da classe pistola com IoU de 50%, não um resultado separado para localizar a arma no corpo de uma pessoa.
| Configuração do estudo | AP da classe pistola — IoU de 25% | AP da classe pistola — IoU de 50% |
| WiFi-plus, sala maior | 44,2% | 44,2% |
| WiFi-regular, sala maior | 72,5% | 53,8% |
| WiFi-plus, sala menor | 40,4% | 40,4% |
| WiFi-plus, sala maior, até duas pessoas | 29,6% | 27,3% |
Os números se referem à classe pistola, não à média de desempenho de todas as classes. O limiar mais exigente reduziu a AP da configuração WiFi-regular de 72,5% para 53,8%. O estudo da FOI
Salas, pessoas e divisão dos dados
A equipe testou o sistema em uma sala de 12 m² com até quatro pessoas em movimento e em outra, de 8 m², com até duas. No máximo uma pessoa por cena carregava uma pistola metálica desativada e escondida. As classes avaliadas também incluíam uma pistola de plástico, uma garrafa metálica e um celular. O estudo da FOI
Os conjuntos WiFi-plus e WiFi-regular tinham cerca de 100 mil amostras de CSI cada; o conjunto da sala menor tinha 40 mil. A divisão foi feita por amostra: metade dos dados foi destinada ao treinamento e metade ao teste, com 20% da parcela de treinamento reservada para validação. Portanto, os resultados vêm de duas configurações internas e desse protocolo de divisão, não de uma demonstração de desempenho em operação de segurança. O estudo da FOI
Vídeo no treinamento, CSI na detecção
CSI (channel state information, ou informação do estado do canal) descreve mudanças nas características do sinal de rádio durante sua propagação pelo ambiente. O WiFireNet usa esses dados como entrada para detectar objetos. A pesquisa também gravou vídeo RGB para produzir anotações e treinar um modelo visual usado no processo de aprendizagem; na inferência, etapa em que o sistema faz suas detecções, a entrada é somente CSI. O estudo da FOI
