A Temporal Fusion Approach for Video Classification with Convolutional and LSTM Neural Networks Applied to Violence Detection

Authors

  • Jean Phelipe de Oliveira Lima Universidade do Estado do Amazonas, Brazil
  • Carlos Maurí­cio Seródio Figueiredo Universidade do Estado do Amazonas, Brazil

DOI:

https://doi.org/10.4114/intartif.vol24iss67pp40-50

Keywords:

Applications of AI, Deep Learning, Intelligent Video Processing, Violence Detection

Abstract

In modern smart cities, there is a quest for the highest level of integration and automation service. In the surveillance sector, one of the main challenges is to automate the analysis of videos in real-time to identify critical situations. This paper presents intelligent models based on Convolutional Neural Networks (in which the MobileNet, InceptionV3 and VGG16 networks had used), LSTM networks and feedforward networks for the task of classifying videos under the classes "Violence" and "Non-Violence", using for this the RLVS database. Different data representations held used according to the Temporal Fusion techniques. The best outcome achieved was Accuracy and F1-Score of 0.91, a higher result compared to those found in similar researches for works conducted on the same database.

Downloads

Download data is not yet available.

Author Biographies

Jean Phelipe de Oliveira Lima , Universidade do Estado do Amazonas, Brazil

Graduando em Engenharia de Computação pela Escola Superior de Tecnologia da Universidade do Estado do Amazonas (EST/UEA). Possui experiência em sistemas embarcados, inteligência artificial, aprendizado de máquina, visão computacional, deep learning e tem interesse nos temas de eficiência energética, inteligência das coisas, indústria 4.0 e computação aplicada a medicina.

Carlos Maurí­cio Seródio Figueiredo, Universidade do Estado do Amazonas, Brazil

Engenheiro Eletricista pela Universidade Federal do Amazonas, mestre e doutor em Ciências da Computação pela Universidade Federal de Minas Gerais. É professor adjunto da Escola Superior de Tecnologia da Universidade do Estado do Amazonas (EST/UEA) e professor colaborador do Programa de Pós-graduação em Informática da Universidade Federal do Amazonas. Tem experiência na área de Ciência da Computação, com ênfase em Sistemas Embarcados e Móveis, atuando principalmente nos seguintes temas de Internet das Coisas e Sistemas Inteligentes.

Downloads

Published

2021-02-20 — Updated on 2021-04-05

How to Cite

Jean Phelipe de Oliveira Lima, & Carlos Maurí­cio Seródio Figueiredo. (2021). A Temporal Fusion Approach for Video Classification with Convolutional and LSTM Neural Networks Applied to Violence Detection. Inteligencia Artificial, 24(67), 40–50. https://doi.org/10.4114/intartif.vol24iss67pp40-50