---

Information extracted from Lattes platform

Last update: 2023/08/10

ORCID: https://orcid.org/0000-0003-2973-2232

---

Current projects

2022 a Atual	(CNPq - Produtividade em Pesquisa PQ 2022) Percepção Multimodal: Análise, processamento e síntese de vídeos em bases Multimodais Este projeto tem por objetivo investigar o problema de análise e síntese de vídeos em base de dados multimodais contendo imagens, som, texto, e informação tridimensional. Será foco de investigação os problemas relativos à síntese de movimentos humanos e a identificação de segmentos de vídeos correlacionados a dados textuais. Integrantes: Erickson Rangel do Nascimento (coordenador).
2021 a Atual	(FINEP/MCTI Tecnologia Assitiva 06/2020) Captar-Libras: Sistema de Comunicação por vídeos para surdos aplicado ao pré-atendimento médico Pesquisa e desenvolvimento de métodos e técnicas de IHC, Visão Computacional (VC) e Inteligência Artificial (IA) que viabilizem a comunicação entre surdos e profissionais de saúde, no contexto de pré-atendimento médico, sem a necessidade de um intérprete. Integrantes: CAMPOS, MARIO F.M. (coordenador), Erickson Rangel do Nascimento, Anísio Mendes Lacerda, Luiz Chaimowicz, Gisele L. Pappa, Flávio Luis Cadeal Pádua, Douglas Guimarães Macharet, Wagner Meira Jr, Marcos André Gonçalves, NASCIMENTO, BRUNO R, RIBEIRO, ANTÔNIO L, Ana Paula Couto da Silva, Elidéa Lúcia Almeida Bernardino, ADRIANA SILVINA PAGANO, Raquel Oliveira Prates, Milena Soriano Marcolino.
2018 a Atual	(FAPEMIG Universal - Edital 01/2018) Hyperlape Multimodal: Extração Semântica e Análise de Dados Multimodais para Aceleração de Vídeos de Longa Duração em Primeira Pessoa Os avanços da tecnologia na produção de equipamentos vestíveis como câmeras móveis, fazendo com que esses dispositivos tenham maior capacidade de armazenamento e menor custo operacional, aumentaram a popularidade de vídeos em primeira pessoa (egocêntricos). O problema geral deste projeto é o de aceleração de vídeos egocêntricos com ênfase na semântica de forma geral utilizando dados multimodais (imagens, som, informação textual, localização e 3D). Integrantes: Erickson Rangel do Nascimento (coordenador), Mario Fernando Montenegro Campos, Luiz Chaimowicz, Douglas Guimarães Macharet, Renato José Martins.
2017 a Atual	INCT-Cyber: Instituto Nacional de CIência e Tecnologia para uma Sociedade Massivamente A missão do Instituto Nacional de Ciência e Tecnologia para uma Sociedade Massivamente Conectada: Uma Abordagem Ciberfı́sica e Social (INCT-Cyber) é entender e desenvolver princı́pios cientı́ficos e tecnologias necessárias para as interações futuras entre seres humanos, computadores e o mundo fı́sico. Os princı́pios que norteiam o INCT-MCS são: (1) desenvolver sistemas e tecnologias necessárias para construir sistemas ciberfı́sicos complexos que as pessoas possam usar com grande confiança; (2) acelerar a implantação de sistemas ciberfı́sicos e sociais em uma sociedade massivamente conectada através do desenvolvimento de métodos, ferramentas e componentes de software e hardware baseados em princı́pios Integrantes: Erickson Rangel do Nascimento (coordenador), Mario Fernando Montenegro Campos, Wagner Meira Jr, Virgilio Augusto Fernandes Almeida, Nivio Ziviani, José Marcos da Silva Nogueira, Humberto Torres Marques Neto, Altigran Soares da Silva, Alberto Henrique Frade Laender, Antonio Alfredo Ferreira Loureiro, Geraldo Robson Mateus.

Current applied research projects

2019 a Atual

Fiscal Digital Integrantes: CAMPOS, MARIO F. M. (coordenador), Erickson Rangel do Nascimento, Luiz Chaimowicz, MACHARET, DOUGLAS G..

2017 a Atual

Projeto Sistema de Identificação e Rastreamento Multivisão de Equipamentos e Peças em C&M Este projeto pretende apresentar solução para esse problema por meio do desenvolvimento um sistema de telepresença robótico que permita a realização de visitas remotas a obras e a construção de um modelo tridimensional virtual realístico para visualização de uma determinada obra bem como o acompanhamento de sua evolução. Integrantes: Mario Fernando Montenegro Campos (coordenador), Erickson Rangel do Nascimento, Luiz Chaimowicz, Douglas Guimarães Macharet, Douglas Coimbra de Andrade.

See all projects in Lattes

---

Recent publications

Articles in journals

Text-Driven Video Acceleration: A Weakly-Supervised Reinforcement Learning Method
2023. IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE.
A multimodal hyperlapse method based on video and songs? emotion alignment
2023. PATTERN RECOGNITION LETTERS.
Learning geodesic-aware local features from RGB-D images
2022. COMPUTER VISION AND IMAGE UNDERSTANDING.
A reinforcement learning approach for single redundant view co-training text classification
2022. INFORMATION SCIENCES.
Learning to Detect Changes in Aerial Images in the Presence of Registration Errors
2022. IEEE GEOSCIENCE AND REMOTE SENSING LETTERS.
A Sparse Sampling-Based Framework for Semantic Fast-Forward of First-Person Videos
2021. IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE.
Learning to dance: A graph convolutional adversarial network to generate realistic dance motions from audio
2021. COMPUTERS & GRAPHICS-UK.
Towards Semi-autonomous Robotic Inspection and Mapping in Confined Spaces with the EspeleoRobô
2021. JOURNAL OF INTELLIGENT & ROBOTIC SYSTEMS.
A Shape-Aware Retargeting Approach to Transfer Human Motion and Appearance in Monocular Videos
2021. INTERNATIONAL JOURNAL OF COMPUTER VISION.
Towards automatic diagnosis of rheumatic heart disease on echocardiographic exams through video-based deep learning
2021. Journal of the American Medical Informatics Association.
Introducing the structural bases of typicality effects in deep learning
2021. IMAGE AND VISION COMPUTING.
On the Development of an Acoustic-Driven Method to Improve Driver?s Comfort Based on Deep Reinforcement Learning
2021. IEEE TRANSACTIONS ON INTELLIGENT TRANSPORTATION SYSTEMS.
Extending Maps with Semantic and Contextual Object Information for Robot Navigation: a Learning-Based Framework Using Visual and Depth Cues
2020. JOURNAL OF INTELLIGENT & ROBOTIC SYSTEMS.
Fully Convolutional Siamese Autoencoder for Change Detection in UAV Aerial Images
2020. IEEE GEOSCIENCE AND REMOTE SENSING LETTERS.
Cooperative digital magnetic-elevation maps by small autonomous aerial robots
2019. Journal of Field Robotics.

Papers in conferences

Enhancing Deformable Local Features by Joint
2023. Computer Vision and Pattern Recognition (CVPR).
Creating and Reenacting Controllable 3D Humans with Differentiable Rendering
2022. 2022 IEEE/CVF Winter Conference on Applications of Computer Vision (WACV).
Learning to Detect Good Keypoints to Match Non-Rigid Objects in RGB Images
2022. 2022 35th SIBGRAPI Conference on Graphics, Patterns and Images (SIBGRAPI).
An Action Recognition Approach with Context and Multiscale Motion Awareness
2022. 2022 35th SIBGRAPI Conference on Graphics, Patterns and Images (SIBGRAPI).
Semantic Segmentation under Adverse Conditions: A Weather and Nighttime-aware Synthetic Data-based Approach
2022. The 33rd British Machine Vision Conference (BMVC).
Extracting Deformation-Aware Local Features by Learning to Deform
2021. Thirty-fifth Conference on Neural Information Processing Systems (NeurIPS).
Musical Hyperlapse: A Multimodal Approach to Accelerate First-Person Videos
2021. 2021 34th SIBGRAPI Conference on Graphics, Patterns and Images (SIBGRAPI).
Anytime Fault-tolerant Adaptive Routing for Multi-Robot Teams
2021. 2021 IEEE International Conference on Robotics and Automation (ICRA).
Do As I Do: Transferring Human Motion and Appearance between Monocular Videos with Spatial and Temporal Constraints
2020. 2020 IEEE Winter Conference on Applications of Computer Vision (WACV).
Personalizing Fast-Forward Videos Based on Visual and Textual Features from Social Network
2020. 2020 IEEE Winter Conference on Applications of Computer Vision (WACV).
Straight to the Point: Fast-Forwarding Videos via Reinforcement Learning Using Textual Data
2020. 2020 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR).
On the Evaluation of Force Feedback Augmented Teleoperation of Excavator-like Mobile Manipulators
2020. 2020 IEEE 16th International Conference on Automation Science and Engineering (CASE).
Connecting real world and 'digital twins' with 'multivisão' system
2020. Rio Oil & Gas.
Prototypicality Effects in Global Semantic Description of Objects
2019. 2019 IEEE Winter Conference on Applications of Computer Vision (WACV).
Exploring the limitations of the Convolutional Neural Networks on Binary Tests Selection for Local Features
2019. International Conference on Computer Vision Theory and Applications (VISAPP).
GEOBIT: A Geodesic-Based Binary Descriptor Invariant to Non-Rigid Deformations for RGB-D Images
2019. 2019 IEEE/CVF International Conference on Computer Vision (ICCV).
On Modeling the Effects of Auditory Annoyance on Driving Style and Passenger Comfort
2019. 2019 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS).
On Modeling Context from Objects with a Long Short-Term Memory for Indoor Scene Recognition
2019. 2019 32nd SIBGRAPI Conference on Graphics, Patterns and Images (SIBGRAPI).
Fast-Forward Methods for Egocentric Videos: A Review
2019. 2019 32nd SIBGRAPI Conference on Graphics, Patterns and Images Tutorials (SIBGRAPIT).
A Weighted Sparse Sampling and Smoothing Frame Transition Approach for Semantic Fast-Forward First-Person Videos
2018. 2018 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR).

Extended abstracts in conferences

Acoustic-driven Interior Vehicle Adaptation based on Deep Reinforcement Learning to Improve Driver?s Comfort
2018. IROS workshop on Human/Robot in-the-loop Machine Learning.
Representing Indoor Scenes as a Sparse Composition of Feature Segments
2017. SIBGRAPI - Workshop of Works in Progress (WiP).
Towards a Cooperative Method for 3D Magnetic Maps Generation Using Small and Autonomous Aerial Robots
2017. IEEE International Conference on Intelligent Robots and Systems (IROS).
A Keypoint Detector based on Visual and Depth Features
2016. SIBGRAPI - Workshop of Theses and Dissertations (WTD).
Contributions to the Automatic Restoration of Images from Scenes in Participating Media
2016. SIBGRAPI - Workshop of Theses and Dissertations (WTD).

Abstracts in conferences

See all publications in Lattes

---

Current students

MS

Luiza Chagas Brandão Campos. (A definir). Início: 2021. Universidade Federal de Minas Gerais (Orientador principal)
Marcelo Vieira Santos. Redes neurais em grafos para detecção de locais seguros para pouso. Início: 2021. Universidade Federal de Minas Gerais (Orientador principal)
Thiago Malta Coutinho. (A definir). Início: 2021. Universidade Federal de Minas Gerais (Orientador principal)
Rafael Augusto Vieira de Azevedo. (A definir). Início: 2021. Universidade Federal de Minas Gerais (Orientador principal)

PhD

Felipe Cadar Chamone. (A definir). Início: 2021. Universidade Federal de Minas Gerais (Orientador principal)
Joana Andrade Ramalho Pinto. Treinamento cognitivo-motor na realidade virtual imersiva para idosos: relações entre parâmetros eletrofisiológicos e neuropsicológicos. Início: 2020. Universidade Federal de Minas Gerais (Co orientador)
Guilherme Augusto Potje. (A definir). Início: 2018. Universidade Federal de Minas Gerais (Orientador principal)
Washington Luis de Souza Ramos. (A definir). Início: 2017. Universidade Federal de Minas Gerais (Orientador principal)

See all students in Lattes

---