Cookies
O website necessita de alguns cookies e outros recursos semelhantes para funcionar. Caso o permita, o INESC TEC irá utilizar cookies para recolher dados sobre as suas visitas, contribuindo, assim, para estatísticas agregadas que permitem melhorar o nosso serviço. Ver mais
Aceitar Rejeitar
  • Menu
Factos & Números
000
Apresentação

Centro de Telecomunicações e Multimédia

A nossa visão é promover um mundo animado e sustentável onde a inteligência em rede permite uma interação ubíqua com o conteúdo sensorial. A missão é desenvolver sistemas e tecnologias avançadas para permitir comunicações de alta capacidade, eficientes e seguras, extração de conhecimento dos média e aplicações multimédia ubíquas imersivas.

No CTM trabalhamos em quatro áreas principais de investigação: Tecnologias Óticas e Eletrónicas, Redes Sem Fios, Tecnologias Multimédia e de Comunicações, e Processamento de Informação e Reconhecimento de Padrões.

Últimas Notícias

INESC TEC com 5 projetos exploratórios FCT aprovados em 4 áreas de I&D

Telecomunicações e multimédia, fotónica aplicada, software confiável e sistemas de computação avançada – são estas as quatro áreas que os investigadores do INESC TEC vão trabalhar no âmbito dos cinco projetos que foram aprovados através do Concurso de Projetos Exploratórios da Fundação para a Ciência e a Tecnologia (FCT).

02 outubro 2024

Inteligência Artificial

Kick-off of the first European project led by INESC TEC in the health area

It is called AI4Lungs; it aims to develop Artificial Intelligence (AI) tools and computational models to optimise the diagnosis and treatment of lung diseases. Through a holistic and multimodal approach, researchers will create a personalised healthcare solution for respiratory diseases. In late February, representatives of the 18 partner entities of the project (from 10 countries) met at INESC TEC to kick off the AI4Lungs project.

01 abril 2024

Comunicações

Europa discute oportunidades de colaboração na área de comunicações sem fios em alta frequência

Ambientes de propagação inteligentes, melhorias no processamento de sinal para a sexta geração de comunicações móveis e desenvolvimentos de rede e localização orientados para 6G foram alguns dos temas em debate num evento organizado pelos projetos europeus TERRAMETA, coordenado pelo INESC TEC, 6G-SHINE e TIMES, em colaboração com o RESTART-IN – um PRR Italiano.

06 março 2024

Inteligência Artificial

Investigadores INESC TEC no primeiro protótipo desenvolvido em Portugal que aplica IA ao diagnóstico colorretal

O trabalho que levou ao primeiro protótipo que aplica Inteligência Artificial (IA) ao diagnóstico colorretal totalmente desenvolvido por portugueses contou com investigadores do INESC TEC e do laboratório de Anatomia e Patologia Molecular (IMP Diagnostics). O trabalho foi publicado na reconhecida revista científica internacional npj Precision Oncology (https://www.nature.com/articles/s41698-024-00539-4).

05 março 2024

Investigadores do INESC TEC lideram discussão sobre comunicações sem fios e visão computacional na GLOBECOM

Quase a completar o seu primeiro ano de duração, o projeto CONVERGE, coordenado pelo INESC TEC, já deu cartas numa das principais conferências da IEEE Communications Society, a GLOBECOM, na Malásia, com a organização de um painel. “Convergence of wireless communications and computer vision: a new paradigm created by the CONVERGE project” procurou debater as novas oportunidades e desafios potenciais que podem ser antecipados pela utilização de ferramentas que combinam rádio com visão computacional.

23 janeiro 2024

194

Projetos Selecionados

INESCTEC.OCEAN

Centre of Excellence in Ocean Research and Engineering

2025-2030

AIMaCoV

Mapeamento e Compilação via AI para CGRAs em Sistemas RISC-V

2024-2026

SEAGUARD

Sea Environmental Awareness and Guard enhanced with Unmanned AI Robotic Detection

2024-2027

REPLICA

Replicable Cellular Networking Experiments using ns-3

2024-2025

RFIDCORK

Definição de uma Arquitetura de Referência para Implementação de RFID

2024-2024

TestBed5G_1

Primeiros Pilotos TestBed 5G

2024-2025

OBJECT

OBJECT: Where do our object mental symbols come from? Learning with a neurosymbolic model

2024-2025

AI4LUNGS

AI-BASED PERSONALISED CARE FOR RESPIRATORY DISEASE USING MULTI-MODAL DATA IN PATIENT STRATIFICATION

2024-2027

OPITDEV

O-PITDEV – redesign of product electronics

2024-2024

AICare4U

AI-based Robotic Solution Addressing Compensatory Patterns for Upper Limb Rehabilitation

2024-2026

PHASE IV AI

Privacy compliant health data as a service for AI development

2023-2026

PFAI4_4eD

Programa de Formação Avançada Industria 4 - 4a edição

2023-2023

UNIFY

Compilation Abstraction and Hardware Adaptation for Specialized and General-Purpose Computing Unification

2023-2026

CELLO

The sound of cells: An acoustic platform aiming towards biophysical cell fingerprints for label-free precision medicine

2023-2026

WATSON

A holistic framework with Anticounterfeit and Intelligence-based technologies that will assist food chain stakeholders in rapidly identifying and preventing the spread of fraudulent practices

2023-2026

TORIS

Towards fully printed reconfigurable intelligent surfaces

2023-2025

LUCCA

AI-based Models for Lung Cancer Characterization: a Multimodal and Causal Approach

2023-2025

Shielding

Medidas de shielding de materiais

2023-2023

CAGING

Causality-driven Generative Models for Privacy-preserving Case-based Explanations

2023-2024

CONVERGE

Telecommunications and computer vision convergence tools for research infrastructures

2023-2026

EADIGIFOLK

An European and Ibero-American approach for the digital collection, analysis and dissemination of folk music

2023-2026

A-IQ Ready

Artificial Intelligence using Quantum measured Information for realtime distributed systems at the edge

2023-2025

SuperIoT

Truly sustainable printed electronics-based IoT combining optical and radio wireless technologies

2023-2025

TERRAMETA

Terahertz reconfigurable metasurfaces for ultra-high rate wireless communications

2023-2025

AEROGANP

Creación de un eje transfronterizo de investigación y transferencia de conocimiento en el sector aeronáutico y espacial en la Eurorregión Galicia-Norte de Portugal

2023-2026

A-MoVeR

Mobilizing Agenda for the Development of Products & Systems towards an Intelligent and Green Mobility

2022-2025

OVERWATCH

Integrated holographic management map for safety and crisis events

2022-2025

AURORA

Deteção de atividade no interior do veículo

2022-2023

NEXUS

Innovation Pact - Digital and Green Transition

2022-2025

Vision2Control

Controlo Qualidade Rolamentos por Visão

2022-2023

NewSpacePortugal

Agenda New Space Portugal

2022-2025

SUSTAINABLE PLASTICS

Agenda Mobilizadora para os Plásticos Sustentáveis

2022-2025

Produtech_R3

Agenda Mobilizadora da Fileira das Tecnologias de Produção para a Reindustrialização

2022-2025

IWOW2022

IWOW2022 - NEWFOCUS COST action meeting and workshop

2022-2022

CINDERELLA

Clinical Validation of an AI-based approach to improve the shared decision-making process and outcomes in Breast Cancer Patients proposed for Locoregional treatment

2022-2026

PFAI4_3ed

Programa de Formação Avançada Industria 4 - 3a edição

2022-2022

DivaX

Services for company Europeanisation

2022-2022

ABIS

Automated Biometric Identification System

2022-2022

FORM_I40

Formação Indústria 4.0

2022-2022

THEIA

Automated Perception Driving

2022-2023

CIRCUMSTANCE

Circulating Microbial Signatures for Early Diagnosis of Cancer

2022-2025

OpenMinds

Synchronising creative minds for social cohesion and radical inclusion

2021-2023

HfPT

Health from Portugal

2021-2025

vCardID4

Digital fingerprint enhanced model - 4

2021-2022

WaveCorkCal

Calibração do higrómetro de microondas

2021-2023

CholdaDigital

Consultoria Avançada em Sistemas de Informação e Redes de Comunicações para a Quinta da Cholda

2021-2022

CadPath

Computer-Aided Diagnosis in Pathology

2021-2022

MATinMOL

Ondas de matéria em Redes Moiré

2021-2025

5GforUtilities

Tecnologia Celular 5G

2021-2022

DECARBONIZE

DEsenvolvimento de estratégias e políticas para aplicações de energia e não-energia para a neutralidade CARBÓNIca das cidades através da digitaliZação para os cidadãos e a sociedadE

2021-2023

Training4DS

Formação Avançada em Data Science - Altice Labs

2020-2020

PFAI4.0

Programa de Formação Avançada Industria 4.0

2020-2021

iiLab

Ampliação da Infraestrutura Tecnológica do INESC TEC para a Transformação Digital da Indústria

2020-2023

Continental FoF

Fábrica do Futuro da Continental Advanced Antenna

2020-2023

FLY_PT

Mobilizar a indústria aeronáutica nacional para a disrupção no transporte aéreo urbano do futuro

2020-2023

TAMI

Transparent Artificial Medical Intelligence

2020-2023

WiFi4DSO

Tecnologia Wi-Fi aplicada a cenários de um DSO

2019-2019

LeGeM

Learning Representations and Generative Models for 3D Breast Data

2019-2021

CorkNetmon

Network Infrastructure Monitoring for Remote Cork Manufacturing

2019-2020

Inphinit

Bolsa de Doutoramento ”LA CAIXA” Inphinit

2019-2022

SLID

Invitation to collaborate

2019-2022

ProLab

Consultoria profissional com recurso ao laboratório de electrónica

2019-2019

TenisApp2

Aplicação móvel para análise de jogos de ténis - 2

2019-2021

InterConnect

Interoperable Solutions Connecting Smart Homes, Buildings and Grids

2019-2024

NFCAD

Near Field Contact Antenna Development

2019-2020

EuConNeCts4

European Conferences on Networks and Communications

2019-2022

SCA

Serviço de caracterização antenas

2019-2019

STRx

Sistema de transmissão e receção de sinal de orientação eletrónica para a próxima geração de constelações de satélites (LEO e MEO).

2019-2022

RESPONDRONE

NOVEL INTEGRATED SOLUTION OF OPERATING A FLEET OF DRONES WITH MULTIPLE SYNCHRONIZED MISSIONS FOR DISASTER RESPONSES

2019-2022

InterCork

Remote Cork Manufacturing

2019-2019

CLOUD4CANDY

Cloud for CANDY

2019-2019

Evo3DModel

Consultoria para melhoria do sistema INSIGHT

2019-2020

OpenInnoTrain

Research Translation and Applied Knowledge Exchange in Practice through University-Industry-Cooperation

2019-2024

FollicleCounter

Prestação de serviços de investigação e desenvolvimento em matéria de processamento de imagem para maior fiabilidade de aferição dos folículos implantados

2018-2021

NB-IoT

Consultoria no âmbito da tecnolofia Narrowband-internet of Things

2018-2019

XPERIMUS

Experimentação em música na cultura portuguesa: História, contextos e práticas nos séculos XX e XXI

2018-2022

Blueenergy

Colheita de energia azul utilizando sistemas híbridos triboeléctricos/ fotovoltaicos para alimentar Veículos Autónomos Subaquáticos

2018-2020

PEPCC

Eficiência energética e desempenho para sistemas embarcados e de HPC com CGRAs customizados

2018-2021

GROW

Comunicações subaquáticas sem fios de longo alcance e banda larga

2018-2021

AUTOMOTIVE

Detecção automática multimodal de sonolência para veículos inteligentes

2018-2021

HELP-MD

O poder emocional e curativo da música e da dança

2018-2022

NeurOxide

Integração de transístores de filme fino e memristors à base de óxidos em redes neuromórficas

2018-2022

LUCAS

Rastreio do cancro do pulmão - uma metodologia não invasiva para o diagnóstico precoce

2018-2022

HEMOSwimmers

Otimização da hemodinâmica entorno de microrobôs nadadores

2018-2022

CLARE

Sistema de apoio ao rastreio do cancro cervical

2018-2021

ENDURANCE

Comunicações e energia sem fios subaquática contribuindo para a presença de longo

2018-2020

S-MODE

Despiste da contaminação por antibióticos através de dispositivos móveis

2018-2021

UnWSNet

Underwater Wireless Sensor Networks

2018-2018

SIMBED

Fed4fire testbed for experimentation

2018-2019

5G

Componentes e Serviços para Redes 5G

2018-2021

FotoInMotion

Repurposing and enriching images for immersive storytelling through smart digital tools

2018-2020

ConnectedRefinery

Rede de comunicações sem fios para as instalações da Galp Energia em Leixões

2018-2019

Arquitetura_IoT

Consultoria sobre a arquitetura de referência para implementação serviços de informação baseados em IoT

2017-2018

CHIC

Cooperative Holistic view on Internet and Content

2017-2020

CompMash

Music compatibility models for interactive mashup applications

2017-2019

UGREEN

Otimização do Consumo Energético de Redes LTE-U e Wi-Fi em Cenários de Coexistência

2017-2019

TERAPOD

Terahertz based Ultra High Bandwidth Wireless Access Networks

2017-2021

SURGEONMATE

Processamento de vídeo para análise de cirugias

2017-2017

TEC4Sea

Modular Platform for Research, Test and Validation of Technologies supporting a Sustainable Blue Economy

2017-2022

ROMOVI

ROMOVI: Robô Modular e cooperativo para Vinhas de encosta

2017-2019

BCCT.Plan

BCCT.plan: Ferramenta 3D para o planeamento do tratamento conservador do cancro da mama

2016-2020

WI-GREEN

WI-GREEN .: Otimização do consumo energético de redes Wi-Fi sensível aos padrões de tráfego

2016-2018

RAWFIE

Road-, Air- and Water-based Future Internet Experimentation

2016-2019

Cloud-Setup

PLATAFORMA DE PREPARAÇÃO DE CONTEÚDOS AUDIOVISUAIS PARA INGEST NA CLOUD

2016-2019

EVOXANT

Evolução bacteriana para além dos isolados em cultura - Xanthomonas arboricola pv. juglandis como paradigma

2016-2020

WISE

Redes de Comunicações em Malha formadas por Veículos Aéreos Sensíveis ao Tráfego

2016-2019

MareCom

Redes e serviços marítimos comunitários

2016-2018

STRONGMAR-CRAS

STRengthening MARritime Technology Research Center

2016-2018

CORAL-TOOLS

CORAL - Sustainable Ocean Exploitation: Tools and Sensors

2016-2018

BLUECOM+

Ligando Humanos e Sistemas em Zonas Remotas do Oceano através de Comunicações de Banda Larga e Baixo Custo

2015-2017

ENDURE

Enabling Long-Term Deployments of Underwater Robotic Platforms in Remote Oceanic Locations

2015-2017

FOUREYES

TEC4Growth - RL FourEyes - Intelligence, Interaction, Immersion and Innovation for media industries

2015-2019

NanoStima-RL5

NanoSTIMA - Advanced Methodologies for Computer-Aided Detection and Diagnosis

2015-2019

NanoStima-RL1

NanoSTIMA - Macro-to-Nano Human Sensing Technologies

2015-2019

SMILES

TEC4Growth - RL SMILES - Smart, Mobile, Intelligent and Large scale Sensing and analytics

2015-2019

VAMOS

Viable Alternative Mine Operating System

2015-2019

iBROW

Innovative ultra-BROadband ubiquitous Wireless communications through terahertz transceivers

2015-2018

SCREEN

Space Cognitive Radio for Electromagnetic Environment maNagement

2015-2016

AnyPLACE

Adaptable Platform for Active Services Exchange

2015-2018

SmarterEMC2

Smarter Grid: Empowering SG Market Actors through Information and Communication Technologies

2015-2017

SEAD

Projeto Analógico e Misto Estatisticamente Otimizado

2014-2016

MDX

Modelos de Simulação e Teste de circuitos com MCUs

2014-2016

Unisat

Serviços de banda-larga em simultâneo com receção de televisão por satélite

2014-2014

TWAVE

Ondas gémeas conjugadas em fase para desbloquear o potencial dos futuros sistemas suportados em multiplexagem por divisão espacial

2014-2015

HiperWireless

Comunicações Micro Ondas Ponto Multiponto na Banda Hiperlan Livre (17GHZ)

2014-2015

PGLobal

Desenvolvimento de software para ser integrado numa plataforma de recolha automática e selecção de conteúdos de jornais participantes de vários países

2014-2015

SUNNY

Rede de Sensores Aéreos Inteligentes para a Deteção de Embarcações Usadas para Fins Criminosos e Entradas Irregulares Além-fronteiras

2014-2018

PCSA

Caracterização de locais com base em sensores e interações

2013-2014

SIVIC

Sistema Portátil Integrado de Vigilância Cardiovascular

2013-2015

Creation

Transceptores de rádio energeticamente eficientes para transmissão de dados

2013-2016

TDT

Monitorização do sinal de televisão digital terrestre (TDT)

2013-2014

PICTURE

Informação combinada acerca de Pacientes para Avaliação de Resultados Cirúrgicos do Cancro da Mama

2013-2016

Confine

Infraestrutura Experimental de Redes Comunitárias para a Internet do Futuro

2013-2015

MAT

Arte e Tecnologia na área dos Media

2013-2015

Sensing

Sensores de Rede para Monitorização de Sistemas Críticos

2013-2015

SmartGrids

Redes Elétricas Inteligentes

2013-2015

Cooperation

Cooperação e Perceção para uma Maior Autonomia

2013-2015

ASSIST

Plataforma para estatísticas de futsal amador

2012-2013

MOGTIDT

Estação de captura 3D

2012-2012

MTGrid

Infraestrutura de Comunicações Multi-Tecnologia para Redes Elétricas Inteligentes

2012-2015

RETAIL_PRO

Plataforma Integrada de Gestão Estratégica de Ambientes de Retalho

2012-2015

WiSAT

Dispositivos passivos em guia de onda na banda S e Ka

2012-2012

SARA

Sistema de Gestão de Ativos de Redes Rodoviárias

2012-2015

CPT

Transmissor Cartesiano Polar

2012-2014

MC-WMNs

Redes em Malha Múltiplas baseadas em Contexto (MC-WMNs)

2012-2015

SENSEIVER

Soluções eficientes e de baixo custo baseadas em sensores LTCC e emissores-recetores IR-UWB para um ambiente saudável e sustentável

2011-2015

MIRes

Roadmap para a Investigação em Informação Musical

2011-2013

AdChrono

Otimização automática de publicidade online

2011-2013

3dBCT

Modelos 3D para Avaliação e Previsão do Resultado Estético em Intervenções por Cancro da Mama

2011-2014

CASA

Plataforma Computacional baseada na Análise de Ambientes Auditivos para a Segregação de Eventos Sonoros em Sinais Musicais

2011-2014

SHAKEIT

Mecanismos do Groove em Música e aplicações

2011-2013

MultiRadioAccess

Agregação de redes de acesso HSPA e WiFi para disponibilização de débito superior ao das redes individuais

2011-2011

Steering

Condução da luz em guias de onda não lineares com interacções ressonantes

2011-2014

CNG

Conteúdos de Nova Geração aplicáveis nos domínios da Educação e da Formação Profissional

2011-2014

AAL4ALL

Assistência à Autonomia no Domicílio para todos

2011-2015

SUM

Observação e compreensão da dinâmica do movimento humano

2011-2013

User-Tracking2.0

"User-Tracking" de tráfego Web

2010-2011

SELF-PVP

Gestão auto-organizada de potência numa central de produção de energia fotovoltaica

2010-2014

ImTV

Sistemas imersivos de televisão para comunidades de criadores e consumidores de conteúdos

2010-2014

NeTS

Operação e Gestão de Redes de Próxima Geração

2010-2013

EscolinhasCriativas

Escolinhas Criativas

2010-2013

Convergence

Abordagem inovadora centrada em conteúdos para complementar e melhorar a arquitectura actual da Internet

2010-2013

SafeHomeHealthCare

Espaços inteligentes para a saúde em casa sem interferência usando algoritmos de pesquisa e reflexão de meta-realidade

2010-2013

OSP

Processamento Óptico de Sinal usando Fibras altamente Não-Lineares

2010-2013

ProLimb

Sensorização electrónica para a profilaxia de patologias dos membros inferiores

2010-2013

ContextAware

Serviços Multimédia Inteligentes baseados no contexto

2010-2011

REIVE

Redes Eléctricas Inteligentes com Veículos Eléctricos

2010-2012

Alicante

Acesso ubíquo a serviços multimédia com base no contéudo

2010-2013

P3.net

Plataforma noticiosa on-line de nova geração para jovens

2010-2012

LUL

Projeto piloto de apoio à qualidade de vida de pessoas idosas

2010-2012

Hotel3.0

Plataforma Web3.0 para o mercado hoteleiro

2010-2012

WOWI

Interfaces electro-ópticas para redes de acesso picocelulares

2010-2013

RobVigil

Robô vigilante colaborativo inteligente para a área da segurança

2010-2012

Daphne

Redes fotónicas para a aviação

2009-2013

SWIOP

Sistema Web Inteligente de Apoio à Organização Pessoal

2009-2011

SITMe

Serviços Integrados para Transportes Metropolitanos

2009-2012

Mobiles

Mobilidade Eléctrica Sustentada - soluções para a logística associada ao carregamento das baterias dos veículos eléctricos

2009-2012

V-SAT

Dispositivos passivos para aplicações VSAT (Very Small Aperture Terminal)

2009-2009

PortalDouro

Portal de turismo para a região do Douro

2009-2011

KINETIC

Sistemas composicionais dinâmicos e adaptativos controlados por interfaces

2009-2011

ASP-RedesDomesticas

Soluções de Autenticação, Segurança e Privacidade (ASP) para redes domésticas

2009-2010

MuMoMgt

Gestão de mobilidade e multicast em redes de acesso heterogéneas

2009-2012

ReCoop

Redes Cooperativas sem fios

2009-2012

SemanticPACS

Sistema de Comunicação e Arquivamento de Imagens Clínicas com Motor de Pesquisa Semântica

2009-2011

Palco3.0

Sistema web inteligente de apoio à gestão de uma rede social na área da música

2008-2011

AHRS

Sistema Inercial de Orientação baseado em tecnologia MEMS

2008-2010

GeCLIFmcast

Gestão de sessões multicast com origem nos clientes

2008-2009

DR-Vids

Gestão dinâmica de recursos lógicos reconfiguráveis para segmentação foreground/background de vídeo em tempo real

2007-2010

Vector

Compilação e Síntese de Algoritmos para Processamento de Imagem em Matlab para Sistemas Vectoriais em FPGAs

2007-2011

OMR

Sistema de reconhecimento óptico de pautas musicais manuscritas

2007-2010

BCCT

Método objectivo avançado para a avaliação do resultado estético de cirurgias mamárias

2007-2010

ROFWDM

Projeto e optimização de sistemas WDM Fibra-rádio

2007-2010

EDCine

Tecnologias avançadas para cinema digital

2007-2009

VISNETII

Tecnologias para serviços audiovisuais em rede

2006-2009

Equipa
002

Laboratórios

Laboratório de Computação Musical e Sonora

Laboratório de Tecnologias Óticas e Eletrónicas

Publicações

2025

A survey on cell nuclei instance segmentation and classification: Leveraging context and attention

Autores
Nunes, JD; Montezuma, D; Oliveira, D; Pereira, T; Cardoso, JS;

Publicação
MEDICAL IMAGE ANALYSIS

Abstract
Nuclear-derived morphological features and biomarkers provide relevant insights regarding the tumour microenvironment, while also allowing diagnosis and prognosis in specific cancer types. However, manually annotating nuclei from the gigapixel Haematoxylin and Eosin (H&E)-stained Whole Slide Images (WSIs) is a laborious and costly task, meaning automated algorithms for cell nuclei instance segmentation and classification could alleviate the workload of pathologists and clinical researchers and at the same time facilitate the automatic extraction of clinically interpretable features for artificial intelligence (AI) tools. But due to high intra- and inter-class variability of nuclei morphological and chromatic features, as well as H&Estains susceptibility to artefacts, state-of-the-art algorithms cannot correctly detect and classify instances with the necessary performance. In this work, we hypothesize context and attention inductive biases in artificial neural networks (ANNs) could increase the performance and generalization of algorithms for cell nuclei instance segmentation and classification. To understand the advantages, use-cases, and limitations of context and attention-based mechanisms in instance segmentation and classification, we start by reviewing works in computer vision and medical imaging. We then conduct a thorough survey on context and attention methods for cell nuclei instance segmentation and classification from H&E-stained microscopy imaging, while providing a comprehensive discussion of the challenges being tackled with context and attention. Besides, we illustrate some limitations of current approaches and present ideas for future research. As a case study, we extend both a general (Mask-RCNN) and a customized (HoVer-Net) instance segmentation and classification methods with context- and attention-based mechanisms and perform a comparative analysis on a multicentre dataset for colon nuclei identification and counting. Although pathologists rely on context at multiple levels while paying attention to specific Regions of Interest (RoIs) when analysing and annotating WSIs, our findings suggest translating that domain knowledge into algorithm design is no trivial task, but to fully exploit these mechanisms in ANNs, the scientific understanding of these methods should first be addressed.

2025

Causal representation learning through higher-level information extraction

Autores
Silva, F; Oliveira, HP; Pereira, T;

Publicação
ACM COMPUTING SURVEYS

Abstract
The large gap between the generalization level of state-of-the-art machine learning and human learning systems calls for the development of artificial intelligence (AI) models that are truly inspired by human cognition. In tasks related to image analysis, searching for pixel-level regularities has reached a power of information extraction still far from what humans capture with image-based observations. This leads to poor generalization when even small shifts occur at the level of the observations. We explore a perspective on this problem that is directed to learning the generative process with causality-related foundations, using models capable of combining symbolic manipulation, probabilistic reasoning, and pattern recognition abilities. We briefly review and explore connections of research from machine learning, cognitive science, and related fields of human behavior to support our perspective for the direction to more robust and human-like artificial learning systems.

2025

Evaluation of Lyrics Extraction from Folk Music Sheets Using Vision Language Models (VLMs)

Autores
Sales Mendes, A; Lozano Murciego, Á; Silva, LA; Jiménez Bravo, M; Navarro Cáceres, M; Bernardes, G;

Publicação
Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics)

Abstract
Monodic folk music has traditionally been preserved in physical documents. It constitutes a vast archive that needs to be digitized to facilitate comprehensive analysis using AI techniques. A critical component of music score digitization is the transcription of lyrics, an extensively researched process in Optical Character Recognition (OCR) and document layout analysis. These fields typically require the development of specific models that operate in several stages: first, to detect the bounding boxes of specific texts, then to identify the language, and finally, to recognize the characters. Recent advances in vision language models (VLMs) have introduced multimodal capabilities, such as processing images and text, which are competitive with traditional OCR methods. This paper proposes an end-to-end system for extracting lyrics from images of handwritten musical scores. We aim to evaluate the performance of two state-of-the-art VLMs to determine whether they can eliminate the need to develop specialized text recognition and OCR models for this task. The results of the study, obtained from a dataset in a real-world application environment, are presented along with promising new research directions in the field. This progress contributes to preserving cultural heritage and opens up new possibilities for global analysis and research in folk music. © The Author(s), under exclusive license to Springer Nature Switzerland AG 2025.

2025

Model compression techniques in biometrics applications: A survey

Autores
Caldeira, E; Neto, PC; Huber, M; Damer, N; Sequeira, AF;

Publicação
INFORMATION FUSION

Abstract
The development of deep learning algorithms has extensively empowered humanity's task automatization capacity. However, the huge improvement in the performance of these models is highly correlated with their increasing level of complexity, limiting their usefulness in human-oriented applications, which are usually deployed in resource-constrained devices. This led to the development of compression techniques that drastically reduce the computational and memory costs of deep learning models without significant performance degradation. These compressed models are especially essential when implementing multi-model fusion solutions where multiple models are required to operate simultaneously. This paper aims to systematize the current literature on this topic by presenting a comprehensive survey of model compression techniques in biometrics applications, namely quantization, knowledge distillation and pruning. We conduct a critical analysis of the comparative value of these techniques, focusing on their advantages and disadvantages and presenting suggestions for future work directions that can potentially improve the current methods. Additionally, we discuss and analyze the link between model bias and model compression, highlighting the need to direct compression research toward model fairness in future works.

2024

Incremental Redundancy HARQ Communication Schemes applied to Energy Efficient IoT Systems

Autores
Silva, SM; Almeida, NT;

Publicação
2024 IEEE 22ND MEDITERRANEAN ELECTROTECHNICAL CONFERENCE, MELECON 2024

Abstract
The rapid proliferation of Internet of Things (IoT) systems, encompassing a wide range of devices and sensors with limited battery life, has highlighted the critical need for energy-efficient solutions to extend the operational lifespan of these battery-powered devices. One effective strategy for reducing energy consumption is minimizing the number and size of retransmitted packets in case of communication errors. Among the potential solutions, Incremental Redundancy Hybrid Automatic Repeat reQuest (IR-HARQ) communication schemes have emerged as particularly compelling options by adopting the best aspects of error control, namely, automatic repetition and variable redundancy. This work addresses the challenge by developing a simulator capable of executing and analysing several (H)ARQ schemes using different channel models, such as the Additive White Gaussian Noise (AWGN) and Gilbert-Elliott (GE) models. The primary objective is to compare their performance across multiple metrics, enabling a thorough evaluation of their capabilities. The results indicate that IR-HARQ outperforms alternative methods, especially in the presence of burst errors. Furthermore, its potential for further adaptation and enhancement opens up new ways for optimizing energy consumption and extending the lifespan of battery-powered IoT devices.

Factos & Números

11Artigos em conferências indexadas

2020

2Capítulos de livros

2020

82Investigadores

2016

Contactos