Questão 32 · Informática: Inteligência artificial e ciência de dados
Para desenvolver uma aplicação de Processamento de Linguagem Natural (PLN), é necessário realizar tarefas de pré-processamento no corpus de entrada, como a separação do texto em palavras.
Observe a execução do seguinte fragmento de uma tarefa de PLN:
Entrada: “Bia é uma forte candidata do concurso da CVM.”
Saída: quantidade de unidades linguísticas = 14 A tarefa de PLN que faz a separação do texto em unidades linguísticas mínimas é a:
- A) sentenciação;
- B) tokenização;
- C) lematização;
- D) radicalização;
- E) etiquetagem.
Marque a alternativa correta:
Gabarito: B
Gabarito definitivo divulgado pela banca FGV (CVM 2024).
Comentário
Gabarito: B.
A tokenização é a operação primária de pré-processamento em Processamento de Linguagem Natural (PLN) que divide um texto contínuo em unidades mínimas e indivisíveis de análise chamadas tokens (palavras, sinais de pontuação e símbolos). No fragmento analisado, as palavras e os sinais de pontuação foram particionados para totalizar 14 unidades léxicas discretas, viabilizando o processamento computacional posterior.
- (A) Errada: Sentenciação segmenta o texto em orações ou sentenças completas, e não em palavras ou unidades mínimas.
- (C) Errada: Lematização transforma as palavras flexionadas em sua forma básica de dicionário (lema), preservando a classe gramatical.
- (D) Errada: Radicalização (stemming) remove afixos e desinências morfológicas para extrair o radical de cada palavra.
- (E) Errada: Etiquetagem morfossintática (POS-tagging) atribui rótulos gramaticais (substantivo, verbo, adjetivo) a termos previamente tokenizados.
Dica de prova: O pipeline clássico de PLN segue esta ordem lógica: Tokenização (divisão em peças mínimas) $\to$ Lematização/Stemming (padronização morfológica) $ o$ POS-tagging (classificação sintática).
Fundamentos: Processamento de Linguagem Natural (PLN): Tokenização e Pré-processamento
Comentário gerado pela Cravei IA a partir do enunciado e do gabarito definitivo divulgado pela banca, e conferido por uma verificação automática. A IA pode errar: o gabarito oficial sempre prevalece.
Fonte: prova FGV CVM 2024 (Inspetor CVM - Perfil 1 - Mercado de Capitais - Manhã), questão 32, com o gabarito definitivo da banca. Comentário: Equipe Cravei · como fazemos e revisamos.