Documente Academic
Documente Profesional
Documente Cultură
Documentos Digitais
Organizao
Organizao
Conceitos de Imagem Digital
Operaes com Imagens
Aprendizado de Mquina
A. Rocha, 2012 Anlise Forense de Documentos Digitais
Organizao
Aprendizado de Mquina
Supervisionado
No-Supervisionado
Semi-Supervisionado
Avaliao e Comparao de Mtodos
A. Rocha, 2012 Anlise Forense de Documentos Digitais
Imagem
Imagem
acordo com [Gomes & Velho 1996], para
De
trabalharmos com imagens, devemos estabelecer
um universo matemtico no qual seja possvel
definir diversos modelos abstratos destas
Imagem
Imagem
Imagem
C
subconjunto de , chamado de conjunto de
valores da imagem
Imagem
C um espao de cor de dimenso 1,
Quando
dizemos que a imagem monocromtica ou em
tons de cinza
10
Imagem
0
(x
,
y
)
U
Cada ponto i i do subconjunto discreto
11
Imagem
mais utilizado de discretizao espacial
Ode caso
uma imagem consiste em tomar o domnio
como sendo um retngulo e discretizar esse
retngulo usando os pontos de um reticulado
bidimensional
(mn)
= (aij = (I(xi , yj ))
12
Imagem
Cada elemento
aij , i = 1, . . . , m e j = 1, . . . n
13
Imagem
Se cada ponto possui trs valores associados e
cada valor precisa de oito bits para ser
representado, ento cada pixel dessa imagem
pode ser representado com 24 bits
14
136
6 Digital Images
Imagem
amostragem
Images
codificao
decodificao
Representao
Contnua
reconstruo
Representao
Representao
Discreta
Note that these levels will be Simblica
realized concretely in differen
15 fo
Although there are several mathematical models appropriate
Note that these levels will be realized concretely in different ways in an
Espaos de Cor
espao de cor pode variar de acordo com o
Odispositivo
de exibio (e.g., monitor, impressora)
Espaos de cor
RGB (Vermelho,Verde, Azul)
CMYK (Ciano, Magenta, Amarelo, Preto)
HSV (Matiz, Saturao e Brilho)
etc.
A. Rocha, 2012 Anlise Forense de Documentos Digitais
16
monitores de TV e computador
datashows
scanners
Wikipedia.org
eletrnicos
cmeras digitais
fotografia tradicional
17
A. Rocha
Imagem
18
A. Rocha (Montagem)
Imagem
19
20
Wikipedia.org
21
Operaes com
Imagens
Quantizao
Mapeamento dos nmeros reais em valores
discretos
23
Warping
Modifica o domnio da funo de imagem.
24
Transformaes - Atributos
r
u
l
b
arestas
can
al
25
Decomposio em Canais
de Cores
separamos a imagem em suas cores
Quando
bsicas representadas no espao de cores
C
26
Decomposio Wavelet
L
H3
V3
D3
H2
V2
D2
H1
A. Rocha
V1
D1
A. Rocha
27
Decomposio em Planos
de Bits
decompomos a imagem em seus planos
Quando
de bits
exemplo, aps a decomposio da imagem
Por
de 24 bits em seus trs canais de cores (R,G,B),
podemos ainda, fazer uma decomposio por
planos de bits.
28
A. Rocha
Decomposio em Planos
de Bits
29
Nomenclaturas
Nomenclatura
Diferentes reas tem nomes distintos para
coisas parecidas
Aprendizado de Mquina
Reconhecimento de Padres
Aprendizado Estatstico
Minerao de Dados
A. Rocha, 2012 Anlise Forense de Documentos Digitais
31
Aprendizado de
Mquina
Aprendizado de Mquina
Aprendizado de Mquina uma rea da
33
Aprendizado de Mquina
Alguns problemas que utilizam aprendizado de
Mquina [Mitchell 1997] [Friedman et al. 2001]
reconhecimento de caracteres
reconhecimento da fala
predio de ataques cardacos
deteco de fraudes em cartes de crditos
A. Rocha, 2012 Anlise Forense de Documentos Digitais
34
Aprendizado de Mquina
Na soluo desses problemas, podemos ter
classificadores fixos ou baseados em
aprendizado, que, por sua vez, pode ser
supervisionado ou no-supervisionado
[Friedman et al. 2001]
35
Definio Classificadores
ver um classificador, matematicamente, como
Podemos
um mapeamento a partir de um espao de
caractersticas X para um conjunto discreto de rtulos
(labels) Y
[Dudaetal.2000]
A. Rocha, 2012 Anlise Forense de Documentos Digitais
36
Classificadores
Classificadores podem ser
Supervisionados
Semi-Supervisionados
No-Supervisionados
A. Rocha, 2012 Anlise Forense de Documentos Digitais
37
Classificadores
supervisionados consistem em
Classificadores
tcnicas em que procuramos estimar uma funo
de classificao f a partir de um conjunto de
treinamento
38
Classificadores
observados no conjunto X so
Valores
denotados por x , isto , x a i-sima
i
observao em X
39
Classificadores
vetor de entrada composto por p graus
Cada
de liberdade (dimenses ou variveis)
sada da funo f pode ser um valor contnuo
A(regresso)
ou pode predizer a etiqueta (label)
de um objeto de entrada (classificao)
40
Classificadores
do aprendizado predizer o valor da funo
Aparatarefa
qualquer objeto de entrada que seja vlido aps
41
Aprendizado No-Supervisionado
42
Aprendizado No-Supervisionado
aprendizado no-supervisionado
A. Rocha, 2012 Anlise Forense de Documentos Digitais
43
Aprendizado Semi-Supervisionado
Supervisionado
No Supervisionado
So as tcnicas Semi-Supervisionadas
A. Rocha, 2012 Anlise Forense de Documentos Digitais
44
Modelagem de
Problemas
Modelagem de Problemas
Problemas so descritos por variveis
Dois tipos
Reais
Categricas
A. Rocha, 2012 Anlise Forense de Documentos Digitais
46
Modelagem de Problemas
Como transitar entre os dois tipos de variveis?
possvel converter uma representao em
outra?
47
Modelagem de Problemas
Simplicidade vs. Complexidade
O que realmente importante?
Precisamos realmente de todos os dados
possveis para tomar uma deciso?
48
Modelagem de Problemas
Dimenso do vetor de caractersticas tem
efeitos colaterais importantes:
Dimenso alta
Distncias mdias ficam grandes
Dados ficam esparsos
Maldio da Dimensionalidade
A. Rocha, 2012 Anlise Forense de Documentos Digitais
49
Aprendizado
Supervisionado
(Primeiros Passos)
Aprendizado Supervisionado
Dados para Aprendizado Supervisionado
Give me more data
Classificao vs. Regresso
A. Rocha, 2012 Anlise Forense de Documentos Digitais
51
Aprendizado Supervisionado
52
Exemplo KNN
K-Vizinhos mais Prximos (KNN)
Um exemplo de tcnica baseada em instncias.
No h aprendizado
decises so feitas para cada instncia
A. Rocha, 2012 Anlise Forense de Documentos Digitais
53
KNN k = 1
o.... .... o.... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
.. .. .. .. .. ..o
.........................................
o o
.. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
... ... ... ... o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. .. .. .. .. .. .. .. .. .. .. .. .. o
o o
.. ..o
.. .. ... ...o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. ..o
. .o
.. .. ..o.. .. .. ..o
....................................
o o o
.. .. ... ...o
.. .. .. .. ..o
.. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o
...o
... ... ... ... ... ... o
o oo
o
.
.
.
.
.
.
.
.
o ... ... ... ...o... ... ... .... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... .....o.....o..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... .....
o
.. ..o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o ... ... ... ... ... ... ... ... ...oo... ... ... ... ... ... ... ...o
o
.
.
o
o
.. .. .. .. .. .. .. .. .. .. .. .. o
.. .. o
.. .. .. .. o
.. ... o
... ... ... ... ... ... ... ... ... ... ... ... ...o
... ... ... ... ... ... ... ... ... ... ... ... ... ...
o
o
.. .. .. .. .. .. .. .. o
..................
o o o.....o..... ..... o.....o..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... ..... .....o..... ..... ..... ..... o
.. .. .. .. .. .. .. ..o
... ... ... ... ... ... ... ... ... ... ...o... ... ... ... ... ... ...
........
.. .. .. .. .. .. .. .. .. .. .. .. .. ..o
o o .. .. .. .. .. o.. ..o
.. o
.. .. .. .. ..o.. .. .. .. ..o
.. .. .. ... ... ... ... o
o
.. .. .. ..o
.. .. .. o
.. .. .. .. .. .. .. ... ... ... ... ... ... ... ...
o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o
oooo.. o
o
...o
... o
...o
... ... ... ... ... ...o
... o
... ... ... ... ... ...o...
... ... ... ...o... ... ... ... ... ... ... ... ... ... ... ... o
o...o..... ..... o.....o..... o..... ..... ..... ..... ..... ..... ..... .....o..... o
o
. . . . . . . .o
. . .. .. ..o
. . . . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o o
.. ..o
.. ... ... ... ... ... ... ... ... ... ... ... ... o
.. .. .. ... ... o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o
... ... ... ... ...o... ... ... ... ... ...o
o
o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o
o
o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. .. o
.. .. .. .. .. ..o.. .. .. .. .. .. .. .. .. ... o
...o
... ... ... ... ... ... ... ... ... ... ... ... ...
.
o.. ..o.. o.. .. o.. .. .. .. o.. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . . . . . . . . . . . .o. . . . .. .. .. .. .. .. ..
.. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... o
.. .. .. .. .. .. .. .. o
.. .. .. .. .. .. ..
... ... ... ... ... ... ...o... o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o
o
o
. . .o
..........o
. . . . . . . . . . . . . . . .o
. . . . . . . . . . . . .. .. .. .. .. ..
o .... .... .... .... .... .... .... o.... o.... .... .... .... .... .... ....o.... ....o.... o.... o....oo.... .... .... o.... .... .... ....o.... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
..............
..o
. . . . . . ..o..o.. ..o
..o
. .. .. .. o
. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..o
.. ... ... ... ... ... ... o
.. o
.. .. .. ... ... ... o
.. .. .. ... o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ...
... ... ... ... ... ... ... ... ... ...o... ... ... ... ...o...o
.. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.
o... ... ... ... ... ... ... ... ... ... ... ... ... ... ...o... ...oo... ... ... o
.. o
... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. ..o
.. .. .. ..o.. .. .. o
.. .. .. .. .. .. .. ... o
. . . . . . . .o
..................
o ... ... ...o... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
. . . . . .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . . . . . .. .. .. ..o.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o. . . . . . . . . . . . . . . . . . . . . .
... ... ... ... ...o
.. .. .. .. .. .. .. ..o.. .. .. .. .. .. ...o... ... ... ... ...o
.. .. .. .. .. .. .. .. .. .. .. .. .. o
.. o
.. o
.. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
... ... ... ... ... ... ... ... ... ... ... ... ... o
... ... ... ... ... ... o
... ... o
... ... ... ... ...o
... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
.........................
.. .. .. .. .. .. .. .. .. .. ..o.. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o. . . . . . . . . . . . . . . . .
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ...o
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. .. .. .. .. .. .. .. .. .. ..o.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
................
. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
.
...
...
..
..
..
..
..
..
..
..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
...
..
...
.
...
...
..
..
..
..
..
..
..
..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
...
...
...
..
...
.
...
...
..
..
..
..
..
..
..
..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
... ...
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
.. ..
.. ..
... ...
... ...
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
..
... ...
.. ..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
.. ..
... ...
.. ..
... ...
... ...
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
.
...
.
...
..
.
...
..
..
..
.
...
..
..
..
..
..
...
..
..
...
..
...
...
...
..
...
.
...
...
..
..
..
..
..
..
..
..
..
.. ..
.. ..
.. ..
..
... ...
.. ..
.. ..
.. ..
..
... ...
.. ..
.. ..
.. ..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
.. ..
..
... ...
.. ..
... ...
... ...
... ...
.. ..
... ...
..
... ...
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
..
..
.
J. Friedman et al.
54
KNN k = 15
o.... .... o.... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
.. .. .. .. .. ..o
.........................................
o o
.. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. ..o
.. .. o
. . .. .. .. .. .. .. .. .. .. .. .. .. .. o
............................
o o
.. .. o
.. .. ... ...o
.. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. ..o
. . .. .. ..o.. .. .. ..o
....................................
.. .. ... ...o
.. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
o o o
.. .. .. ..o
. . . .. ..o
......................................
o
..o
.. .. .. ... ... ... o
.. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
o oo
o .... .... .... ....oo.... .... .... .... .... .... .... .... .... .... .... .... .... .... ....o....o.... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
o
.. ..o
. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
o ... ... ... ... ... ... ... ... ...oo... ... ... ... ... ... ... ...o
.. ... o
.. .. .. .. .. .. .. .. .. .. .. .. ..o
.. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. .. .. .. ..o.. .. .. .. ..o.. .. o
.. .. o
.. .. ..o... o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
. .. .. .. .. .. .. .. .. .. .. .. .. ..
o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
. . . . . . .o. . . . . . .
o
o
o...o... ... ...o... ... ... ... ... ... ... ... ... ... ... ... ...o... ... ... ... o
.. .. .. .. .. .. .. ..o
... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.
.
.
.
.
.
.
.
o
o o .. .. .. .. .. o.. ..o
.. .. .. .. .. ..o
.. .. .. .. ..o
.. .. .. .. .. .. .. o
.. .. .. .. .. .. .. o
.. .. .. .. .. .. ..o
.. .. .. .. .. .. .. ..
o
o
o
o
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o
o
o
.. .. .. .. .. .. .. .. .. .. .. .. .. o
. .. o
. .. .. .. .. .. .. .. .. .. ..o
.. .. .. .. .. .. .. .. .. .. .. .. ... o
.. .. .. .. .. ..o..
o
ooo.....oo
.. .. o
.. .. .. .. .. .. .. .. .. .. .. ...o
.. ...o
.. ..o
.. .. .. ..o
.. .. .. o
.. o
.. .. .. .. .. .. .. .. .. .. .. .. o
.. ... ... ... ... ... ... ...
o.. .. .. .. .. o
.. .. .. o
.. .. .. .. .. .. .. .. .. .. .. .. .. o
. . .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. ... ... ...o...o... o
.. ...o
... ...o
o
o
o
.
.
.
.
.
.. .. .. .. .. .. .. .. .. .. .. .. ... ... o
.
.
.
.
.
. .. .. .. .. .. .. .. .. .. .. .. .. ..
o
.. .. .. .. .. .. .. .. .. .. ..o
.o
.
.
.
..o.. .. ..o
.. .. o
.. .. .. .. .. ..o.. .. .. ..o.. .. .. .. .. .. ...o
.............
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
o.. ..o.. o.. .. o.. .. .. .. o.. .. .. .. .. .. .. .. .. .. .. .. .. .. o
.. .. .. .. .. .. .. .. .. .. .. ... ...o... ... ... ... ... ... ... ... ... ... ...
. . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . . .. .. .. .. .. o
. . . . .. .. .. .. o
.......
.. o
.. .. .. .. .. .. .. .. o
.. .. o
... ... ... o
.. .. .. ..o
.. ... ... ... ... o
.. o
.. .. .. ... ... o
.. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ...
o
o .... .... .... .... .... .... .... o.... o.... .... .... .... .... .... ....o.... ....o.... .... o....oo.... .... .... o.... .... .... ....o.... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
...o
... ... ... ... ... ... o
...o...o... ...o
... ... o
... ... ... ... o
... o
... ... ... ... ... ... ... ... ... ... ... ... ... ... ...o
.. ... ... ... ... ... ... ... ... ... ... ... ... ...
.
... ... ... ... ... ... ... ... o
... ...o... ... ... ... o
...o...o
... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
o.... .... .... .... .... .... .... .... .... .... .... .... .... .... ....o.... ....oo.... .... .... o
.o
.. .. .. .. .. .. .. ..o
..................
... ... ...o
... ... ...o
... ... ... ...o... ... ... o
... ... ... ... ... ... ... ... o
.. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
o .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
. . . . . .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . . . . . .. .. .. ..o
o.. .. .. .. .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... .... ....
... ... ... ... ...o
.. .. .. .. .. .. .. ..o.. .. .. .. .. .. ...o... ... ... ... ...o
.. .. .. .. .. .. .. .. .. .. .. .. .. o
.o
. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. .. .. .. .. .. .. .. .. .. .. .. .. ... ... o
. . .. .. .. .. o
. . . . . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. .. .. .. .. .. .. .. .. .. .. .. .. o
.. .. ... ...o
.. .. o
.. .. ... ... ... ... ...o
.....................
.. .. .. .. .. .. .. .. .. .. ..o.. .. .. .. .. .. .. .. .. .. .. o
.. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
. . .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ..
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ...o
o. . . . . . . . . . . . . . . . .
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. .. .. .. .. .. .. .. .. .. .. .. .. .. ..o.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. o
................
.. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. .. ... ... ... ... ... ... ... ... ... ... ... ... ... ... ... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
.
...
..
.
...
..
..
..
..
..
..
..
..
.
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
...
..
...
..
.
...
..
..
..
..
..
..
..
..
.
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
.
...
..
..
...
..
...
..
.
...
..
..
..
..
..
..
..
..
.
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
... ...
... ...
... ...
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
... ...
..
... ...
... ...
... ...
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
..
...
...
.
...
...
...
..
...
..
...
..
.
...
..
..
..
..
..
..
..
..
.
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
... ...
... ...
..
... ...
... ...
... ...
.. ..
... ...
.. ..
... ...
.. ..
..
... ...
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
.. ..
.. ..
..
.. ..
.. ..
..
..
..
.
.. ..
.. ..
..
..
..
.
J. Friedman et al.
55
Avaliao e
Comparao
Avaliao e Comparao
Vis e Varincia
Treinamento e Teste
Matriz de Confuso
Mtricas e Critrios
Rocha & Goldenstein, 2010 CSI: Anlise Forense de Documentos Digitais
57
Avaliao e Comparao
58
Curvas ROC
Especificidade
E = TN / (TN + FP)
Sensitividade
S = TP / (TP + FN)
(Sensitividade) vs. (1 - Especificidade) = Curva
Caracterstica de Operao (ROC)
59
Wikipedia.org
Curvas ROC
60
Referncias
Referncias
1. [Baeza-Yates 2003] R. Baeza-Yates. Clustering and Information Retrieval. Kluwer Academic Publishers. 1 edition.
2. [Bishop, 2006] C. M. Bishop. Pattern Recognition and Machine Learning. Springer, 1 edition, 2006.
3. [Duda et al. 2001] R. O. Duda, P. E. HART and D. G. STORK. Pattern Classification. Wiley-Interscience, 2, 2000.
4. [Friedman et al. 2001] J. Friedman, T. Hastie, and R. Tibshirani. The Elements of Statistical Learning. Springer, 1
edition, 2001.
5. [Gomes & Velho, 1996] J. Gomes L. Velho. Computao Grfica: Imagem. IMPA-SBM, 1.
6. [Gonzalez & Woods, 2007] R. Gonzalez and R. Woods. Digital Image Processing. Prentice-Hall, 3 edition.
7. [Mitchell 1997] T. M. Mitchell. Machine Learning. McGraw-Hill, 1 edition, 1997.
62
Obrigado!