-
Notifications
You must be signed in to change notification settings - Fork 0
/
cnsslis9teste.m
257 lines (232 loc) · 9.68 KB
/
cnsslis9teste.m
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
% Complex Networks Semi-Supervised Learning Image Segmentation v5
% Trabalha na primeira fase com imagem redimensionada para um 1/9 do tamanho
% original. Inclui ExR, ExB, e ExG. Exclui desvios padrões (v2)
% Não inclui vizinhança recíproca (v3)
% Peso maior conforme a posição na lista de vizinhos mais próximos (v4)
% Peso do vizinho de acordo com a Distância Euclidiana (v5)
% Mudanças no cálculo de distância da segunda fase (v5)
% 9 atributos (XY RGB V (de HSV) ExR ExG ExB (v8)
% Todo nó que não tem potencial maior totalmente definido (1) é considerado
% indeciso. Quando k=0, todos os nós são considerados indecisos, inclusive rotulados (v8)
% Uso de gaussiana para calcular pesos (v9)
% Filtro bilinear para redimensionar tri-maps, aproximando em seguida os
% mistos para o rotulado predominante (v9)
% Usage: [owner, pot] = cnsslis9(img, imgslab, fw, k, sigma, disttype, valpha, maxiter)
% INPUT:
% img - Image to be segmented (24 bits, 3 channels - RGB)
% imgslab - Image with labeled/unlabeled pixel information (0 is reserved
% for ignored background, 64 - background class, 128 -
% unlabeled pixels, 255 - foreground class. For multiclass use
% [1~63; 65~127; 129~254] for other classes. (Obs: use only grayscale 8-bit indexed image)
% fw - vector of feature weights
% k - each node is connected to its k-neirest neighbors
% disttype - use 'euclidean', etc.
% valpha - Default: 20 (lower it to stop earlier, accuracy may be lower)
% maxiter - maximum amount of iterations
% OUTPUT:
% owner - vector of classes assigned to each data item
% pot
function [owner, pot] = cnsslis9teste(img, imgslab, fw, k, sigma, disttype, valpha, maxiter)
if (nargin < 8) || isempty(maxiter)
maxiter = 500000; % número de iterações
end
if (nargin < 7) || isempty(valpha)
valpha = 2;
end
if (nargin < 6) || isempty(disttype)
disttype = 'euclidean'; % distância euclidiana não normalizada
end
if (nargin < 5) || isempty(disttype)
sigma = 0.5;
end
if (nargin < 4) || isempty(k)
k = 10; % quantidade de vizinhos mais próximos
end
if (nargin < 3) || isempty(fw)
fw = [1 1 0.5 0.5 0.5 0.5 0.5 0.5 0.5];
end
% tratamento da entrada
k = uint16(k);
if k>0
% reduzindo imagem
rs_img = imresize(img,1/3,'bicubic');
otherlabels = [1:63 65:127 129:254];
if isempty(intersect(unique(imgslab),otherlabels)) % se há apenas duas classes
rs_imgslab = imresize(imgslab,1/3,'bilinear');
rs_imgslab(rs_imgslab<64 & rs_imgslab>0) = 64;
rs_imgslab(rs_imgslab<128 & rs_imgslab>64) = 64;
rs_imgslab(rs_imgslab>128) = 255;
else % mais de duas classes
rs_imgslab = imresize(imgslab,1/3,'nearest');
end
[rs_dim,qtnode,X,slabel,nodeval,nclass] = getFeatures(rs_img,rs_imgslab,fw);
% já estamos normalizando de qualquer forma
if strcmp(disttype,'seuclidean')==1
disttype='euclidean';
end
indval = find(nodeval); % pega só os índices dos pixels que não são do fundo ignorado
Xval = X(indval,:); % cria lista de pixels válidos (que não são do fundo ignorado)
qtnodeval = size(indval,1); % quantidade de nós válidos (pixels válidos)
slabelval = slabel(indval); % rótulos dos pixels válidos (não são do fundo ignorado)
nnonlabeled = sum(slabelval==0); % quantidade de nós não rotulados
stopmax = round((qtnodeval/nnonlabeled)*round(valpha*0.1)); % qtde de iterações para verificar convergência
% lista de nós não rotulados
indnonlabeled = uint32(find(slabelval==0));
% lista de nós rotulados
labelednodes = uint32(find(slabelval>0));
% encontrando k-vizinhos mais próximos
[KNN,KNND] = knnsearch(Xval,Xval(indnonlabeled,:),'K',k+1,'NSMethod','kdtree','Distance',disttype);
KNN = uint32(KNN);
clear XVal;
KNN = KNN(:,2:end); % eliminando o elemento como vizinho de si mesmo
KNND = KNND(:,2:end);
KNND = exp((-KNND.^2)./(2*sigma^2));
% ajustando todas as distâncias na máxima possível
potval = repmat(1/nclass,qtnodeval,nclass);
% zerando potenciais dos nós rotulados
potval(labelednodes,:) = 0;
% ajustando potencial da classe respectiva do nó rotulado para máximo
potval(sub2ind(size(potval),labelednodes,slabelval(labelednodes))) = 1;
% variável para guardar máximo potencial mais alto médio
potval = cnsslis9loop(maxiter,nnonlabeled,indnonlabeled,stopmax,potval,k,KNN,KNND);
clear KNN slabelval KNNND;
pot = zeros(qtnode,nclass);
pot(:,1) = 1; % nós de fundo serão associados à mesma classe da cor de índice 64.
pot(indval,:)=potval;
clear potval;
end
[dim,qtnode,X,slabel,~,nclass] = getFeatures(img,imgslab,fw);
% Redimensionar matriz de potenciais
% (antes de redimensionar é preciso passar para matriz de 3 dimensões e
% depois voltar para o formato anterior)
if k>0
pot = reshape(imresize(reshape(pot,rs_dim(1),rs_dim(2),nclass),[dim(1) dim(2)],'bilinear'),qtnode,nclass);
else
pot = repmat(1/nclass,qtnode,nclass);
end
% encontrando nos rotulados
labelednodes = find(slabel>0);
% zerando potenciais dos nós rotulados
pot(labelednodes,:) = 0;
% ajustando potencial da classe respectiva do nó rotulado para 1
pot(sub2ind(size(pot),labelednodes,slabel(labelednodes))) = 1;
% PARTE 2!
%disp('Parte 2: Encontrando vizinhos...');
indefnodesb = max(pot,[],2) < 1.0; % vetor onde 1 é nó indefinido e 0 é definido
indefnodes = uint32(find(indefnodesb)); % lista de nós indefinidos
indefnodesc = size(indefnodes,1); % contagem de nós indefinidos
if indefnodesc>0
%fprintf('Parte 2: %i nós indefinidos. Pegando colaboração de pixels vizinhos\n',size(indefnodes,1))
Ndist = zeros(size(X,1),8);
Nlist = zeros(size(X,1),8,'uint32');
Nsize = zeros(size(X,1),1,'uint8');
% Pesos das ligações horizontais
for i=1:dim(1)
for j=1:dim(2)-1
ind1 = i+(j-1)*dim(1);
ind2 = ind1 + dim(1);
if indefnodesb(ind1) || indefnodesb(ind2)
p2addNeighbor;
end
end
end
% Peso das ligações diagonais (\)
for i=1:dim(1)-1
for j=1:dim(2)-1
ind1 = i+(j-1)*dim(1);
ind2 = ind1+dim(1)+1;
if indefnodesb(ind1) || indefnodesb(ind2)
p2addNeighbor;
end
end
end
% Peso das ligações verticais
for i=1:dim(1)-1
for j=1:dim(2)
ind1 = i+(j-1)*dim(1);
ind2 = ind1+1;
if indefnodesb(ind1) || indefnodesb(ind2)
p2addNeighbor;
end
end
end
% Peso das ligações diagonais (/)
for i=1:dim(1)-1
for j=2:dim(2)
ind1 = i+(j-1)*dim(1);
ind2 = ind1-dim(1)+1;
if indefnodesb(ind1) || indefnodesb(ind2)
p2addNeighbor;
end
end
end
clear X;
% aplicando Gaussiana nas distâncias
Ndist = exp((-Ndist.^2)./(2*sigma^2));
% constantes
npart = indefnodesc; % quantidade de nós ainda não rotulados
stopmax = round((qtnode/npart)*round(valpha*0.1)); % qtde de iterações para verificar convergência
% variável para guardar máximo potencial mais alto médio
% chamando o arquivo mex do strwalk25
%disp('Parte 2: Propagação de rótulos...');
pot = strwalk25loop(maxiter, npart, nclass, stopmax, indefnodes, slabel, Nsize, Nlist, Ndist, pot);
if k==0
% zerando potenciais dos nós rotulados
pot(labelednodes,:) = 0;
% ajustando potencial da classe respectiva do nó rotulado para 1
pot(sub2ind(size(pot),labelednodes,slabel(labelednodes))) = 1;
end
end
[~,owner] = max(pot,[],2);
function p2addNeighbor
Nsize(ind1) = Nsize(ind1) + 1;
Nsize(ind2) = Nsize(ind2) + 1;
Ndist(ind1,Nsize(ind1)) = norm(X(ind1,:)-X(ind2,:));
Ndist(ind2,Nsize(ind2)) = Ndist(ind1,Nsize(ind1));
Nlist(ind1,Nsize(ind1)) = ind2;
Nlist(ind2,Nsize(ind2)) = ind1;
end
end
function [dim,qtnode,X,slabel,nodeval,nclass] = getFeatures(img,imgslab,fw)
% Atenção: Atributo Linha e HSV estão errados em todas as versões anteriores deste algoritmo!
% Dimensões da imagem
dim = size(img);
qtnode = dim(1)*dim(2);
X = zeros(qtnode,9);
% primeiro e segundo elementos são linha e coluna normalizadas no intervalo 0:1
X(:,1:2) = [repmat(((1:dim(1))/dim(1))',dim(2),1), reshape(repmat((1:dim(1))/dim(1),dim(2),1),dim(1)*dim(2),1)];
% depois vem os 3 elementos RGB normalizados em 0:1
imgvec = double(squeeze(reshape(img,dim(1)*dim(2),1,3)))/255;
X(:,3:5) = imgvec;
% depois vem os 3 elementos HSV
imghsv = rgb2hsv(double(img)/255);
X(:,6) = squeeze(reshape(imghsv(:,:,3),dim(1)*dim(2),1,1));
% em seguida ExR, ExG, e ExB
exr = 2.*double(img(:,:,1)) - double(img(:,:,2)) - double(img(:,:,3));
exg = 2.*double(img(:,:,2)) - double(img(:,:,1)) - double(img(:,:,3));
exb = 2.*double(img(:,:,3)) - double(img(:,:,1)) - double(img(:,:,2));
imgex = cat(3, exr, exg, exb);
clear exr exg exb;
X(:,7:9) = squeeze(reshape(imgex,dim(1)*dim(2),1,3));
X = zscore(X) .* repmat(fw,qtnode,1);
% Converter imagem com rótulos em vetor de rótulos
slabelraw = reshape(imgslab,dim(1)*dim(2),1);
% montar vetor onde 0 é nó do fundo não considerado e 1 é nó válido
nodeval = zeros(qtnode,1);
nodeval(slabelraw~=0)=1;
% ajustar vetor de rótulos
slabel = zeros(qtnode,1,'uint16');
slabel(slabelraw==0)=1; % fundo não considerado
slabel(slabelraw==64)=1; % c/ rótulo - fundo
otherlabels = [1:63 65:127 129:254];
olfound = intersect(unique(slabelraw),otherlabels);
if isempty(olfound) % se não outros rótulos, i.e., há apenas duas classes
nclass=2;
else % se há mais rótulos
nclass=size(olfound,1)+2;
for i=1:nclass-2
slabel(slabelraw==olfound(i)) = i+1;
end
end
slabel(slabelraw==255)=nclass; % c/ rótulo - objeto
end