Documente Academic
Documente Profesional
Documente Cultură
C06 Algoritmi Genetici
C06 Algoritmi Genetici
Algoritmii genetici
– reprezintă o soluţie a problemelor de optimizare,
– bazată pe mecanisme împrumutate din genetică.
Un AG
– menţine o populaţie de indivizi,
– fiecare individ reprezinta o soluţie potenţială a unei probleme
AG realizeaza, în fiecare etapă, următoare operaţii:
– evaluarea populaţiei curente
– selecţia celor mai buni indivizi
– transformarea populaţiei folosind operatori genetici de încrucişare şi
mutaţie.
Domeniile de aplicare
• optimizarea parametrilor
• control optim
• transport
• optimizare combinatorială
• desenare de grafuri
• învăţare inductivă a regulilor de decizie
• stabilirea cablajelor
• planificarea
• jocuri, modelarea cognitivă
• optimizarea interogării bazelor de date.
Metode clasice de optimizare
Problema:
– cautarea intr-un spatiu de siruri binare de 30 de biti, cu functia obiectiv
f(v) = | 11*one(v)-150|
– unde one(v) este numarul de unitati din vectorul binar v.
– Functia f(v) are
• un maxim global pentru vg = (1 1 1 1 …1), pentru care f(vg) = 180 si
• un maxim local pentru vl = (0 0 0 …0), pentru care f(vl) = 150.
Algoritmul hill climbing
procedure hillclimber
begin
t := 0
do t < MAX ->
local := false
selectează aleator sirul curent Vc
evalueaza Vc
do not local ->
gaseste Vn dintre vecinii cu cea mai mare valoare a
functiei obiectiv F
if F(Vc) < F(Vn) -> Vc := Vn
[] F(Vc) >= F(Vn) -> local := true
fi
od
t := t+1
od
end
Obs: daca sirul de pornire are <= 13 unitati atunci se gaseste intotdeauna
maximul local
Simulated annealing
procedure simulated-annealing cand T atinge o anumita limită inferioară.
begin
t := 0
initializeaza temperatura T
verifică atingerea unui “echilibru termic” de
selecteaza aleator sirul curent Vc ex cand distribuţia probabilităţilor noilor
evalueaza Vc şiruri selectate se apropie de Bolzmann.
do not cond-stop ->
do not cond-terminare ->
selecteaza un nou sir Vn vecin cu Vc
if F(Vc) < F(Vn) -> Vc = Vn
[] F(Vc) >= F(Vn) ->
if random[0,1) < exp((F(Vn)-F(Vc))/T) ->
Vc = Vn
fi
fi
od
T = g(T,t)
t = t+1
od
end
Pentru problema sirurilor binare:
daca v12 are 12 unitati:
f(v12) = |11*12 – 150| = 18
f(v13) = |11*13 – 150| = 7
Selecţia
generează un număr aleator rand în intervalul [o, cf-max] 27
if rand <= cf(x1) -> alege primul cromozom x1 fi
if cf(xi-1) < rand <= cf (xi) -> alege xi fi
Numar aleator 23 49 76 13 1 27 57
Cromozom ales 3 7 10 3 1 3 7
Operatorul mutation
Primul fiu 1 1 1 1 1 1 0 0
Al doilea fiu 0 0 0 0 0 0 1 1
Aplicarea operatorului crossover pentru pozitiile 3 si 6
Primul parinte 1 1 1 1 1 1 1 1
Al doilea parinte 0 0 0 0 0 0 0 0
Primul fiu 0 0 0 1 1 1 0 0
Al doilea fiu 1 1 1 0 0 0 1 1
Masca 1 0 0 1 0 0 0 1
Primul fiu 1 0 0 1 0 0 0 1
Al doilea fiu 0 1 1 0 1 1 1 0
Justificarea funcţionării algoritmilor genetici
Schema
– este un şir construit cu simbolurile 0, 1 şi * (don't care)
– sunt posibile 3m scheme de lungime m
– o schemă reprezintă toate şirurile care coincid cu ea în poziţiile
diferite de *
– o schemă cu r simboluri * are drept corespondente 2r şiruri
– un şir de lungime m poate fi pus în corespondenţă cu 2m scheme
– intr-o populaţie de dimensiune n pot fi reprezentate între 2m şi n*2m
scheme
Proprietăţile schemelor
– Ordinul o(S) = numarul de pozitii fixe
S1 = (010***11***1) are o(S1) = 6
– Lungimea caracteristică (S) = distanţa între prima şi ultima poziţie
fixă
(S1) = 11
Evoluţia schemelor - selectia
pop_size dimensiunea populaţiei eval(vi) = potrivirea cromozomului i
m lungimea unui cromozom
eval(vi )
Şirul vi are probabilitatea de selectie conform ruletei pi
F (t )
pop size
Potrivirea totală a populatiei F (t ) eval(v )
i 1
i
eval( S , t )
Probabilitatea de selecţie a unui şir care corespunde schemei S =
Numar de selectii este pop_size F (t )
Rezulta eval( S , t )
( S , t 1) ( S , t ) * pop _ size *
F (t )
——— F (t )
Fie F (t ) potrivirea medie a populatiei
pop _ size
eval( S , t )
Atunci ( S , t 1) ( S , t ) * ———
F (t )
eval( S , t ) (S )
( S , t 1) ( S , t ) * * (1 pc * p m * o( S ))
———
F (t ) m 1
Teorema schemei. Schemele scurte, de ordin scăzut şi peste medie
cresc exponenţial de-a lungul generaţiilor unui algoritm genetic.
Exemplu
– fie L = (1,2,3,4,5,6).
– Vectorul X = <4,3,4,1,1,1> este decodificat astfel:
• X[1] = 4 se alege L[4] = 4 – L devine L = (1,2,3,5,6)
• X[2] = 3 se alege L[3] = 3 – L devine L = (1,2,5,6)
• X[3] = 4 se alege L[4] = 6 – L devine L = (1,2,5)
• s.a.m.d.
Rezultat:
– Vectorul X = <4,3,4,1,1,1> este decodificat
– ca secvenţa 4, 3, 6, 1, 2, 5.
– 6 este al 4-lea element după eliminarea lui 4 şi a lui 3
procedure decode (X)
construieste o lista L cu n elemente <wj, pj>
i := 1
suma-ponderi = 0
suma-profit = 0
do i <= n ->
j = xi
elimina elementul cu numarul de ordine j din L
if suma-ponderi + wj <= C ->
suma-ponderi = suma-ponderi + wj
suma-profit = suma-profit + pj
fi
i = i+1
od
end
Abordari
– paralelizarea operatorilor genetici
– distribuirea populatiei.
Paralelizarea operatorilor genetici
– partitionare functionala: paralelizarea buclei care produce noua
generatie
– se mentine o singura populatie
– operatorii genetici sunt aplicati in paralel
• functia de potrivire si mutatia aplicate in paralel indivizilor
• crossover la doi indivizi
– mai adaptat pentru memorie partajata
Abordarea populatie distribuita
– Corespunde descompunerii domeniului
– prelucrari facute in paralel pe diferite sub-populatii
– exploreaza mai bine spatiul solutiilor
– PGAs mentin sub-populatii separate care evolueaza independent
PGAs de granularitate fina
– Asigneaza un individ fiecarui task
– Fiecare task foloseste indivizi din vecinatatea sa
– Ajuta migrarea indivizilor
Intrebari:
– care este tolopogia de inter-conectare ?
– care este dimensiunea vecinatatii ?
– care este schema de inlocuire pentru includerea migratorilor in sub-
populatia tinta ?
PGAs de granularitate mare
– Fiecare sub-populatie contine un numar mare de indivizi
– AG se executa independent pe fiecare sub-populatie si produce o solutie a
problemei
– Rezultatul final este obtinut prin selectia celei mai bune solutii
– Indivizii migreaza periodic de la o sub-populatie la alta
Synchronous Island PGAs
– migrarea are loc dupa un anumit numar de generatii
Asynchronous Island PGAs
– migrarea intre doua sub-populatii nu este corelata cu restul migrarilor
– mai aproape de migrarea din natura
– mai potrivita cu algoritmi distribuiti
Intrebari
– care este topologia proceselor?
– este reteaua omogena sau nu?
– care este rata de migrare?
– cati migratori sunt inter-schimbati?
– cum sunt selectati migratorii?
– cum sunt combinati cu populatia tinta?
Asynchronous Island PGAs
Modelul "replicated workers"
Programe evolutive
Se bazează pe algoritmii genetici, dar folosesc:
– un set mai bogat de structuri de date
– un set extins de operatori genetici
Problemã modificatã
Program evolutiv
Un exemplu - Problema transportului
Enuntul problemei
– se cere un plan de transport cu cost minim
• un singur gen de marfa,
• de la n surse la k destinatari
• o destinatie poate primi marfa de la mai multe surse
• costul unei rute este proportional cu cantitatea
transportata (problema este lineara)
Notatii
sour[i] cantitatea furnizata de sursa i
dest[j] cantitatea ceruta de destinatia j
cost[i,j] costul unitar de transport intre i si j
x[i,j] cantitatea transportata intre i si j
Un exemplu - Problema transportului (2)
Se cere sa se minimizeze
Σ Σ cost[i,j]*x[i,j] pentru i=1,n; j=1,k
n surse
k destinatari
cu constrangerile
Σj=1,k x[i,j] <= sour[i]
Σi=1,n x[i,j] >= dest[j]
x[i][j] >= 0 pentru i=1,n; j=1,k
Exemplu
n = 3; sour = [15,25,5] 10 0 20 11
k = 4; dest = [5,15,15,10]
12 7 9 20
Matricea de cost
0 14 16 18
↓
sour \ dest 5 15 15 10
15 0 5 0 10
25 0 10 15 0
5 5 0 0 0
AG clasic
Fiecare solutie reprezentata ca un sir agregat de biti
v1,v2,…,vp
unde p = n*k
si vi sir binar de forma vi = wi0,…,wis
vi reprezinta un element x[j,m] asociat cu linia j coloana m ale
matricei X, adica
j = inf [(i-1)/k+1]
m = (i-1) mod k +1
s calculat pentru a putea reprezenta intregul maxim din
problema = 2s+1-1.
Obs.
– nu exista o definitie simpla si naturala a operatorilor genetici
– producerea unor solutii care sa satisfaca constrangerile necesita
corectii complicate
Reprezentare vectoriala
O solutie a problemei
– reprezentata ca un sir de p=n*k numere intregi
– cu valori in domeniul 1..p
– interpretata ca o strategie de a incorpora elemente în soluţie
15 0 0 0 0
25 (-15=10) 0 0 15 0
5 0 0 0 0
Procedura de decodificare a unei solutii
procedure initialization;
begin
seteaza ca nevizitate elem. din lista cu valori de la 1 la p;
do not toate nodurile vizitate ->
select urmatorul numar q si marcheaza vizitat;
{calc nr linie i si coloana j corespunzatoare}
i = (q-1)/k+1; j=(q-1) mod k +1;
val = min(sour[i], dest[j]);
v[i][j] = val;
sour[i] = sour[i] – val;
dest[j] = dest[j] – val
od
Solutia optima pentru problema de transport
{7,9,4,2,6, *,*,*,*,*,*,*}.
sour \ dest 5 15 15 10
15 0 5 0 10
25 0 10 15 0
5 5 0 0 0
Observatii
• orice permutare de numere cu valori intre 1 si p produce o
solutie ce satisface constrangerile;
• operatorii genetici sunt simplu de realizat.
– Mutatia se face prin interschimbarea a doua numere din sir.
– Incrucisare
Ex. incrucisare:
Pentru perechea {1,2,3,4,5,6,7,8,9,10,11,12}
{7,3,1,11,4,12,5,2,10,9,6,8}
– se alege un tipar din primul parinte
– restul elementelor se pun in ordinea din al doilea parinte
rezulta {3,1,11, 4,5,6,7,12,2,10,9,8}
Reprezentarea matriceala
O solutie reprezentata in forma 0 0 5 0 3
originala a problemei: 0 4 0 0 0
X = (x[i][j]) pentru i=1,k; j=1,n 0 0 5 7 0
3 1 0 0 2
Mutatia
- selecteaza o submatrice
4 0 0
- inlocuieste cu alta submatrice
1 0 2
avand aceleasi sume pe linii si
pe coloane
2 0 2
3 0 0
0 0 5 0 3
include in matricea originara
0 2 0 0 2
0 0 5 7 0
3 3 0 0 0
Incrucisarea 1 0 0 7 0 0 0 5 0 3
X1 si X2 0 4 0 0 0 0 4 0 0 0
2 1 4 0 5 0 0 5 7 0
0 0 6 0 0 3 1 0 0 2
0 0 2 3 1 1 0 1 1 1
DIV (media lor)
0 4 0 0 0 0 0 0 0 0
si REM (restul)
1 0 4 3 2 0 1 1 1 1
1 0 3 0 1 1 1 0 0 0
se imparte REM in 0 0 1 0 1 1 0 0 1 0
REM1 si REM2 0 0 0 0 0 0 0 0 0 0
(suma lor esteREM) 0 1 0 1 0 0 0 1 0 1
1 0 0 0 0 0 1 0 0 0
V3 = DIV+REM1 0 0 3 3 2 1 0 2 4 1
si V4 = DIV+REM2 0 4 0 0 0 0 4 0 0 0
1 1 4 4 2 1 0 5 3 3
2 0 3 0 1 1 1 3 0 1
Dilema prizonierului
Doi suspecti sunt arestati de politie. Politia nu are suficiente probe
pentru condamnare si separa prizonierii, vizitandu-i si facandu-
le aceeasi propunere.
• Daca unul depune marturie pentru pedepsirea celuilalt
(tradeaza) si celalalt tace, tradatorul este eliberat si cel care
tace ia 10 ani de puscarie.
• Daca amandoi tac, ambii sunt condamnati la 2 ani pentru o
vina minora.
• Daca fiecare il tradeaza pe celalalt, fiecare primeste o
sentinta de 5 ani.
Fiecare prizonier trebuie sa aleaga intre tradare si tacere
Fiecare este asigurat ca celalalt nu va sti despre tradarea lui
inaintea terminarii investigatiei.
Cum trebuie sa actioneze prizonierii?
Dilema prizonierului
Jucatorul 1 Jucatorul 2 P1 P2 Comentariu