Algoritmos Geneticos

1. AlgoritmosGeneticos Material adaptado de http://www.dca.ufrn.br/~estefane/metaheuristicas/

2. Problemas de Permutação Emmuitosproblemas de otimização a meta é encontrar um ordenamentoeficiente de açõesoutarefas. Exemplos: Problema do CaixeiroViajante Problemas de Agendamento Coloração de Grafos

3. Problema do Caixeiro Viajante Dado N cidades, achar a caminho mais curto passando por todas as cidades uma única vez. PCV é NP-dificil

4. Representação do PCV As cidades são representadas diretamente no cromossomo. Cromossomos B B G G A C D F E A C D F E

5. Operadores de Permutação Order-Based Mutation Position-Based Mutation Scramble Mutation OBX (Order-Based Crossover) PBX (Position-Based Crossover) PMX (Partially Matched Crossover) CX (Cycle Crossover) OX (Order Crossover)

6. Mutação de Permutação Position-Based Mutation : retira o elemento da posição i e insere na posição j C B F F A D E B G A C E D G Order-Based Mutation : troca o elemento da posição i com o elemento na posição j B E F F A D B E A C D G C G

7. Mutação de Permutação Scramble Mutation - Uma sublista, aleatoriamente selecionada, é embalharada. B B A E C E D F G A C D G F

8. Order-Based Crossover (OBX) Elementos são selecionadas aleatoriamente. É imposta uma ordem nos elementos selecionadas do pai1 igual a ordem dos respectivos elementos em pai2. pai1 B A G D E F C pai2 E G B A D C F * * * filho1 D A C G B F E filho2 A D E G C F B

9. Position-Based Crossover (PBX) Elementos são selecionadas aleatoriamente e a posição dos elementos selecionadas no pai2 é imposto ao pai1. pai1 B A F G D C E pai2 E G A D B C F * * * filho1 E B A D C F G filho2 E D A F B C G

10. Partially Matched Crossover (PMX) Realiza trocas no sentido de pai1 para pai2 e depois no sentido inverso, isto é, de pai2 para pai1, para evitar cromossomos inválidos. A E D pai1 B F G C E B F A G C D pai2 filho1 D A E B F G C filho2 F A B C D G E

11. O Problema da Mochila zero-um (do inglês, 0-1 knapsack problem) Maximizar Sujeita a Uma solução s é um vetor de uns e zeros. Se o objeto j está mochila então sj = 1, caso contrário sj = 0. Uma solução s é um vetor de uns e zeros. Se o objeto j está mochila então sj = 1, caso contrário sj = 0.

12. Algoritmo Genético Cromossomo A solução s (um vetor de uns e zeros) é naturalmente representada por um cromossomo binário. Operadores binários padrão Crossover de 1-ponto (ou 2-pontos, etc) Mutação (invertendo os bits)

13. Uma Instância do Problema da Mochila b = 25 Capacidade da mochila: 11001110 (cromossomo válido) peso = 5+4+4+4+6 = 23 <25 função objetivo = 3+3+2+3+5 = 16 11111001 (inválido) peso = 36 > 25 Função objetivo = ?

14. Como Lidar com Indivíduos Inválidos? Solução 1 – reparar o indivíduo Solução 2 – penalizar a função objetivo

15. Reparando o Indivíduo Indivíduo inválido 1 1 1 1 1 0 0 1 peso = 36 > 25 Função objetivo = 16 Indivíduo “reparado” 1 1 1 1 0 0 0 0 Peso = 24 (ok!) Função objetivo = 12 1 1 1 1 1 0 0 1 desprezar visitar cada bit da esquerda para a direita e desprezar os bits que invalidam a solução.

16. Reparando o Indivíduo Por qual ordem dos bits devem ser visitados? Da esquerda para direita? No sentido oposto? Aleatoriamente? Algoritmo Guloso Visitar primeiro os bits com a maior razão benefício/peso; Pode produzir melhores resultados.

17. Penalizando a Função Objetivo Um exemplo de penalidade é: Onde a é um coeficiente de penalidade igual a: Objetos que ultrapassam a capacidade da mochila são penalizados.

18. Penalizando a Função Objetivo Exemplo 1 1 1 1 1 0 0 1 peso = 36 > 25 Função original = 16 Função com penalidade = 16 – 14 x (36-25) = -138

19. Discussão

20. Principais Tópicos População Inicial Funções Objetivo de Alto Custo Critérios de Parada Convergência Prematura Diversidade Tipos de Substituição Problemas na Aptidão Ranking Seleção por Torneio Amostragem Estocástica Uniforme

21. População Inicial (1/3) Gerada Aleatoriatoriamente. Gerada uniformente em uma grade. Gerada com tendenciosidade para regiões promissoras do espaço de busca

22. População Inicial (2/3) Para garantir que toda posição da cadeia tem 0 e 1 na população: Gera a primeira metade da população aleatoriamente. Inverte todos os bits da primeira metade: tem-se a segunda metade. 1a. metade 2a. metade 1011010 0100101 0111011 100010 0001101 1110010 1100110 0011001

23. População Inicial (3/3) Seeding: insere a solução obtida por outro método de otimização na população inicial (garante que AG não fará pior do que o outro método) Iniciar com uma larga população inicial e depois reduzir o tamanho.

24. Convergência Prematura (1/2) O AG converge para um mínimo/máximo local.

25. Convergência Prematura (2/2) Causas: Excessivo números de filhos de um mesmo indivíduo (o superindivíduo) Perda de diversidade. Deriva Genética (Genetic Drift) Desaparecimento de genes na população devido puramente ao acaso. Ocorre principalmente em pequenas populações. Alta pressão de seleção.

26. Diversidade (1/2) Combatendo a perda de diversidade Aumentar a taxa de mutação. Evitar cromossomos duplicatas na população. Diminuir a pressão da seleção.

27. Diversidade (2/2) Combatendo a perda de diversidade Controlar o número de filhos do superdíviduo (indivíduo com alta aptidão, mas não com aptidão ótima) usando: Ranking. Escalonamento. Seleção por torneio.

28. Tipos de Substituição Substituição Geracional Substituição Geracional com Elitismo Substituição de Regime Permanente (do inglês steady state)

29. Substituição Geracional Seja N o tamanho da população: Os N pais são substituídos pelos N filhos em cada geração. Os N pais são substituídos por N individuos do conjunto união de pais e filhos. Comentário: o segundo caso aumenta a pressão de seleção.

30. Substituição Geracional com Elitismo Os k < N melhores pais nunca são substituídos. Tipicamente k = 1 Aumentando k aumenta a pressão de seleção (risco de convergência prematura).

31. Substituição de Regime Permanente (1/2) Em cada “geração” apenas 2 (ou 1) filhos são gerados e substituem: Os 2 piores indivíduos da população. Os pais. Os 2 indivíduos mais velhos (i.e., que estão a mais tempo da população), pois já transmitiram os seus genes. Taxa de crossover é geralmente alta (~1).

32. Substituição de Regime Permanente (2/2) Alternativamente, k < N filhos são gerados e substituem os k piores indivíduos. Evitar inserir um filho na população quando já existe uma duplicata dele na população.

33. Problemas na Aptidão (1/3) Aptidão negativa não funciona com a roleta. Aptidão excessivamente alta Poucos individuos ocupando larga fatia da roleta Muitos individuos ocupando pequena fatia da roleta Causa convergência prematura Solução: controlar o número de filhos do superindivíduo. .

34. Problemas na Aptidão (2/3) Resolução insuficiente para diferenciar os melhores dos piores individuos. A seleção torna-se aleatória (Passeio ao Acaso). Convergência lenta

35. Problemas na Aptidão (3/3) Exemplo: Soluções Expandir o intervalo da aptidão (usando ranking, escalamento linear) Seleção por torneio

36. Ranking Linear (1/3) Onde i é o índice do cromossomo na população em ordem decrescente de valor da função objetivo. Ranking linear requer: 1 Max  2 Max + Min = 2 Valores bons para Max: de1.2 a 1.5

37. Ranking Linear (2/3)

38. Ranking Linear (3/3) Controlando a pressão da seleção por Ranking linear: maior pressão => mais intensificação; menos pressão => mais diversificação.

39. Ranking Exponencial q  [0, 1] e i é o índice do cromossomo na população em ordem decrescente de valor da função objetivo. Ranking exponencial permite maior pressão de seleção do que o ranking linear.

40. Escalonamento Linear Escalonamento linear onde g é o valor da função objetivo a e b são determinados tal que o número máximo de filhos do melhor indivíduo seja no máximo igual a C (onde tipicamente C = 2)

41. Seleção por Torneio Escolhe-se k (tipicamente 2) indivíduos aleatoriamente da população e o melhor é selecionado. Não é proporcional a aptidão, Não é necessário roda da roleta, escalamento da aptidão ou ranking.

42. Seleção por Torneio Os indivíduos são selecionados para os torneios com igual probabilidade. O torneio é vencido pelo indivíduo com maior aptidão

43. Seleção por Torneio Aumentando o tamanho k do torneio acarreta: Aumento da pressão de seleção. Risco de convergência prematura. Por isso, o torneio binário é o mais utilizado.

44. Seleção por Torneio Seleção por torneio com probabilidades (Reduz ainda mais a pressão de seleção) • O melhor indivíduo do torneio é selecionado com probabilidade p > 0,5 • O segundo melhor é selecionado com probabilidade p(1-p) • O terceiro é selecionado com probabilidade p(1-p)2 • e assim por diante...

45. Amostragem Estocástica Uniforme Evita a grande variância de filhos esperados do método da roleta(é tão perfeito quanto possivel) N ponteiros igualmente espaçados. e d a c Pais selecionados b a a b c d

46. Critérios de Parada Atingiu um dado número de gerações ou avaliações. Encontrou a solução (quando esta é conhecida). Perda de diversidade. Convergência: não ocorre melhora significativa na solução durante um dado número de gerações.

47. Funções Objetivo de Alto Custo (1/3) Em muitos problemas do mundo real o custo computacional do AG está concentrado na avalição do individuo. Exemplo: Simulação completa de um processo. Um treinamento de uma rede neural.

48. Funções Objetivo de Alto Custo (2/3) Dicas para reduzir o números de reavaliações do indivíduo: Evitar cromossomos iguais na população inicial. Verificar se o filho já existe nas populações passadas e na atual. Verificar se filho = pai (e.g. checar se crossover e mutação foi aplicado). Manter a população com cromossomos distintos.

49. Funções Objetivo de Alto Custo (3/3) Simplificar a função objetivo (pelo menos nas gerações iniciais) Usar um método de subida de encosta quando o AG já encontrou as regiões promissoras do espaço de busca (nas gerações finais).

50. Como os Algoritmos Genéticos Funcionam