apd - prezentari curs - 8

23
Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare 24/11/2009 Algoritmi Paraleli si Distribuiti – Curs 8 1 Ceasuri logice. Ordonarea evenimentelor.

Upload: ssh-das

Post on 23-Jun-2015

233 views

Category:

Documents


1 download

TRANSCRIPT

Page 1: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

24/11/2009 Algoritmi Paraleli si Distribuiti – Curs 8 1

Ceasuri logice. Ordonarea evenimentelor.

Page 2: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

24/11/2009 Algoritmi Paraleli si Distribuiti – Curs 8 2

Ceasuri fizice

• Timpul este ne-ambiguu in sisteme ne-distribuite: exista un singur ceas, si (de obicei) kernelul face apeluri pentru a-i accesa valoarea

• Folosit implicit in multe aplicatii (ex: make –pentru a determina fisierele care trebuierecompilate)

• Sistemele distribuite introduc ambiguitateain legatura cu timpul

Page 3: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 3

Ceasuri fizice (2)

• Computerele folosesc un cristal de quartz care oscileaza la o valoarea bine definita sigenereaza intreruperi (clock ticks) la intervale regulate

• Fiecare clock tick incrementeaza o valoaredin memorie – kernelul converteste aceastavaloarea intr-un format standardizat (ex: nr de milisecunde de la epoch Thu Jan 1 12:00:00 GMT 1970)

• Diferenta in timp dintre calculatoare se numeste clock skew

24/11/2009

Page 4: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 4

Ceasuri fizice (3)

• Clock skew dintre cele 2 computere confuzeazamake-ul:

24/11/2009

Page 5: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 5

Sincronizarea ceasurilor fizice

• 2 tipuri:– doar intre 2 calculatoare– sincronizare cu un standard (ex: UTC)

• Este imposibil de eliminat complet clock skew si de asemenea imposibil de a asigura acuratetea perfecta a unui ceas

24/11/2009

Page 6: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 6

Sincronizarea ceasurilor fizice (2)

• Flaviu Cristian – adaptive internal clock synchronization:– time server, cu care se sincronizeaza celelate ceasuri– probleme:

• timpul nu trebuie sa curga in sens invers• mesajul ajunge de la server la client intr-un anumit timp

24/11/2009

Page 7: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 7

Sincronizarea ceasurilor fizice (3)

• Berkley:– folosit in Berkley UNIX– opus lui Cristian: un server de timp trimite mesaje periodic

clientilor pentru a afla timpul lor, calculeaza o medie si anuntaclientii cum sa-si actualizeze ceasurile

– scopul nu e de a se sincroniza cu time serverul ci de a pune toatemasinile de acord asupra timpului (chiar daca este gresit)

24/11/2009

Page 8: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 8

Sincronizarea ceasurilor fizice (4)

• Descentralizat: Network Time Protocol

– Organizare ierarhica a serverelor de timp:• Stratul 1: ceasuri de referinta (US Naval

Observatory, Global Positioning System, Atomic Clocks)

• Stratul 2: routere, servere importante, etc.

– Algoritmul si protocolul NTP extrem de complexe (RFC 1305 NTPv3 – 112 pagini , NTPv4 si mai complex)

– Sincronizare precisa a ceasurilor: 1-50ms24/11/2009

Page 9: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 9

Intr-un algoritm distribuit, fiecare proces este caracterizat de:• o multime de stari• actiuni care schimba starea

Eveniment = producerea unei actiuniEvenimentele pot fi ordonate conform timpului fizic de producere. Dificil pentru evenimente din procese diferite.

Solutie mai simpla: ordinea relativa a evenimentelor

Definita de relatia petrecut inainte (->):• dacă a şi b sunt evenimente din acelaşi proces şi a îl precede in timp pe b, atunci a->b;• când a reprezintă transmiterea unui mesaj de către un proces, iar brecepţia aceluiaşi mesaj de către un altul, atunci a->b;• dacă a->b şi b->c atunci a->c.

Ceasuri logice si ordonarea evenimentelor

24/11/2009

Page 10: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

• Mecanism de sincronizare bazat pe “timp relativ”.• “timpul relativ” poate sa nu fie echivalent cu

“timpul real”.• Exemplu: Unix make (Este important ca

output.c sa fie actualizat dupa generarea luioutput.o?)

• In aplicatiile distribuite ceea ce conteaza este ca procesele sa ajunga la un acord asupra ordinii de producere a evenimentelor.

• Astfel de “ceasuri” se numesc ceasuri logice.

Ceasuri logice si ordonarea evenimentelor

24/11/2009

Page 11: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Exemplu: De ce conteaza ordinea?

– Doua conturi replicate in New York(NY) si San Francisco(SF)– Doua actualizari in acelasi timp

• Soldul curent: $1,000• Actualizare1: Adauga $100 la SF; Actualizare2: Adauga

dobanda de 1% la NY• Whoops, stari inconsistente!

24/11/2009

Page 12: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 12

Ceas logic – intreg incrementat la producerea unui evenimentAlgoritmul lui Lamport foloseste relatia -> pentru a face ordonareapartiala a evenimentelor:

• pentru fiecare proces o variabila cl initial 0 • pentru fiecare mesaj un camp tt

Reguli:• la producere eveniment intern:

valoarea sa este asociata evenimentului ca amprenta de timp

cl este incrementat• la transmiterea unui mesaj:

actualizează tt := clincrementează cl cu 1

• la primire mesaj cu amprenta de timp tt:actualizeaza cl:=maxim(cl,tt+1)incrementeaza cl cu 1

Ordonare partiala: a->b => cl(a) < cl(b)

Ceasuri logice si ordonarea evenimentelor (2)

24/11/2009

Page 13: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 13

Trei procese şi evenimentele corespunzătoare

Valorile de timp logic asociate evenimentelor

Exemplu

24/11/2009

Page 14: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 14

Aplicatie: semafoare distribuite• Foloseste primitive P si V

– când un proces execută o operaţie P sau V el difuzeazămesaje m(id,tag,ts) celorlalte procese:

broadcast ch(m) trimite m pe fiecare din ch[1:n]– analizeaza răspunsurile pentru a determina continuarea

execuţiei• Fiecare proces:

– Stocheaza o coada de mesaje mq si un ceas logic cl– La receptia unui mesaj P sau V il stocheaza in mq,

sortata crescator dupa ts – Transmite prin broadcast ACK (folosit pentru a actualiza

prefixele stabile din mq)– Stocheaza o variabila s (semaforul):

• V – s este incrementat si mesajul sters• P – daca s>0, s decrementat si mesajul sters

– mesajele P sunt procesate in ordinea in care apar in prefixul stabildeci fiecare proces ia aceeasi decizie despre ordinea terminariioperatiilor P

24/11/2009

Page 15: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 15

Aplicatie: semafoare distribuite (2)• Implementarea semafoarelor:

– procesele Utiliz(i) iniţiază operaţiile P sau V– procesele Ajutor(i) implementează operaţiile P si V

+----------------++-------->¦ Utiliz[i] ¦--->-+¦ +----------------+ ¦+-<- Utiliz[j]¦ ¦¦ Ajutor[j]

+---+ +---++---+ start[i] +---+ opsem[i]+---+ +---+

¦ +----------------+ ¦+----<----¦ Ajutor[i] ¦<----+

+----------------+

24/11/2009

Page 16: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 16

type fel = enum(V, P, ack);chan opsem[1:n](transm: int, op: fel, timp: int);chan start[1:n](timp: int);

Utiliz(i: 1..n)::var cl: int :=0; {ceas logic}var ts: int;...broadcast opsem(i, V, cl); {operatia V}cl := cl+1;...broadcast opsem(i, P, cl); {operatia P}cl := cl+1; receive start[i](ts);cl := max(cl, ts+1); cl := cl+1;...

Aplicatie: semafoare distribuite (3)

24/11/2009

Page 17: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Ajutor(i: 1..n)::var qm: queue of (transm: int, k: fel, ts: int);var cl: int := 0;var sem: int := valoare_initiala;var transm: int, k: fel, ts: int;do true ->

receive opsem[i](transm, k, ts);cl := max(cl, ts); cl := cl+1;if k=P or k=V ->

insereaza (transm,k,ts) in locul corespunzator in qm;broadcast opsem(i, ack, cl); cl := cl+1

[] k=ack ->inregistreaza transmiterea unui ack;fa mesajele V complet confirmate ->

scoate mesaj din qm;sem := sem+1;

af;fa mesajele P complet confirmate st sem>0 ->

scoate mesaj (transm, k, ts) din qm;sem := sem-1;if tansm=i -> send start[i](cl); cl := cl+1 fi

affi

odAlgoritmi Paraleli si Distribuiti – Curs 8 17

Aplicatie: semafoare distribuite (4)

24/11/2009

Page 18: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 18

Ceasuri logice vectorialeCu soluţia Lamport:

e precede f amprenta_logică (e) < amprenta_logică (f)Dar

amprenta_logică (e) < amprenta_logică (f) ! e precede fEx: se poate spune ca e precede c ?Solutia: ceasuri logice vectoriale.

24/11/2009

Page 19: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 19

Fiecare Pi are asociat un tablou V(i)[1..n] în care:V(i)[i] este numărul de evenimente produse în procesul Pi;V(i)[j] este numărul de evenimente despre care Pi ştie (a aflat) că au avut

loc la Pj.

Procesul Pi actualizează V(i) la fiecare eveniment din Pi e.g., pentru procesorul 3, (1,2,1,3) (1,2,2,3)

Când Pi transmite mesajul m (eveniment send m):Pi incrementează V(i)[i]Pi adaugă V(i) la m ca vector de amprente de timp curent vt(m)

Când Pj primeşte m si vt(m) (eveniment receive m):Pj ajustează: V(j) [k] = max{V(j)[k],vt(m)[k]} pentru fiecare k

e.g., P2 primeste un mesaj cu timpul (3,2,4) iar timpul curent al lui P2 este (3,4,3), atunci P2 ajusteaza timpul la (3,4,4)

Pj incrementează V(j)[j] cu 1

Ceasuri logice vectoriale (2)

24/11/2009

Page 20: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 20

Aplicarea regulilor ceasurilor logice vectorialeReguli:VT1 = VT2 VT1[i] = VT2[i], pentru i = 1, ..., N VT1 <= VT2 VT1[i] <= VT2[i], pentru i = 1, ..., N VT1 < VT2 VT1 <= VT2 şi VT1 <> VT2 (de exemplu (1,2,2)<(1,3,2))

Fie vt(a) şi vt(b) vectorii de amprente de timp asociaţi ev a şi b. Atunci:vt(a) < vt(b) => ev a precede cauzal bvt(a) !< vt(b) and vt(a) !> vt(b) and vt(a) != vt(b) ev a şi b sunt concurente

Ceasuri logice vectoriale (3)

24/11/2009

Page 21: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 21

Procesele unei colecţii P comunică între ele doar prin mesaje cu difuzare

Se cere ca mesajele să respecte dependenţa cauzală

m -> m' livrarep (m) -> livrarep (m')Protocolul (vectori de timp):

– fiecare proces Pi (i = 1..n) are asociat un vector V(i)[1..n], cu toate elementele iniţial 0

– V(i)[i] este nr ev. transmitere de mesaje produse de Pi;– V(i)[j] este nr ev. transmitere de mesaje despre care Pi ştie (a aflat) că au avut loc la Pj.

– Procesul Pi actualizează V(i) la fiecare eveniment de trimitere sau recepţie de mesaj din Pi.

Aplicatie: Ordonare Cauzală Multicast

24/11/2009

Page 22: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Când Ps transmite mesajul m:Ps incrementează V(s)[s]Ps adaugă V(s) la m ca vector de amprente de timp curent vt(m)

• Obs. Pentru ordonare cauzala, incrementarea lui V(s)[s] se face doar la transmitere de mesaje de catre s

vt(m) spune receptorului câte evenimente (din alte procese) au precedat mşi ar putea influenţa cauzal pe m.

Când Pd primeşte mesajul m împreună cu vt(m), mesajul este păstrat într-o coadă de întârziere şi este livrat doar dacă:vt(m) [s] = V(d)[s] + 1 (aceste este urmatorul timestamp pe care d il

asteapta de la s)vt(m) [k] <= V(d)[k] pentru k <> s (d a vazut toate mesajele ce au fost

vazute de s la momentul cand a trimis mesajul m)

Când mesajul este livrat, V(d) este actualizat conform regulilor vectorilor de timp:V(d) [k] = max{V(d)[k], vt(m)[k]} pentru fiecare k = 1,n.

Algoritmi Paraleli si Distribuiti – Curs 8 22

Aplicatie: Ordonare Cauzală Multicast (2)

24/11/2009

Page 23: APD - Prezentari Curs - 8

Universitatea Politehnica Bucuresti - Facultatea de Automatica si Calculatoare

Algoritmi Paraleli si Distribuiti – Curs 8 23

Alte acţiuni ale protocolului la livrarea mesajelor:dacă vt(m)[k] > V(d)[k] pentru un oarecare k atunci se întârzie m

Ps a primit mesaje de care mesajul curent poate fi cauzal dependent, dar pe care Pd încă nu le-a primit;

dacă vt(m)[s] > V(d)[s]+1 atunci se întârzie mmai sunt mesaje de la Ps pe care Pd nu le-a primit(asigura ordinea FIFO pentru canale nonFIFO)

dacă vt(m)[s] < V(d)[s] atunci rejectează mm este un duplicat al unui mesaj primit anterior.

Aplicatie: Ordonare Cauzală Multicast (3)

24/11/2009