1 Triangulatiestellingen voor lineaire transformaties

Transcriptie

1 Triangulatiestellingen voor lineaire transformaties Zoals bekend kan niet iedere lineaire transformatie L : V V van een vectorruimte (V, K) gediagonaliseerd worden. Als het lichaam K echter algebraïsch afgesloten is, dan is het daarentegen wel altijd mogelijk om L op bovendriehoeksvorm te brengen. Definitie. Een lichaam K heet algebraïsch afgesloten als ieder niet-constant polynoom p K[X met coëfficiënten in K een nulpunt heeft in K. Voorbeeld.2 (Hoofdstelling van de Algebra) Het lichaam C is algebraïsch afgesloten. Naast dit bekende voorbeeld van een algebraïsch afgesloten lichaam geven we nog een tweede voorbeeld, met als doel te laten zien dat de komende stellingen niet uitsluitend over C gaan. Definitie.3 (Algebraïsche en transcendente getallen) Een getal a C heet algebraïsch als a een nulpunt is van een polynoom p Z[X. We schrijven Q voor de verzameling van algebraïsche getallen. De getallen in C \ Q heten transcendent. Voorbeeld.4 De aftelbare deelverzameling Q C is een algebraïsch afgesloten lichaam. Het is de doorsnede van alle algebraïsch afgesloten lichamen die Q bevatten. In Stelling.5 en Stelling.6 geven we nu twee equivalente formuleringen van hetzelfde resultaat, dat we vervolgens in een aantal stappen, geïllustreerd met voorbeelden, gaan bewijzen. Stelling.5 (Triangulatiestelling van Jacobi) Zij (V, K) een vectorruimte over een algebraïsch afgesloten lichaam K. Voor iedere lineaire transformatie L : V V bestaat er een basis γ van V waarvoor de matrix L γ γ van L een bovendriehoeksmatrix is. Een equivalente formulering van Stelling.5 in termen van matrices is de volgende. Stelling.6 (Matrixtriangulatie) Laat A K n n met K algebraïsch afgesloten. bestaat er een X GL n (K) zodanig dat X AX = R een bovendriehoeksmatrix is. Dan Opmerking.7 Stelling.6 beweert dus dat iedere A K n n met K algebraïsch afgesloten gelijkvormig is met een bovendriehoeksmatrix R K n n.. Geschiedenis en motivatie: van Jacobi naar Schur Stelling.6 is vernoemd naar Carl Jacobi (804-85), die hem in 837 publiceerde. Carl Jacobi (804-85) en Issai Schur (875-94)

2 Issai Schur (875-94) liet zien dat er onder dezelfde voorwaarden zelfs altijd een orthonormale basis β van V bestaat zodanig dat de matrix L β β van de lineaire transformatie L bovendriehoeks is. Dit sterkere resultaat staat te boek als de Schurdecompositie. We bewijzen het in Sectie.6. Vervolgens illustreren we het belang van de Schurdecompositie. In Sectie.7 zien we hoe de Schurdecompositie kan worden ingezet om een kort bewijs te geven in de context van Google s PageRank. In Sectie.8 leiden we er de diverse spectraalstellingen mee af. We beginnen echter in Secties.2 en.3 met het bestuderen van twee eenvoudige gevallen van Stelling.6, te weten A K 2 2 en A K 3 3, en geven enkele voorbeelden. Daarna zal een inductieargument in Sectie.4 de stelling bewijzen voor A K n n voor alle n N..2 Triangulatie van 2 2 matrices A K 2 2 De volgende relatief eenvoudige observatie staat aan de basis van alle triangulatiestellingen. Lemma.8 Gegeven een matrix A K n n met K algebraïsch afgesloten. Laat λ K en 0 x K n met Ax = λx. Laat X GL n (K) zijn, met eerste kolom gelijk aan x. Dan is λ... X 0... AX =.... () 0... Oftewel, de eerste kolom van X AX is gelijk aan λe. Bewijs. Omdat Xe gelijk is aan de eerste kolom x van X, geldt Ax = λx AXe = λxe X AXe = λe. Omdat X AXe de eerste kolom is van de matrix X AX, bewijst dit de bewering. Opmerking.9 Als A K n n en K is algebraïsch afgesloten, dan heeft het karakteristieke polynoom p(a) K[X n van A tenminste één nulpunt in K en dus bestaan λ K en x K n, x 0 zodanig dat Ax = λx. Daarnaast kan {x} ook altijd uitgebreid worden tot een basis γ = {x, x 2,..., x n } van K n, en dus bestaat er een X GL n (K) met eerste kolom Xe = x. Dus voor alle A K n n is voldaan aan de (overige) voorwaarden van Lemma.8. Opmerking.0 Beschouw de reële vectorruimte (R 2, R). Het lichaam R is niet algebraïsch afgesloten: het niet-constante polynoom p(x) = + X 2 heeft immers geen nulpunt in R. De rotatie om de oorsprong van R 2 over 90 graden is een lineaire transformatie L : R 2 R 2 zonder reële eigenwaarden. Er bestaat daarom geen basis β van R 2 zodanig dat L β β een bovendriehoeksmatrix is. Lemma.8 geeft onmiddellijk het bewijs van Stelling.6 voor n = 2, en ook een constructieve methode om X GL 2 (K) te bepalen zodanig dat X AX = R bovendriehoeks is. Gevolg. Laat A K 2 2 en Ax = λx met λ K en 0 x K 2. Laat X GL 2 (K) een matrix zijn met eerste kolom gelijk aan x. Dan is [ X λ AX = (2) 0 en dit is dus een bovendriehoeksmatrix die gelijkvormig is met de matrix A. 2

3 Bewijs. De matrix X AX in () is nu 2 2 en dus triviaal bovendriehoeks. Voorbeeld.2 We beschouwen de matrix A C 2 2 met als enige eigenwaarde λ =, [ [ A =, ker(a I) = span{x} met x =. (3) Omdat A geen twee lineair onafhankelijke eigenvectoren heeft, is A niet diagonaliseerbaar. We gaan daarom A op bovendriehoeksvorm brengen. Kies hiertoe, als één van de vele mogelijke keuzes (zie ook Opmerking.3) voor X GL 2 (C) de matrix en vinden we X AX = X = [ [ [, dan is X = [ [ = [ 0 (4) = R. (5) En dus is R een bovendriehoeksmatrix gelijkvormig met A. Opmerking.3 De keuze van X in (4) is verre van uniek; de eerste kolom kan iedere eigenvector van A zijn, de tweede kolom iedere vector die geen veelvoud is van de eerste. Hier kozen we de tweede kolom zo, dat det(x) =. Hierdoor bevat de inverse X geen breuken. Verschillende keuzes resulteren doorgaans in verschillende bovendriehoeksvormen van A. Opmerking.4 De matrix X kan zelfs zo worden gekozen, dat de kolommen orthonormaal zijn, door de gevonden eigenvector op lengte één te schalen, en er een tweede kolom met lengte één loodrecht op de eerste naast te zetten. In Sectie.6 komen we hier uitgebreid op terug. Het volgende voorbeeld illustreert Stelling.5 ingeval n = 2. Voorbeeld.5 Beschouw de complexe vectorruimte (C[X, C) van polynomen van graad ten hoogste één in X met complexe coëfficiënten, met daarop de lineaire transformatie L : C[X C[X : p p + p(0)x. (6) Het polynoom p met voorschrift p (X) = X is een eigenvector van L bij eigenwaarde, immmers, L(p ) = p + 0 p = p. Samen met het constante polynoom p 2 (X) = geeft dit een basis β = {p, p 2 } van C[X. Het is eenvoudig om na te gaan dat L β β = [ 0, (7) dus de matrix van L ten opzichte van β is een bovendriehoeksmatrix. Opmerking.6 De algemene werkwijze bij een lineaire transformatie L van een tweedimensionale vectorruimte V is, om eerst de matrix L γ γ K 2 2 horend bij een willekeurige basis γ = {γ, γ 2 } van V te bepalen. Immers, als vervolgens x = (x, x 2 ) een eigenvector is van L γ γ in K 2, dan is u = x γ + x 2 γ 2 een eigenvector van L in V. Vul vervolgens {u} op willekeurige wijze aan tot een basis β = {u, v} van V, dan is L β β bovendriehoeks. 3

4 .3 Triangulatie van 3 3 matrices A K 3 3 We laten nu middels een voorbeeld zien hoe we een matrix A K 3 3 op bovendriehoeksvorm kunnen brengen, gebruik makend van het feit dat we dit voor 2 2 matrices al kunnen. Eerst een nuttig lemma over het rekenen met matrices die in blokvorm zijn gepartitioneerd. Lemma.7 (Blokvermenigvuldiging) Laat X, Y K n n en laat k, l N met k+l = n. Partitioneer [ [ A B E F X = en Y =, (8) C D G H waarbij A, E K k k en D, H K l l. Dan geldt [ AE + BG AF + BH XY = CE + DG CF + DH. (9) Bewijs. Volgt door geduldig uitschrijven. De blokvermenigvuldiging in (9) is dus volstrekt analoog aan die van twee 2 2 matrices. Gevolg.8 Veronderstel dat X K n n gepartitioneerd wordt als [ A B X =, (0) 0 D waarbij A K k k en D K l l met k, l N, k + l = n. Laat H GL l (K), dan geldt [ [ [ I 0 I 0 A BH X = 0 H 0 H 0 H, () DH waarbij I K k k de identiteitsmatrix is. De blokvermenigvuldiging in Gevolg.8 zullen we gebruiken in het volgende voorbeeld. Voorbeeld.9 De volgende matrix A heeft als enige eigenwaarde λ =, 3 A = en ker(a I) = span{x} met x = (2) Er zijn dus geen drie lineair onafhankelijke eigenvectoren, en dus is A niet diagonaliseerbaar. We laten zien hoe we A op bovendriehoeksvorm kunnen brengen. Hiertoe construeren we eerst een eenvoudig inverteerbare matrix X GL 3 (K) waarvoor Xe = x, bijvoorbeeld, X = 0 0, waarvoor X = 0 0, (3) en vinden we in overeenstemming met Lemma.8 dat 3 X AX = 0 2 = B (4)

5 een matrix is met als eerste kolom λe = e. Beschouw vervolgens de 2 2 matrix [ [ 2 C = met eigenvector. (5) 2 3 Deze 2 2 matrix kan, net als in Voorbeeld.2, op bovendriehoeksvorm worden gebracht, bijvoorbeeld middels de matrix Y GL 2 (C) [ Y CY = 0 [ [ 0 En dus, met behulp van Gevolg.8 vinden we dat [ [ B = Y 0 Y 0 0 Combineren we (4) en (7) dan zien we dat we met Z = X [ 0 0 Y = = [ 2 0. (6) = R. (7) = 0 (8) een matrix Z GL 3 (C) hebben gecontrueerd waarvoor Z AZ = R bovendriehoeks is. Opmerking.20 Ondanks dat in (3) iedere inverteerbare matrix X met een niet-triviaal veelvoud van x als eerste kolom volstaat, is het plezierig als X zonder al te veel rekenwerk geïnverteerd kan worden. Merk hiertoe op dat X altijd van de vorm a 0 b 0 of 0 0 a 0 of , (a, b K) (9) kan worden gekozen, en dat de inverses hiervan vrijwel onmiddellijk op te schijven zijn. Opmerking.2 Ook de 2 2 matrix Y in (6) is op soortgelijke wijze gekozen om zijn eenvoudige inverse: het is altijd mogelijk om voor Y een marix van de vorm [ [ 0 0 Y = of Y = (20) a 0 te kiezen, en ook hiervan zijn de inverse direct op te schrijven. Opmerking.22 Ook in dit voorbeeld kan zowel de matrix X als de matrix Y zo worden gekozen, dat de kolommen orthonormaal zijn. De matrix X zal echter doorgaans niet meer van de vorm (9) zijn, noch zal Y van de vorm (20) zijn. Dit resulteert dan in een matrix Z met orthonormale kolommen zodanig dat Z AZ bovendriehoeks is. Zie weer Sectie.6. Het zal nu duidelijk zijn hoe een matrix A K n n op bovendriehoeksvorm kan worden gebracht, ervanuitgaande dat we weten hoe dat moet voor een matrix B K (n ) (n ). 5

6 .4 Bewijs van de triangulatiestelling van Jacobi We bewijzen nu Stelling.6 met behulp van volledige inductie. We veronderstellen dat K een algebraïsch afgesloten lichaam is. Inductiebasis: In Gevolg. in Sectie.2 zagen we reeds dat Stelling.6 geldt voor n = 2. Inductiehypothese: Voor iedere matrix B K (n ) (n ) bestaat er een Y GL n (K) zodanig dat Y BY = T een bovendriehoeksmatrix is. Inductiestap: Laat A K n n. Dan bestaat er volgens Lemma.8 een matrix X GL n (K) zodanig dat [ X λ b AX =. (2) 0 B Hierbij is b K (n ) en B K (n ) (n ) en is λ K een eigenwaarde van A. Volgens de inductiehypothese bestaat er een Y GL n (K) zodanig, dat Y BY = T bovendriehoeks is. Met behulp van Gevolg.8 geldt nu dat [ 0 0 Y X AX [ 0 0 Y = [ 0 0 Y [ λ b 0 B [ 0 0 Y = [ λ by 0 T = R, en omdat T bovendriehoeks is, is R dat ook. Merk tot slot op dat de matrix [ 0 Z = X GL 0 Y n (K), (22) als product van twee inverteerbare matrices. We concluderen dat Z AZ = R bovendriehoeks is. Dit bewijst Stelling.6. Opmerking.23 De triangulatieconstructie van Jacobi kan al worden ingezet zodra één eigenwaarde van A bekend is. Daarna moet steeds een eigenwaarde van een kleinere matrix gevonden worden om het proces te kunnen continueren. Mocht A diagonaliseerbaar zijn, dan leidt dit proces in het algemeen echter niet tot een diagonalisatie van A. Voorbeeld.24 Gegeven de matrix A = 2 2 met Ax = x voor x = 2 4. (23) Een eenvoudig inverteerbare matrix X GL 3 (C) met x als eerste kolom is X = 0 met X = 0. (24) 0 0 We vinden nu dat X AX = = R, (25) en R is bij toeval al bovendriehoeks. De eigenwaarden van A staan op de diagonaal van R. Indien gewenst kan A nu gediagonaliseerd worden door een basis van eigenvectoren te bepalen. 6

7 .5 Invariante deelruimtes en complete vlaggen Om de meetkundige betekenis van de triangulatiestelling van Jacobi te duiden, introduceren we twee nieuwe meetkundige begrippen. Definitie.25 (Invariante deelruimte) Zij L : V V een lineaire transformatie van een vectorruimte (V, K). Een deelruimte U van V heet invariant onder L, of, indien de context duidelijk is kortweg invariant, als geldt dat L(u) U voor alle u U. Om aan te geven dat L(u) U voor alle u U zullen we ook de notatie L(U) U gebruiken. Voorbeeld.26 Zij u een eigenvector van een lineaire transformatie L : V V van een vectorruimte (V, K). Dan is U = span{u} een invariante deelruimte onder L. Voorbeeld.27 Iedere deelruimte U V van een vectorruimte (V, K) is invariant onder zowel de identieke afbeelding id : V V : v v, als de nulafbeelding 0 : V V : v 0. Definitie.28 (Vlag) Zij V een vectorruimte van dimensie n. Een rij geneste deelruimtes U U 2 U k V met dim(u ) < dim(u 2 ) < < dim(u k ) (26) met strict stijgende dimensies heet een vlag, en een complete vlag indien k = n. Definitie.29 (Geïnduceerde complete vlag) Zij γ = {c,..., c n } een basis van een vectorruimte (V, K). Laat voor iedere k {,..., n}, U k = span{c,..., c k }. (27) Dan heet U U 2 U n = V de door γ geïnduceerde complete vlag. Voorbeeld.30 De standaardbasis {e,..., e n } induceert E E 2 E n = K n met E k = span{e,..., e k }. Deze complete vlag heet de standaardvlag in K n. Het volgende lemma combineert de concepten van complete vlag en invariante deelruimte. Lemma.3 Laat R K n n. De standaardvlag bestaat uit invariante deelruimtes onder de lineaire transformatie L : K n K n : x Rx als en alleen als R bovendriehoeks is. Bewijs. Laat k {,..., n}. Duidelijk is dat Rx E k voor alle x E k als R bovendriehoeks is, en dus is E k invariant onder L. Als R niet bovendriehoeks is, is e i Re j 0 voor zekere n i > j. Maar dat betekent dat Re j E j, en dus is E j niet invariant. We herformuleren nu de triangulatiestelling van Jacobi in deze nieuwe terminologie. Stelling.32 Zij (V, K) een vectorruimte met K algebraisch afgesloten. Voor iedere lineaire transformatie L : V V bestaat er een complete vlag van invariante deelruimtes onder L. 7

8 Bewijs. Laat op grond van Stelling.6 γ = {c,..., c n } een basis van V zijn waarvoor L γ γ een bovendriehoeksmatrix is. We gaan aantonen dat de door γ geïnduceerde complete vlag U U 2... U n U n = V bestaat uit invariante deelruimtes U k = span{c,..., c k }. Merk hiertoe op dat L γ γ de matrix is waarvoor geldt dat co γ (L(v)) = L γ γco γ (v) (28) voor alle v V, waarbij co γ : V K n de coördinaatafbeelding is. Laat nu k {,..., n} gegeven zijn en kies u U k. Dan is co γ (u) E k = span{e,..., e k }. Omdat L γ γ bovendriehoeks is, is wegens Lemma.3 ook L γ γco γ (u) E k. En dus geeft (28) dat co γ (L(u)) E k, wat equivalent is met L(u) U k. Dit bewijst de bewering. We besteden nu even kort aandacht aan de omkering van de uitspraak in Stelling.32. Stelling.33 Zij L : V V een lineaire transformatie van een vectorruimte (V, K). Veronderstel dat U U 2... U n U n = V een complete vlag van invariante deelruimtes onder L is. Dan bestaat er een basis γ van V waarvoor L γ γ bovendriehoeks is. Bewijs. Laat γ = {c } een basis zijn van U. Kies nu voor iedere k {2,..., n} achtereenvolgens γ k = γ k {c k } waarbij c k U k en c k U k. Dan is γ = γ n = {c,..., c n } een basis van V met de eigenschap dat L(c k ) U k, en dus is L γ γ een bovendriehoeksmatrix..6 De triangulatiestelling van Schur In deze sectie gaan we na wat het concept inproduct kan toevoegen aan de triangulatiestelling van Jacobi. Dit zal leiden tot de triangulatiestelling van Schur. Lemma.34 Laat (V, K,, ) een inproductruimte zijn met basis γ = {c,..., c n }. Laat U U 2 U n de complete vlag zijn geïnduceerd door de basis γ van V. Dan bestaat er ook een orthonormale basis β die diezelfde vlag induceert. Bewijs. Definieer U 0 = {0}. Voor iedere opeenvolgende k {,..., n}, kies b k U k met b k U k en b k =. Dan is span{b,..., b k } = U k voor alle k {,..., n}. Dus induceert {b,..., b n } dezelfde comlete vlag als γ. Omdat b k loodrecht staat op b,..., b k en b k = voor alle k {,..., n} is β = {b,..., b n } daarnaast ook een orthonormale basis van V. Gevolg.35 Het Gram-Schmidt proces toegepast op γ resulteert in een orthonormale basis β die dezelfde vlag induceert als γ. Immers, één van de karakteriserende eigenschappen van het Gram-Schmidt proces is dat voor alle k {,..., n} span{b,..., b k } = span{c,..., c k }. (29) Gram-Schmidt is dus een speciaal geval van de constructie in het bewijs van Lemma.34. Na deze inleiding zijn we in staat om de triangulatiestelling van Schur te bewijzen. Stelling.36 (Triangulatiestelling van Schur) Zij (V, K,, ) een inproductruimte over een algebraïsch afgesloten lichaam K. Voor elke lineaire transformatie L : V V bestaat er een orthonormale basis β van V waarvoor de matrix L β β van L een bovendriehoeksmatrix is. 8

9 Bewijs. Op grond van Stelling.5 bestaat er een basis γ = {c,..., c n } van V zodanig, dat de matrix L γ γ een bovendriehoeksmatrix is. Laat U U 2 U n = V de door γ geïnduceerde complete vlag zijn. Volgens Stelling.32 bestaat deze uit invariante deelruimtes onder L. Volgens Lemma.34 bestaat er een orthonormale basis β = {b,..., b n } zodanig dat voor alle k {,..., n} dat span{b,..., b k } = span{c,..., c k } = U k. (30) Omdat U k invariant is, geldt L(b k ) span{b,..., b k }, en dus is L β β bovendriehoeks. De overeenkomstige formulering van Stelling.36 in termen van matrices is de volgende. Stelling.37 Gegeven een matrix A K n n met K algebraïsch afgesloten en een inproduct, op K n. Dan bestaat er een matrix U K n n met, -orthonormale kolommen zodanig dat U AU = R een bovendriehoeksmatrix is. Opmerking.38 Met A C n n en, het standaardinproduct op C n, zegt Stelling.37 dat er een unitaire matrix U bestaat zodanig dat U AU = R bovendriehoeks is. Definitie.39 (Schurvorm en Schurdecompositie) Een bovendriehoeksmatrix R als in Stelling.36 en Stelling.37 heet een Schurvorm van L of A, en de factorisatie A = URU equivalent aan Stelling.37 een Schurdecompositie of Schurfactorisatie van de matrix A. Opmerking.40 Stelling.37 kan ook als volgt worden bewezen. Laat Au = λu met u =. Laat U K n n een matrix zijn met orthonormale kolommen met Ue = u. Dan is volgens Lemma.8 de eerste kolom van U AU gelijk is aan λe. Vervolgens kan een inductiebewijs worden gegeven, met als enige verschil met Sectie.6 dat de transformatiematrices niet alleen inverteerbaar zijn, maar zelfs orthonormale kolommen hebben. Dit alternatieve korte bewijs heeft twee nadelen. Ten eerste zouden we dan de triangulatiestelling van Jacobi niet zijn tegengekomen, en die zal later zijn nut nog bewijzen. Ten tweede is het veel minder rekenwerk eerst een basis γ te bepalen ten opzichte waarvan L γ γ bovendriehoeks is, en deze vervolgens met Gram-Schmidt te orthonormaliseren. Het boven gesuggereerde inductiebewijs volgend hebben we voor iedere k {2,..., n} een k k matrix nodig met orthonormale kolommen. Voorbeeld.4 In Voorbeeld.2 zagen we de matrix A C 2 2, [ [ A =, ker(a I) = span{x} met x = (3) We brachten A op bovendriehoeksvorm door een X GL 2 (C) te construeren met x als eerste kolom. We willen nu een sterker resultaat, namelijk, A op bovendriehoeksvorm brengen middels een matrix U met orthonormale kolommen. Kies derhalve U = 3 [ dan heeft U orthonormale kolommen, geldt dus dat U = U, en vinden we vervolgens U AU = [ [ [ [ =. (33) De rechtermatrix is inderdaad bovendriehoeks, maar niet gelijk aan R uit Voorbeeld.2. (32) 9

10 De Frobeniusnorm A F van een matrix A C n n is de wortel van de som van de kwadraten van de entries van A. Het is niet moelijk in te zijn dat als U unitair is, In het bovenstaande voorbeeld uit zich dit in de gelijkheid U AU F = A F. (34) = (35) We beschouwen nu nogmaals de matrix uit Voorbeeld.9. Voorbeeld.42 In Voorbeeld.9 zagen we de matrix A C 3 3 met enige eigenwaarde λ = en 3 A = en ker(a I) = span{x} met x =. (36) Na enig rekenwerk vonden we in (7) dat Z AZ = , waarbij Z = 0. (37) Om een matrix U met orthonormale kolommen te vinden waarvoor U AU bovendriehoeks is, volstaat het volgens Gevolg.35 om het Gram-Schmidt proces (van links naar rechts) toe te passen op de kolommen van Z. Dit geeft U = / 3 2/ 6 0 / 3 / 6 / 2 / 3 / 6 / 2 Deze bovendriehoeksmatrix is daarmee dus een Schurvorm van A. 8 en U 200/3 AU = 0 6/3. (38) 0 0 Opmerking.43 Het berekenen van een Schurvorm is doorgaans lastiger dan het berekenen van een willekeurige bovendriehoeksvorm. Dit komt doordat orthonormalisatie breuken en wortels en zelfs wortels van breuken introduceert, ook als A alleen gehele getallen bevat..7 Toepassing: Schur decompositie en Google s PageRank In het PageRank model van Page en Brin, de oprichters van Google, wordt een eigenvector berekend van de Google matrix G R n n. Deze matrix G is van de vorm G = αs + ( α)t, met T = ee n en α [0, ). (39) Hierbij is e de all-ones vector, oftewel, de som van alle standaard basisvectoren, α is een geheime parameter, en S R n n is een matrix die de link-structuur van het internet codeert. 0

11 Larry Page (b. 973) en Sergey Brin (b. 973) Bekend is dat de entries in iedere kolom van S niet-negatief zijn en optellen op tot één, oftewel, e S = e en dus S e = e. Zo n matrix heet kolomstochastisch. Merk op dat hier niets anders staat dan dat e een eigenvector is van S horend bij eigenwaarde λ =. Dus heeft ook S een eigenwaarde. Omdat ook de kolommen van T optellen tot één, geldt hetzelfde voor G. Dus ook G is kolomstochastisch, en G e = e. Dus is ook een eigenwaarde van G. De volgende stelling is van groot belang voor het efficiënt kunnen uitrekenen van een eigenvector horend bij λ =. Stelling.44 Er geldt dim ker(g I) =. Als λ een eigenwaarde is van G, dan λ α. Bewijs. Deze stelling werd in 2003 bewezen door S. Kamvar and T. Haveliwala. Sepandar Kamvar en Taher Haveliwala Ze publiceerden het in een onderzoeksartikel van acht bladzijden getitled The Second Eigenvalue of the Google Matrix (Technical Report, Stanford University) dat inmiddels al ruim driehonderd keer is geciteerd. Het kan veel korter met de Schurdecompositie. Bewijs. Laat U S U = R een Schurvorm van S zijn met de eigenschap dat de eerste kolom u = Ue gelijk is aan de (genormaliseerde) eigenvector e/ n van S. Dan is U e = ne, is de linksboven entry van R aan één, en zijn alle andere diagonaalentries van R in absolute waarde ten hoogste één. Het is niet moeilijk te zien dat ook de matrix U G U = αu S U + ( α) U ee U n = αr + ( α)e e, (40) bovendriehoeks is. Immers, αr is bovendriehoeks, en ( α)e e is een matrix waarvan de linksboven-entry gelijk is aan α en de overige entries zijn nul. De linksboven-entry van

12 U G U is gelijk aan α + ( α) =. De overige diagonaalentries zijn in absolute waarde ten hoogste gelijk aan α. Maar deze diagnonaalentries zijn de eigenwaarden van U G U, en dus ook de eigenwaarden van G, en dus de complex geconjugeerden van de eigenwaarden van G. Omdat we al weten dat G ook een eigenwaarde λ = heeft, weten we nu dat de eigenruimte behorende bij deze eigenwaarde dimensie één heeft als 0 α <..8 Spectraalstellingen voor normale, Hermietse, en unitaire matrices In deze sectie beperken we ons tot lineaire transformaties van complexe inproductruimtes en hun matrices A C n n. We brengen eerst de geadjungeerde transformatie in de herinnering. Definitie.45 ((Zelf-)geadjungeerde transformatie) Zij L : V V een lineaire transformatie van een inproductruimte (V, C,, ). Dan is de lineaire transformatie L : V V met de eigenschap dat L (v), w = v, L(w) voor alle v, w V (4) de geadjungeerde van de transformatie L. Als L = L heet L zelfgeadjungeerd. Opmerking.46 De afbeelding L is door (4) goedgedefinieerd: laat β = {b,..., b n } een orthonormale basis zijn van V, dan is L (v) = β b +... β n b n waarbij β k uniek bepaald wordt door w = b k te substitueren in (4). De lineariteit van L is nu een eenvoudige oefening. Definitie.47 ((Zelf-)geadjungeerde matrix) De geadjungeerde A van een matrix A C n n is de matrix A = A. Als A = A dan heet A zelfgeadjungeerd. Lemma.48 Zij L : V V een lineaire transformatie van een inproductruimte (V, C,, ) en K : V V zijn geadjungeerde. Laat β = {b,..., b n } een orthonormale basis zijn van V. Dan geldt K β β = (Lβ β ), (42) oftewel, de matrix van de geadjungeerde is gelijk aan de geadjungeerde van de matrix. Bewijs. We passen stap voor stap bekende definities en resultaten toe, e i (L β β e j) = e i co β (L(b j )) = 2 b i, L(b j ) = 3 K(b i ), b j = 4 b j, K(b i ) = 5 e j co β(k(b i )) = 6 e j Kβ β e i en concluderen van de ij-de entry van L β β de geconjugeerde is van de ji-de entry van Kβ β. Toelichtingen: () co β (L(v)) = L β β co β(v) voor alle v V en dus ook voor v = b j, waarmee co β (v) = e j ; (2) als L(b j ) = α b + + α n b n dan is e i co β(l(b j )) = α i maar ook b i, L(b j ) = α i ; (3) dit geldt precies wegens de definitie (4) van geadjungeerde afbeelding; (4) geconjugeerde symmetrie van een complex inproduct; (5) als K(b i ) = γ b + + γ n b n dan is b j, K(b j ) = γ j maar ook e j co β(k(b i )) = γ j ; (6) co β (K(v)) = K β β co β(v) voor alle v V en dus ook voor v = b i, waarmee co β (v) = e i. 2

13 Gevolg.49 De matrix ten opzichte van een orthonormale basis van een zelfgeadjungeerde lineaire transformatie is zelfgeadjungeerd. Na de geadjungeerde in de herinnering te hebben geroepen, zijn we in staat om normale lineaire transformaties te definiëren. Definitie.50 (Normale lineaire transformatie) Een lineaire transformatie L : V V van een inproductruimte (V, C,, ) heet normaal als waarbij staat voor de samenstelling van afbeelingen. L L = L L, (43) Definitie.5 (Normale matrix) Een matrix A C n n heet normaal als A A = AA. De normale matrices zijn via orthonormale bases gerelateerd aan normale transformaties. Lemma.52 Zij L : V V een lineaire transformatie van een inproductruimte (V, C,, ) en β een orthonormale basis van V. Dan is L normaal als en alleen als L β β normaal is. Bewijs. Als L β β de matrix is van L, dan geeft Lemma.48 dat (Lβ β ) de matrix is van L. Omdat daarnaast de matrix van een samengestelde afbeelding gelijk is aan het product van de matrices van de samenstelende afbeeldingen, volgt de bewering onmiddellijk. We bewijzen nu nog twee belangrijke hulpresultaten, Lemma s.53 en.54, voor normale matrices, die zullen uitmonden in de spectraalstelling voor normale matrices en transformaties. Lemma.53 A C n n is normaal als en alleen als iedere Schurvorm R van A normaal is. Bewijs. Zij A = URU een Schurdecompositie van A. Dan is A = UR U en dus AA = (URU )(UR U ) = URR U en A A = (UR U )(URU ) = UR RU (44) Dus A A = AA als en alleen als UR RU = URR U. En omdat U inverteerbaar is, is dit zo als en alleen als R R = RR. Lemma.54 Iedere normale bovendriehoeksmatrix R C n n is een diagonaalmatrix. Bewijs. Met volledige inductie. Voor n = is de uitspraak triviaal waar. Neem als inductiehypothese aan dat de uitspraak geldt voor iedere bovendriehoeksmatrix T C (n ) (n ). Laat R C n n een bovendriehoeksmatrix zijn, en schrijf R R = RR gepartitioneerd uit als [ [ [ [ ρ 0 ρ r ρ r ρ 0 r T = 0 T 0 T r T (45) waarbij ρ C, r C n en T C (n ) (n ) bovendriehoeks. behulp van Lemma.7 geeft dat [ [ ρρ ρr ρρ + r r r T rρ rr + T = T T r T T Uitvermenigvuldigen met (46) Dus is ρρ = ρρ + r r, dus r r = 0 en volgt uit de inproduct-axioma s dat r = 0. Maar dan is ook rr = 0, dus is T T = T T, en dus is T volgens de inductiehypothese diagonaal. 3

14 Stelling.55 (Spectraalstelling: normale matrices) Er is een unitaire matrix U zodanig dat U AU = Λ een diagonaalmatrix is als en alleen als A C n n normaal is. Bewijs. Zij A C n n normaal. Omdat C algebraïsch afgesloten is, bestaat er een volgens Stelling.37 een Schurdecompositie A = URU van A met U unitair en R bovendriehoeks. Lemma.34 geeft dat R net als A normaal is, en Lemma.53 bewijst vervolgens dat R een diagonaalmatrix is. Veronderstel omgekeerd dat A = UΛU met U unitair en Λ diagonaal, dan geldt dat A = UΛ U en dus dat A A = (UΛ U )(UΛU ) = U(Λ Λ)U = U(ΛΛ )U = (UΛU )(UΛ U ) = AA (47) waarbij we gebruikten dat diagonaalmatrices triviaal normaal zijn. Dus is A normaal. Spectraalstelling.55 is van centraal belang binnen de lineaire algebra. Het vertelt exact welke lineaire transformaties L : V V van een inproductruimte (V, C,, ) ten opzichte van een geschikt gekozen orthonormale basis β van V een diagonaalgedaante L β β aannemen. Stelling.56 (Spectraalstelling: normale transformaties) Laat L : V V een lineaire transformatie van een inproductruimte (V, C,, ) zijn. Dan bestaat er een orthonormale basis β waarvoor L β β een diagonaalmatrix is als en alleen als L normaal is. Bewijs. Veronderstel dat L normaal is, en laat γ = {c,..., c n } een orthonormale basis van V zijn. Volgens Lemma.52 is L γ γ dan een normale matrix. Op grond van Stelling.55 bestaat er een unitaire matrix U zodanig dat U L γ γu diagonaal is. De kolommen van U vormen dus een orthonormale basis van eigenvectoren van L γ γ. Zoals bekend is iedere eigenvector van L γ γ de coördinaatvector co γ (v) van een eigenvector v van L. Dus is voor iedere j {,..., n} is de vector b j V gedefinieerd door b j = u j c + + u nj c n = u n... u n u ij c i, voor U =.. (48) u n... u nn i= een eigenvector van L. Daarnaast is ook β = {b,..., b n } een orthonormale basis van V, omdat voor alle i, j {,..., n} geldt b i, b j = u i c + + u ni c n, u j c + + u nj c n = u i u j + + u ni u nj = e i U Ue j. (49) Dus is L β β diagonaal, en zelfs gelijk aan U L γ γu. Dit bewijst één van beide implicaties. De andere implicatie is een eenvoudige oefening. De volgende spectraalstelling gaat over de deelverzameling van zelfgeadjungeerde matrices; hiervoor kan een sterker resultaat worden bewezen dan voor normale matrices, in de zin dat de diagonaalmatrix reële entries heeft, welke corresponderen met reële eigenwaarden. Stelling.57 (Spectraalstelling: zelfgeadjungeerde matrices) Er bestaat een unitaire matrix U zodanig dat U AU = Λ een reële diagonaalmatrixis als en alleen als A C n n zelfgeadjungeerd is. 4

15 Bewijs. Laat A C n n met A = A. Dan is A normaal en bestaat er volgens Stelling.55 een unitaire matrix U en een diagonaalmatrix Λ zo, dat U AU = Λ. Dus is A = UΛU, en is A = UΛ U. Maar omdat A = A volgt hieruit dat Λ = Λ, en dus is de diagonaal reëel. Omgekeerd is triviaal A = A zodra A = UΛU met U unitair en Λ reëel diagonaal. Stelling.58 (Spectraalstelling: zelfgeadjungeerde transformaties) Laat L : V V een lineaire transformatie van een inproductruimte (V, C,, ) zijn. Dan is er een orthonormale basis β waarvoor L β β reël diagonaal is als en alleen als L zelfgeadjungeerd is. Bewijs. Volledig analoog aan het bewijs van Stelling.56, met als toevoeging dat uit Stelling.57 volgt dat de eigenwaarden van L reëel zijn. Tot slot bewijzen we de spectraalstellingen voor unitaire afbeeldingen en matrices. Definitie.59 (Unitaire lineaire transformatie) Een lineaire transformatie L : V V van een inproductruimte (V, C,, ) heet unitair als L L = id = L L, waarbij id : V V staat voor de identieke afbeelding. Opmerking.60 De karakterisering L L = id is equivalent met (L L)(v), w = v, w (50) voor alle v, w V, en met behulp van de definitie van geadjungeerde transformatie met L(v), L(w) = v, w (5) voor alle v, w V, wat laat zien dat L hoeken en afstanden behoudt. Definitie.6 Een getal z C heet unimodulair als z =. Stelling.62 (Spectraalstelling: unitaire matrices) Er bestaat een unitaire matrix U en een diagonaalmatrix Λ met unimodulaire diagonaalentries zodanig dat A = UΛU als en alleen als A C n n unitair is. Bewijs. Laat A C n n met A A = I. Dan is A normaal en bestaat er volgens Stelling.55 een unitaire matrix U en een diagonaalmatrix Λ zo, dat U AU = Λ. Dus is A = UΛU, en is A = UΛ U. Maar omdat AA = I volgt hieruit dat ΛΛ = I, en dus geldt voor een diagonaalentry λ van Λ dat λλ =. Dus is λ =. Omgekeerd is triviaal A A = I zodra A = UΛU met U unitair en Λ diagonaal met unimodulaire diagonaalentries. Stelling.63 (Spectraalstelling: unitaire transformaties) Laat L : V V een lineaire transformatie van een inproductruimte (V, C,, ) zijn. Dan is er een orthonormale basis β waarvoor L β β diagonaal is met unimodulaire diagonaalentries als en alleen als L unitair is. Bewijs. Volledig analoog aan het bewijs van Stelling.56, met als toevoeging dat uit Stelling.62 volgt dat de eigenwaarden van L unimodulair zijn. 5