Informatica 2e semester

Transcriptie

1 Informatica 2 e semester: les 11 Hashing & Internet Slot Jan Lemeire Informatica 2 e semester februari mei 2018

2 Vandaag 1. Hashing 2. Internet (deel II) 3. Highscore server 4. Examen

3 Hoofdstuk 9 Hashing

4 Performantie datastructuren p. 2 Datastructuur Random access (opvragen i de element) Find (via naam) Toevoegen / verwijderen Array O(0) ++ O(n) O(log(n)) als gesorteerd O(n) - ArrayList O(0) ++ O(n) O(log(n)) als gesorteerd O(n) - Linked list O(n) - O(n) -- O(0) ++ Binaire boom n.v.t. O(log(n)) + O(0) ++ Hashtabel n.v.t. O(0) ++ O(0) ++ Zolang binnen grootte Jan Lemeire Pag. 4 / 64

5 Hashing p. 94 Probleem: iets terugvinden in een collectie gegevens Is in feite een functie: Input: object Output: plaats in geheugen Voor arrays, linked lists of bomen doen we dit met het doorploeteren van de datastructuur Maar waarom niet via een echte wiskundige functie? hashfunctie Jan Lemeire Pag. 5 / 64

6 Hashfunctie Index = hashfunctie(object) Bepaalt waar object moet komen in array hashfunctie hashtabel java 3 koffie 8 thee 11 java koffie thee O(1) tijd, onafhankelijk van de grootte van de array Jan Lemeire Pag. 6 / 64

7 Enige probleem met hashing: botsingen hashfunctie hashtabel java 3 koffie 8 thee 11 jana 3 java jana??? koffie thee goede hashfunctie maakt deze kans klein Vb: java & jana botsen omdat enkel de eerste 2 letters gebruikt worden ( modulo operatie) beter is om alle letters te laten meetellen Ideale hashfunctie: kans is gelijk aan de kans op toevallige botsing Jan Lemeire Pag. 7 / 64

8 Hashfunctie op woorden eerste letter nemen van elk woord ( a = 0; b = 1;...) eerste 2 letters van elk woord hashsom(woord) = index(eerste letter) * 26 + index(tweede letter) "aa geeft 0 ab geeft 1 ba geeft 26 "zz" 25*26+25= Neem maximale hashwaarde groter dan arraygrootte en neem dan de modulo: hashwaarde = hashsom modulo arraygrootte Jan Lemeire Pag. 8 / 64

9 Goede hashfunctie? Botsingen als 2 eerste letters hetzelfde zijn Beter dat alle karakters een invloed op de sleutel hebben Hashwaarde moet groter zijn dan arraygrootte Hoe? Neem alle letters mee, voor elke letter: hashsom(woord) += index(i de letter) * 26 i Jan Lemeire Pag. 9 / 64

10 Neem priemgetal voor arraygrootte Stel: de 8-bitkeys hebben de volgende waarden: Als arraygrootte = 8 => key % 8 betekent dat je de 3 linkse bits neemt (onderlijnt hierboven) => de 3 getallen geven dezelfde waarde en komen op dezelfde plaats in de array zitten: 3-voudige botsing!! Niet alle bits spelen een rol in de hashfunctie, waardoor meer kans op botsingen Dit voorkom je door priemgetal te nemen: Key modulo priemgetal zal een index opleveren die rekening houdt met alle bits Jan Lemeire Pag. 10 / 64

11 Hoofdprobleem: botsingen Ideaal: de array voor p% gevuld => kans op botsing ook p% Perfect hashing (=geen botsingen) enkel mogelijk als verzameling waarden (sleutels) op voorhand gekend is Bvb de gereserveerde woorden van java (zoals class, public, static, void,...) Jan Lemeire Pag. 12 / 64

12 Hashcode: in Java Object protected Object clone() Creates and returns a copy of this object. boolean protected void Class<?> int void void String void void void equals(object obj) Indicates whether some other object is "equal to" this one. finalize() Called by the garbage collector on an object when garbage collection determines that there are no more references to the object. getclass() Returns the runtime class of this Object. hashcode() Returns a hash code value for the object. notify() Wakes up a single thread that is waiting on this object's monitor. notifyall() Wakes up all threads that are waiting on this object's monitor. tostring() Returns a string representation of the object. wait() Causes the current thread to wait until another thread invokes the notify() method or the notifyall() method for this object. wait(long timeout) Causes the current thread to wait until either another thread invokes the notify() method or the notifyall() method for this object, or a specified amount of time has elapsed. wait(long timeout, int nanos) Causes the current thread to wait until another thread invokes the notify() method or the notifyall() method for this object, or some other thread interrupts the current thread, or a certain amount of real time has elapsed. Java geeft default hashcode, overschrijf indien je die wilt verbeteren Jan Lemeire Pag. 13 / 64

13 Botsingen - Oplossing 1: lijst Alle elementen met zelfde index in lijst Bvb linked list hashfunctie hashtabel java 3 koffie 8 thee 11 java koffie thee jana 3 jana Jan Lemeire Pag. 14 / 64

14 Botsingen - Oplossing 2: alternatieve lineaire index berekenen h i = (hash(sleutel) +i) MOD n Nadeel: de bezette plaatsen concentreren zich in blokken kwadratische open adressering h i = (hash(sleutel) +i 2 ) MOD n Voorbeeld Key h0 = Hash(Key) h 1 = h h 2 = h h 3 = h (lineair) h 2 = h (kwadratisc h) Jan Lemeire Pag. 15 / 64

15 Nadelen hashing 1. Statische karakter van de datastructuur Array kan niet uitgebreid worden, want hashfunctie moet dezelfde blijven 2. Elementen staan ongeordend in lijst In volgorde printen kan niet 3. Verwijderen van elementen is soms moeilijk Kan problemen geven bij botsingen Linked lists: OK Alternatief adres: als 1e element verwijderd, hoe weten we dat volgende elementen op alternatieve plaats staat Mogelijke oplossing: verwijderde objecten aanduiden met vlag Jan Lemeire Pag. 16 / 64

16 Mapimplementaties p. 99 Of Map<String, String> map = new TreeMap<String, String>(); Map<String, String> map = new HashMap<String, String>(); Ook voor de implementatie van de Set interface heb je de keuze uit Tree of Hash Jan Lemeire Pag. 17 / 64

17 Hoofdstuk 8: Internet & innovatie Jan Lemeire Pag. 18 / 64

18 Film The Social Network (2010) David Fincher Over het ontstaan van facebook

19 Na de internetbubbel Technologie-index van USA: Nasdaq

20 Jaren 90: Dot-com (crisis) Internet geeft ongekende nieuwe mogelijkheden Internet zou de wereld totaal veranderen Droom spatte uit elkaar Jan Lemeire Pag. 21 / 64

21 Na de dotcom-crisis Investeringen vallen (even) stil Maar: Internet wint meer en meer terrein En plots Google begint aan het internet te verdienen De trein is vertrokken Komt de droom toch uit? Jan Lemeire Pag. 22 / 64

22 webtechnologie Internet 1.0 Informatie te bekijken via browser Internet 2.0 Gebruiker interageert en voegt informatie toe Internet 3.0 Semantiek (betekenis) Webservices: informatie wordt ter beschikking gesteld, kan automatisch (door computerprogramma) opgehaald worden ipv. via browser Vb: bustijden, google maps, Jan Lemeire Pag. 23 / 64

23 De uitvinder van het internet 1989: maakte de eerste webserver (http) en browser (html) samen met de Belg Robert Cailliau 1999: dacht verder: Tim Berners-Lee I have a dream for the Web [in which computers] become capable of analyzing all the data on the Web the content, links, and transactions between people and computers. A Semantic Web, which should make this possible, has yet to emerge, but when it does, the day-to-day mechanisms of trade, bureaucracy and our daily lives will be handled by machines talking to machines. The intelligent agents people have touted for ages will finally materialize.

24 Door internet: verhoging efficiëntie Sneller en gemakkelijker communiceren Informatie overal aanwezig en toegankelijk Vroeger: bibliotheek met beperkte info Digitale verwerking Bvb tax-on-web: belastingen online invullen ipv via formulier die dan ingescand moet worden Webservices: programma s kunnen info opvragen & gebruiken luchtvaartmaatschappijen DatInformatica internettechnologie 2e semester: HOC 11 heel wat mogelijk maakt is duidelijk, maar technologie is geen Jan Lemeire garantie op succes Pag. 25 / 64

25 Technologie is niet alles Wat is de bijdrage van technologie tot het succes? Welke technologie is belangrijk? Onverwachte wendingen Sms werd onbedoeld een enorm succes, mms dan weer niet Standaardisatie! Vb: Gsm Eenvormig systeem, van operator veranderen is gemakkelijk USA: alle operatoren hebben een ander systeem Gsm is nu dan ook wereldwijd de standaard (behalve in de USA...) Jan Lemeire Pag. 26 / 64

26 Wat is er nodig voor succes? Ingenieurs/techneuten hebben het dikwijls moeilijk om dit te begrijpen omdat ze vooral bezig zijn met de technologie Jan Lemeire Pag. 27 / 64

27 De lange weg naar de markt Scientific Technology Solution Product Iets weten Iets kunnen Iets oplossen Iets waard zijn Fundamenteel onderzoek Onderzoek & ontwikkeling Productieproces Business plan rol van de ingenieur Jan Lemeire Pag. 28 / 64

28 Wat is er, naast technologie, nodig voor succes? (1) Vertrouwen Vroeger: securityproblemen Geen vertrouwen Gebruik VISA, Online banking, Meer en meer online kopen: vertrouwen in kapaza, ebay, Je betaalt een onbekende en vetrouwt dat hij het opstuurt! Ons koopgedrag verandert (maar niet eensklaps en massaal) Oud voorbeeld: kernenergie Ingenieur vindt dat de consument maar moest vertrouwen dat alles veilig is. Hij kan niet overweg met irrationele argumenten Jan Lemeire Pag. 29 / 64

29 (2) Gebruiksvriendelijk Google maps <> Map24 Google via handige functionaliteiten veel gebruiksvriendelijker Ik ben direct overgeschakeld Google verzekerde dat het resultaat steeds snel ter beschikking was (binnen 1 seconde) Voorheen moest je al eens lang wachten Apps & muziek Wat is een app anders dan een softwareprogramma? Afgebakend programma door systeem beheerd Itunes store: gemakkelijk muziek kopen Jan Lemeire Pag. 30 / 64

30 (3) Je moet de grootste zijn Of ten minste groot genoeg Hoe bereik je kritische massa? Vb1: website voor gepersonaliseerde concertaankondigen, afhankelijk van je muzieksmaak Bestaat nog geen succesvolle versie Nog geen winner Vb2: smart TV Enkel succesvol met 1 standaard Vele initiatieven (Apple, Samsung, Google, Microsoft, ), maar geen duidelijke winnaar. Geen enkele speler gunt de ander de machtspositie!

31 (4) Het menselijke & sociale aspect Wat zoeken mensen op internet Contact met andere mensen Facebook s Zuckerberg: studeerde psychologie (naast computer science) Begrijpen van mens Apple s Steve Jobs: nadruk op design, op gebruiker ipv technologie Jan Lemeire Pag. 32 / 64

32 (5) Goed Business model Winstgevend zijn op termijn Google, facebook: via advertenties Hebben informatie over gebruikers => gerichte reclame Betalende sites (bvb krant): moeilijk We verwachten dat alles gratis is Jan Lemeire Pag. 33 / 64

33 Belangrijkste IT-bedrijven Key Statistics: Omzet Winst Winstmarge Beurswaarde (koers) Microsoft 87 10,5 12% 404 (51,5) 38 Apple % 494 (90) 9,8 Google (Alphabet) Mei 2015 Omzet Winst Winstmarge Mei 2016 Beurswaarde (koers) Microsoft 94,8 20,0 21% 387 (48,7) 19 Apple % 750 (128) 15,6 Google 67 13,8 20% 373 (500) 27 Facebook 13,5 2,8 20% 219 (80) % 499 (728) 29 Facebook 19,7 4,6 23% 344 (120) 74 Koers-winst Koers-winst

34 Belangrijkste IT-bedrijven Key Statistics: Mei 2017 Facebook Omzet 30,3 Winst 11,5 38% Beurswaarde 420 (144) Koers-winst 36 (2,7%) Mei 2018 Microsoft 90 21,2 20% 730 (95) 34 (2,9%) Apple ,3 21% 858 (169) 17,7 (5,6%) Google (Alphabet) Omzet Winst Winstmarge Beurswaarde (koers) Koers-winst (rendement) Microsoft 87 17,8 20% 521 (67,5) 29 (3,4%) Apple ,7 21% 783 (150) 17 (5,8%) Google (Alphabet) 94,8 20,7 22% 643 (919) 31 (3,2%) ,8 26% 722 (1016) 25,1 (3,9%) Facebook 40,6 15,9 39% 503 (174) 31,6 (3,1%) Amazon 177 3,0 1,7% 767 (1582) 255 (0,4%)

35 Facebook Bij beursgang (mei 2012): 100 miljard beurswaarde 38 dollar initiele prijs aandeel Steeg onmiddellijk tot 42 dollar Bleef langer lager, tot goede app voor smartphone ontwikkeld werd Dit jaar grote vragen ivm privacy, Russische inmenging in Amerikaanse verkiezingen Jan Lemeire Pag. 36 / 64

36 Google (Alphabet)

37 Amazon

38 Koers-winstverhouding

39 Hoofdstuk 7 OS: laatste slide Strategie: open versus gesloten Microsoft s Windows: Open besturingssysteem Iedereen mag er software voor ontwikkelen Geeft andere bedrijven kansen Microsoft concentreerde op besturingssysteem & software Apple: niet op hardware en niet op alle software Hield en houdt controle over het hele systeem, software & hardware Werkte initieel tegen hun (eind 90 bijna failliet) Via apps kan je software aanbieden Pakt nu succesvol uit met totaalproducten Gebruiksgemak, stijl en design steeds prioritair Analoog: Samsung/Android versus Apple

40 IT-technologie: wat brengt de toekomst?

41

42

43 Highscore server

44 Stap 1: aanmaken gebruiker Code nodig: krijg je nog via mail Jan Lemeire Pag. 46 / 64

45 Inloggen Jan Lemeire Pag. 47 / 64

46 Stap 2: aanmaken game (Submit game) Jan Lemeire Pag. 48 / 64

47 Stap 3: toevoegen aan java GM.jar toevoegen aan project (zie documentatie) API (Application Programming Interface) Class ApiBoard in package import gm.apiboard; List<Score> getresults(string gamename) String addresult(float result, String playername, String gamename) public class Score { public String score; public String date; public String player; } => democode is bijgeleverd Jan Lemeire Pag. 49 / 64

48 Stap 4: Security Bij verzenden van resultaten Gm.jar zal getal berekenen en meesturen Als project in Eclipse: aantal bytes (Game size) Als jar-file: checksum (=hashfunctie uit de encryptie) Wordt gecontroleerd als gespecifieerd bij de Game Information op website (stap 2) Als je ze allebei op nul zet wordt het niet gecontroleerd Als getallen niet overeenkomen: resultaat wordt niet weggeschreven Bereken juiste waarde: Game size met ApiBoard.getProjectInfo() Checksum: op website bij game information kan je jar-file uploaden Jan Lemeire Pag. 50 / 64

49 Achter de schermen: database Lijkt op opslaan van objecten van 3 klassen (user, game, score) Jan Lemeire Pag. 51 / 64

50 Examen

51 Doel van het vak Kennis & vaardigheden om informatica te gebruiken als tool Regels kunnen toepassen Redeneren Problemen oplossen Performantie kunnen inschatten Jan Lemeire Pag. 53 / 64

52 Mondeling examen Schriftelijke voorbereiding (maximaal 2 uur) met mondelinge verdeging (15-20 minuten) Enkel eerste 20 minuten van de voorbereiding mogen boek en nota's gebruikt worden (open boek), daarna is enkel pen en papier toegelaten. Niet van toepassing voor vraag uit deel III & binair rekenen Elke vorm van communicatie of technologische hulpmiddelen (zoals computer) zijn uitgesloten. Voorbeeldexamen op website Jan Lemeire Pag. 54 / 64

53 Ophalen 1 e semester indien je een 7, 8 of 9 behaalde in het eerste semester en je hebt minstens 12/20 voor je mondeling examen Een extra vraag over de materie van 1 e semester waarmee je je punten kan optrekken tot maximaal 10/20 geen specifieke python-vraag, eerder algemene programmatievraag. Je mag je pythonboek gebruiken. Jan Lemeire Pag. 55 / 64

54 Deel I: java & object-oriëntatie Boek dient vooral als hulpmiddel Wel: de klassikaal-opgeloste oefeningen (p ) van buiten kennen: de java spelregels Bvb Regels kunnen toepassen op bovenstaande oefeningen Pijlers van object-oriëntatie (p. 7) Gebruik en nut begrijpen wanneer toegepast op gevallen zoals in de cursus Jan Lemeire Pag. 56 / 64

55 Deel II: datastructuren & algoritmen Begrijpen, niet kunnen reproduceren Varianten wel kunnen genereren Op voorbeelden kunnen toepassen Voorbeeld van lijst, boom, spelsituatie, Wat gebeurt er bij kleine varianten? Waar loopt het fout Optioneel voor goede programmeurs: generieke code voor de zoekalgoritmen Je mag dit als vraag kiezen, dan krijg je een andere vraag minder Jan Lemeire Pag. 57 / 64

56 Voorbeeldvraag: Gegeven: zoekboom Gevraagd: wat doet elk zoekalgoritme? Welk deel van de boom zal het doorzoeken? Wat is je conclusie ivm de snelheid en accuraatheid van de algoritmen Java app binnenkort online waarmee je het kan testen Ben het nog gebruiksvriendelijker aan het maken Jan Lemeire Pag. 58 / 64

57 Deel III: technologie, historiek en economische aspecten van de IT-wereld. Aspecten belangrijk voor IT-wereld Essentie kennen, belangrijke onderscheiden van detail Eigen mening wordt gewaardeerd ( redelijk eigenzinnig ) Parate kennis: zodat je verdere info kunt kaderen Te kennen (gesloten boek): hoofdstukken 1 t.e.m. 9 Niet: namen, geschiedenis, data, wat aangeduid staat met Hoofdstuk 9: een eigen, onderbouwde mening kunnen formuleren op de volgende vragen: Wat is volgens u intelligentie? Is de huidige computer al intelligent? Zijn we al goed op weg naar een intelligente computer? Wat verwacht je in de nabije toekomst? Extra informatie & eigen inzichten wordt beloond Ik vraag 5 concepten toe te lichten (wat, waarom, hoe) Bvb: transistor, koers/winst-verhouding, router & modem, chip, digitaal ipv analoog, geheugenhierarchie, process scheduler, Jan Lemeire Pag. 59 / 64

58 Voorbeeldvraag: wat betekenen de volgende begrippen: html ftp http Sockets TCP protocol IP protocol Informatica 2e semester: HOC 10 glasvezel Jan Lemeire Pag. 60 / 64

59 Nieuw Rekenen met bits Op 5 punten (andere vragen op 10) HOC 2 Voorbeeld: int a = 60; int b = 13; hoeveel is a ^ b? int x = 85, i = 4; Schrijf de code om de (i+1)-de bit van x op 1 te zetten Hoeveel is 0x38D decimaal en hoeveel binair? Jan Lemeire Pag. 61 / 64

60 Vragen tijdens de blok? Mail je vraag of mail voor een afspraak Of telefonisch of de assistenten 02/ Jan Lemeire Pag. 63 / 64

61 Einde

62 Succes verder! Toegewenst: doorzicht discipline doorzettingsvermogen planning concentratie/focus zelf-coaching Succes met je carriere, met je dromen En misschien tot later Jan Lemeire Pag. 65 / 64