Itv0120 2016 - Redigeerimiste ajalugu

Tammet: Uus lehekülg: '

revolutsioon Ainekood: ITV0120
Täielik nimi: Võrgurakendused II - hajussüsteemide tehnoloogia
Link: ht...'
2018-01-31T13:57:40Z

Uus lehekülg: '<table> <tr> <td> left|revolutsioon </td> <td> Ainekood: ITV0120<br> Täielik nimi: Võrgurakendused II - hajussüsteemide tehnoloogia<br> Link: ht...'

Uus lehekülg
<table>
<tr>
<td>
[[Pilt:Revolution_small.jpg|left|revolutsioon]]
</td>
<td>
Ainekood: ITV0120<br>
Täielik nimi: Võrgurakendused II - hajussüsteemide tehnoloogia<br>
Link: http://www.lambda.ee/index.php/V%C3%B5rgurakendused_II<br>
Punkte: 5 EAP<br><br>
Lektor: Priit Järv<br>
Kontakt: priit at whitedb.org<br>
Olemas on ka [[itv0120 2015 |2015 aasta materjalide arhiiv]].
</td>
</tr>
</table>

== <font color="red">NB! See on 2016 aasta arhiiv, mitte 2018 kevadesemestri variant!</font> ==





== Aeg, koht ==

Semester: sügis<br>
Tulemus: eksam<br>
Hindamise meetod: praktikumide tulemused (pool) pluss eksam (teine pool)<br>

Loeng: neljapäeval 8:00-9:30 ruumis CYB-VEENUS<br>

IATM31, IAPB53, IAPB54 praktikum: esmaspäeval 19:30-21:00 arvutiklassis ICT-501

IAPB51, IAPB52 praktikum: kolmapäeval 17:45-19:15 arvutiklassis ICT-501



Eksamiajad:
* 9. jaanuar 2017 kell 11 - ICT-A1
* 18. jaanuar 2017 kell 18 - ICT-A1
registreeri ÕIS-is hiljemalt 24h enne eksamit.

Järeleksam:
* 23. jaanuar 2017 kell 13 - ICT-312

[[itv0120teemad2016|Eksami kordamisteemad]]

== Praktilised tööd ja tähtajad ==

Kokku on töid 2. Kumbki praktikum täismahus tehtuna annab 25 punkti, sellele võivad lisanduda ekstrapunktid. Puudulikult tehtud töö punktiarv jääb alla 25 punkti. Hilinenud kodutöö eest saab pooled muidu saadaolevad punktid.

* 1. Tähtaeg 16-18. oktoober. <strike>Kaks alternatiivi, mille vahel võid ise valida</strike>:
[[Vorgurakendused 2 prax 1 2016 | 1 praks]] (individuaalne)
Teha kokkuleppel õppejõuga ~30 min ettekanne loengus (vabu teemasid enam pole). Ettekanne toimub esialgse kava järgi 27. oktoobril.

* 2. Tähtaeg 5.-7. detsember. Grupitöö 1-3 inimest. Kaks alternatiivi, mille vahel võid ise valida:
[[Vorgurakendused 2 prax 2 2016 | 2 praks]] (grupp 1-3 inimest)


=== Tulemused ===

Hinded ei ole veel sisse kantud ning võivad eksamisessiooni jooksul või järeleksami tõttu muutuda/täieneda.

{| class="wikitable"
|-
| matrikkel || 1kt || 2kt || eksam || hinne
|-
|134108 || || || ||
|-
|135056 || 25 || 25 || 50 || 5
|-
|153604 || 25 || 25 || 47 || 5
|-
|153667 || 13 || 25 || 49 || 4
|-
|153525 || 25 || 25 || 48 || 5
|-
|142379 || || || ||
|-
|142458 || || || ||
|-
|143056 || || || ||
|-
|167764 || 25 || 25 || 43 || 5
|-
|155377 || || || ||
|-
|142772 || 25 || 15 || 47 || 4
|-
|143076 || 25 || 25 || 32 || 4
|-
|142852 || 25 || 25 || 45 || 5
|-
|142684 || 25 || 15 || 49 || 4
|-
|143068 || 25 || 28 || 49 || 5
|-
|134574 || || || ||
|-
|142653 || 25 || 30 || 50 || 5
|-
|164127 || 25 || 25 || 50 || 5
|-
|134437 || 10 || 16 || 32 || 1
|-
|144114 || 25 || 25 || 42 || 5
|-
|162043 || || || ||
|-
|142463 || 25 || 30 || || 1
|-
|134296 || 25 || 16 || 46 || 4
|-
|142855 || || || ||
|-
|155133 || 25 || 12 || 47 || 4
|-
|120951 || 13 || 10 || 42 || 2
|-
|142853 || 25 || 25 || 50 || 5
|-
|134666 || 25 || || ||
|-
|166667 || 15 || 25 || 43 || 4
|-
|166566 || 15 || 25 || 36 || 3
|}

== Loengukava ==

Kursus jaguneb laias laastus neljaks teemaks:

* Protokollid ja P2P (neil teemadel - pluss veidi andme-apidest- esimene praks),
* Andme-apid, autentimine ja pilvekeskkonnad
* Paralleelrehkendused
* Andmete hajutamine ja hajutatud andmete koondamine

=== Ülevaade kursuse sisust, sissejuhatus 1. praktikumi, protokollide algus, http, json ===


:<b>Http ja json</b>: [[võrgurakenduste protokollid 1]]
:Üldist materjali ja kursusi mujalt:
:http://en.wikipedia.org/wiki/Distributed_computing
:http://dcg.ethz.ch/lectures/podc_allstars/index.html

:http://ocw.mit.edu/courses/electrical-engineering-and-computer-science/6-824-distributed-computer-systems-engineering-spring-2006/index.htm
:http://www.stanford.edu/class/cs244b/

=== Protokollide jätk ===

:Xml põhised protokollid, REST ja binaarsed protokollid
:<b>xml protokollid xml-rpc, soap ja seotud tehnoloogiad</b>: [[võrgurakenduste protokollid 2]]
:Probleemidest: [[veebiteenuste võlu ja valu]] ja [http://harmful.cat-v.org/software/xml/soap/simple s stands for simple]
:<b>REST, binary protokollid, XMPP</b>: [[võrgurakenduste protokollid 3]]
:[http://gafferongames.com/networking-for-game-programmers/udp-vs-tcp/ Gaffer on games: UDP vs TCP] ja [http://gafferongames.com/2015/09/12/is-it-just-me-or-is-networking-really-hard/ selle jätk]
:Veidi seotud asi [https://en.wikipedia.org/wiki/Wireless_ad_hoc_network ad hoc networks] vt ka  [http://www.freepatentsonline.com/8966046.html Defendeci ja Jürgo Predeni patent]

=== 2016 eri: paralleelprogrammeerimine ===

[[Java näide loengust]]

[http://stackoverflow.com/a/16207592 Thread, Queue ja Lock] Pythonis

C: alguses oli [http://www.csl.mtu.edu/cs4411.ck/www/NOTES/process/fork/create.html fork()], hea [https://computing.llnl.gov/tutorials/pthreads/ pthreads tutorial].

=== P2P esimene osa ===

:P2P sissejuhatus:
:[http://en.wikipedia.org/wiki/Peer-to-peer vikipeedia ülevaade]




: [[Media:P2p_overview.ppt|ülevaade eri P2P tehnoloogiatest]]

=== P2P teine osa: DHT (distributed hash tables) ja bittorrent ===

:[http://en.wikipedia.org/wiki/Distributed_hash_table ülevaade wikipedias]
:Chord:
:Põhimaterjal - [http://pdos.csail.mit.edu/~rtm/slides/harvard02.ppt Chordi põhimõtted] - lugeda kuni Ivy osani (Ivy on antud juhul teemaväline)

:Lisaks tasuks veidi uurida artikleid [http://en.wikipedia.org/wiki/Chord_%28peer-to-peer%29 wikipedia] sissekande lõpus (external links)
:Kademlia:
:Põhimaterjal [http://www.cs.uiowa.edu/~ghosh/kademlia.ppt presentatsioon autoritelt]
:Täiendavalt [https://github.com/ntoll/p4p2p/blob/master/papers/maymounkov-kademlia-lncs.pdf autorite artikkel]
:Bittorrent:
:[http://www.cs.uiowa.edu/~ghosh/bittorrent.ppt bittorrenti protokoll ja ülevaade]
:[http://en.wikipedia.org/wiki/BitTorrent_%28protocol%29 täiendavalt wikipediast]
:TOR:
:[http://en.wikipedia.org/wiki/Tor_%28anonymity_network%29 TOR wikipedias]

=== Suured avalikud andme-apid ===

: [[Andme-apide märkmed loengust]]
: Read an OK short book [http://apigee.com/about/resources/ebooks/web-api-design on web api design]
: Check out [http://www.odata.org/ odata.org]

=== X-tee, RIHA ja riigi IT-infrastruktuur ===

:[https://www.ria.ee/public/publikatsioonid/x-road.jpg Big official picture of the state IT-architecture]

:[[Media:Ahto_xtartu.ppt|Ahto Kalja detailne ülevaade X-tee projektist aastast 2004]]
:[https://www.ria.ee/ee/x-tee.html X-road official page] 
:[http://x-road.ee/docs/est/turvaserveri_kasutusjuhend_14.04_lts.pdf X-road security server manual (detailed)]
:[http://apisuomi.fi/2014/07/soap-rest-json-and-x-road-x-tee/ X-tee from the Finnish perspective] and the [https://portal.educloudalliance.org/x-road-rest-gateway-development-initiated-github X-tee/Json gateway] and [http://www.hel.fi/palvelukarttaws/rest/ver2_en.html a nice REST api example from Finland]
:[https://www.ria.ee/public/x_tee/X-Road_message_protocol_4.0.1.pdf newest X-road message protocol] and corresponding [https://www.ria.ee/public/x_tee/pr-meta_x-road_service_metadata_protocol_0.7_Y-743-14.pdf metainfo protocol]
:[[example algorithm for xml serialization of Python data|Example: X-road oriented Soap call tool for Python]]
:[https://riha.eesti.ee/ RIHA] ja [https://www.ria.ee/ee/riha.html jutud RIHA kohta]

=== Autentimine 1. osa ===

: facebook, google, pangalink.
:[[Autentimise märkmed: facebook ja google]]

=== Autentimine 2. osa ja veebiserver ===

:[http://eid.eesti.ee/index.php/Kasutaja_tuvastamine_veebis veebiserveri seadistamine id-kaardi jaoks] ja [https://github.com/tammet/eid abistavad koodijupid]
:[http://eid.eesti.ee/index.php/EID_rakendusjuhend#Tehnoloogilised_detailid_ja_taustinfo taustaks id-kaardi kasutusstsenaariumid]

=== Autentimine 3. osa ===

[[Autentimise märkmed: mobiil-ID]]

=== Pilvekeskkonnad ===

[https://support.rackspace.com/white-paper/understanding-the-cloud-computing-stack-saas-paas-iaas/ Understanding cloud computing]

Suured:

* [https://aws.amazon.com/ Amazon AWS]
* [http://azure.microsoft.com/ Microsoft Azure]
* [https://cloud.google.com/ Google Cloud]

Pilveteenuse tarkvara:

[https://en.wikipedia.org/wiki/OpenStack OpenStack]

Näide: Azure

[[Azure märkmed]]

==== Google appengine, database api, google bigtable and file system stack ====

http://cloud.google.com/appengine/ AppEngine on nüüd osa Google Cloud platvormist

[[Hajutatud failisüsteemide märkmed loengust]]

=== Paralleliseerimine ja efektiivsus ===

Loengunäide: TCP (HTTP) socket server

Kuidas TCP server elementaarsel tasemel töötab (Java tutorialid): [http://javarevisited.blogspot.com.ee/2015/06/how-to-create-http-server-in-java-serversocket-example.html Socket serveri sissejuhatus], [http://www.javaworld.com/article/2853780/core-java/socket-programming-for-scalable-systems.html threadidega server].

Skaleeruvus praktikas: [http://merbist.com/2011/01/18/causality-of-scalability/ Causality of Scalability], [http://merbist.com/2011/01/31/designing-for-scalability/ Designing for Scalability].


=== Paralleliseerimise automatiseerimine ja klastrid ===

:[https://en.wikipedia.org/wiki/MapReduce Mapreduce framework]

:[[Mapreduce katsetused Azure platvormil]]
:Mapreduce [http://research.google.com/archive/mapreduce.html klassikaline põhiartikkel]
:memcached
:[http://www.majordojo.com/2007/03/memcached-howto.php memcached ülevaade]

== Lisamaterjalid ==

<strike>[http://en.wikipedia.org/wiki/Here_be_dragons here be dragons]</strike>'''Siit edasi on materjalid revideerimata ning 2016 aasta kursuses ei sisaldu'''

=== Paralleelrehkendused 1. osa ===

:Paralleelsus andmebaasides: [[Media:na2_ccdb_slides.pdf|slaidid]].
Lisaks võib lugeda:
:[[Media:na2_ccdb.pdf|Konspekt]], käsitleb teemat oluliselt põhjalikumalt kui loeng/slaidid
:[[Media:11-transactions.pdf|Introduction to Transactions (slaidid)]]

=== Paralleelrehkendused 2. osa ===

:Sünkroniseerimisprimitiivid: [[Media:na2_sync_slides.pdf|slaidid]]

Mittekohustuslik lisalugemine:
:[[Media:na2_sync.pdf|Konspekt]] pikemalt ja põhjalikumalt loengus läbitud teemadest.
:[[Media:Locking_v2.ppt|T.Tammeti slaidid]]

=== Andmelaod ===

=== Hajutatud andmekogude integreerimine ===

: [http://momjian.us/main/writings/pgsql/replication.pdf Postgres replication intro]
: [http://wiki.postgresql.org/wiki/Replication,_Clustering,_and_Connection_Pooling Postgres clustering and replication]
: [http://www.postgresql.org/docs/current/interactive/high-availability.html Postgres high availability]
: [http://goanna.cs.rmit.edu.au/~e76763/tiger_ref/lkmt10-dnis.pdf Integrating distributed sem web data]
: [http://docs.oracle.com/cd/B28359_01/server.111/b28318/integrat.htm Oracle information integration]

=== Varu ===

* [[võrgurakendused 2: täiendavad lingid]]
* [[Sehke speci draft]]


[[Category:Kursus]]