Võrgurakendused II

Allikas: Lambda
Redaktsioon seisuga 8. detsember 2016, kell 12:57 kasutajalt PriitJ (arutelu | kaastöö) (→Loengukava)
Mine navigeerimisribale Mine otsikasti
revolutsioon
revolutsioon

Ainekood: ITV0120
Täielik nimi: Võrgurakendused II - hajussüsteemide tehnoloogia
Link: http://www.lambda.ee/index.php/V%C3%B5rgurakendused_II
Punkte: 5 EAP

Lektor: Priit Järv
Kontakt: priit at whitedb.org
Olemas on ka 2015 aasta materjalide arhiiv.



Aeg, koht

Semester: sügis
Tulemus: eksam
Hindamise meetod: praktikumide tulemused (pool) pluss eksam (teine pool)

Loeng: neljapäeval 8:00-9:30 ruumis CYB-VEENUS

IATM31, IAPB53, IAPB54 praktikum: esmaspäeval 19:30-21:00 arvutiklassis ICT-501

IAPB51, IAPB52 praktikum: kolmapäeval 17:45-19:15 arvutiklassis ICT-501


Eksamiajad:

  • 9. jaanuar 2017 kell 11 - ICT-A1
  • 18. jaanuar 2017 kell 18 - ICT-A1

registreeri ÕIS-is hiljemalt 24h enne eksamit.

Praktilised tööd ja tähtajad

Kokku on töid 2. Kumbki praktikum täismahus tehtuna annab 25 punkti, sellele võivad lisanduda ekstrapunktid. Puudulikult tehtud töö punktiarv jääb alla 25 punkti. Hilinenud kodutöö eest saab pooled muidu saadaolevad punktid.

  • 1. Tähtaeg 16-18. oktoober. Kaks alternatiivi, mille vahel võid ise valida:
    • 1 praks (individuaalne)
    • Teha kokkuleppel õppejõuga ~30 min ettekanne loengus (vabu teemasid enam pole). Ettekanne toimub esialgse kava järgi 27. oktoobril.
  • 2. Tähtaeg 5.-7. detsember. Grupitöö 1-3 inimest. Kaks alternatiivi, mille vahel võid ise valida:

Tulemused

matrikkel 1kt 2kt
134108
135056 25 25
153604 25 25
153667 pooleli 25
153525 25 25
142379
142458
143056
167764 25 25
155377
142772 25
143076 25 25
142852 25 25
142684 25
143068 25 28
134574
142653 25 30
164127 25 25
134437 16
144114 25 25
162043
142463 25 30
134296 25 16
142855
155133 25
120951 13
142853 25 25
134666 25
166667 25
166566 25

Loengukava

Kursus jaguneb laias laastus neljaks teemaks:

  • Protokollid ja P2P (neil teemadel - pluss veidi andme-apidest- esimene praks),
  • Andme-apid, autentimine ja pilvekeskkonnad
  • Paralleelrehkendused
  • Andmete hajutamine ja hajutatud andmete koondamine


Ülevaade kursuse sisust, sissejuhatus 1. praktikumi, protokollide algus, http, json

Http ja json: võrgurakenduste protokollid 1
Üldist materjali ja kursusi mujalt:
http://en.wikipedia.org/wiki/Distributed_computing
http://dcg.ethz.ch/lectures/podc_allstars/index.html
http://ocw.mit.edu/courses/electrical-engineering-and-computer-science/6-824-distributed-computer-systems-engineering-spring-2006/index.htm
http://www.stanford.edu/class/cs244b/

Protokollide jätk

Xml põhised protokollid, REST ja binaarsed protokollid
xml protokollid xml-rpc, soap ja seotud tehnoloogiad: võrgurakenduste protokollid 2
Probleemidest: veebiteenuste võlu ja valu ja s stands for simple
REST, binary protokollid, XMPP: võrgurakenduste protokollid 3
Gaffer on games: UDP vs TCP ja selle jätk
Veidi seotud asi ad hoc networks vt ka Defendeci ja Jürgo Predeni patent

2016 eri: paralleelprogrammeerimine

Java näide loengust

Thread, Queue ja Lock Pythonis

C: alguses oli fork(), hea pthreads tutorial.

P2P esimene osa

P2P sissejuhatus:
vikipeedia ülevaade
ülevaade eri P2P tehnoloogiatest

P2P teine osa: DHT (distributed hash tables) ja bittorrent

ülevaade wikipedias
Chord:
Põhimaterjal - Chordi põhimõtted - lugeda kuni Ivy osani (Ivy on antud juhul teemaväline)
Lisaks tasuks veidi uurida artikleid wikipedia sissekande lõpus (external links)
Kademlia:
Põhimaterjal presentatsioon autoritelt
Täiendavalt autorite artikkel
Bittorrent:
bittorrenti protokoll ja ülevaade
täiendavalt wikipediast
TOR:
TOR wikipedias

Suured avalikud andme-apid

Andme-apide märkmed loengust
Read an OK short book on web api design
Check out odata.org

X-tee, RIHA ja riigi IT-infrastruktuur

Big official picture of the state IT-architecture
Ahto Kalja detailne ülevaade X-tee projektist aastast 2004
X-road official page
X-road security server manual (detailed)
X-tee from the Finnish perspective and the X-tee/Json gateway and a nice REST api example from Finland
newest X-road message protocol and corresponding metainfo protocol
Example: X-road oriented Soap call tool for Python
RIHA ja jutud RIHA kohta

Autentimine 1. osa

facebook, google, pangalink.
Autentimise märkmed: facebook ja google

Autentimine 2. osa ja veebiserver

veebiserveri seadistamine id-kaardi jaoks ja abistavad koodijupid
taustaks id-kaardi kasutusstsenaariumid

Autentimine 3. osa

Autentimise märkmed: mobiil-ID

Pilvekeskkonnad

Understanding cloud computing

Suured:

Pilveteenuse tarkvara:

OpenStack

Näide: Azure

Azure märkmed

Google appengine, database api, google bigtable and file system stack

http://cloud.google.com/appengine/ AppEngine on nüüd osa Google Cloud platvormist

Hajutatud failisüsteemide märkmed loengust

Paralleliseerimine ja efektiivsus

Loengunäide: TCP (HTTP) socket server

Mõned java tutorialid: Socket serveri sissejuhatus, threadidega server.

Asjaga seotud artiklid: Causality of Scalability, Designing for Scalability.


here be dragonsSiit edasi on materjalid revideerimata ning võivad semestri jooksul muutuda

Paralleelrehkendused 1. osa

Paralleelsus andmebaasides: slaidid.

Lisaks võib lugeda:

Konspekt, käsitleb teemat oluliselt põhjalikumalt kui loeng/slaidid
Introduction to Transactions (slaidid)

Paralleelrehkendused 2. osa

Sünkroniseerimisprimitiivid: slaidid

Mittekohustuslik lisalugemine:

Konspekt pikemalt ja põhjalikumalt loengus läbitud teemadest.
T.Tammeti slaidid

Paralleliseerimise automatiseerimine ja klastrid

Mapreduce framework
memcached
Mapreduce sissejuhatus
Mapreduce klassikaline põhiartikkel
memcached ülevaade

Andmelaod

Hajutatud andmekogude integreerimine

Postgres replication intro
Postgres clustering and replication
Postgres high availability
Integrating distributed sem web data
Oracle information integration

Varu

Lisamaterjalid