Weekly outline

• 

  General

  Tehnologija upravljanja podatkov (2022-23)

  Pri predmetu Tehnologija upravljanja podatkov bomo obdelali nekatere napredne teme s področja podatkovnih baz, ki se tičejo upravljanja s podatki in s tem zagotavljajo kvalitetnejši dostop do informacij, ki se v podatkih skrivajo. Predmet se tesno navezuje na predmete nižjih letnikov, in sicer na Osnove podatkovnih baz oz. Podatkovne baze (SQL, normalizacija, osnove načrtovanja) ter Programiranje 1 in 2 (uporaba orodij, Java, Python). Za nemoteno sodelovanje je torej pričakovano predznanje iz teh dveh predmetov.

  Predavanja in vaje
  

  Predavanja (po urniku) se začnejo v tednu od 5. 10. dalje. Vaje (po urniku) se začnejo v tednu od 12. 10. dalje.
  

  Govorilne ure

  • Matjaž Kukar:  po dogovoru
    
  • Luka Šajn:  po dogovoru
    

  
  

  Obveznosti

  Študenti opravljajo domače naloge na dva do tri tedne. V novembru si izberejo temo za seminarsko nalogo z zagovorom v januarju.
  

  • Domače naloge (DN) skupaj morajo doseči vsaj (50% točk)
  • Seminarska naloga (SEM) v obliki projekta z javno predstavitvijo mora doseči vsaj (50% točk)
  • Na koncu semestra (december, januar)
  • Obsežnejša in inovativnejša kot domače naloge.
  • To oboje je pogoj za pristop k izpitu (IZ), ki mora tudi doseči vsaj 50% točk. 
  • Ocena se izračuna tako: DN/4+SEM/4+IZ/2+morebitne dodatne točke za sodelovanje

  
  

  Izpitni red 

  
  

  V korona-času se bomo prilagajali trenutni situaciji. Pisni izpit obsega teoretične in manj obsežne praktične naloge.
  

  1. Tako iz domačih nalog kot iz seminarja morate doseči  50% točk (pogoj za pristop k pisnemu izpitu).
  2. Dosežene točke se upoštevajo kot polovica skupne ocene.
  3. Pisni izpit morate za pozitivno oceno pisati najmanj 50%.
  4. Na izpitu imate lahko poljubno papirnato literaturo, prosojnice, zapiske, ...
     Elektronske naprave (računalniki, tablice, telefoni in ostalo) niso dovoljene.
  5. Ocena sprotnih obveznosti (vaje) predstavlja polovico končne ocene in velja eno šolsko leto!

  
  

  Izpitni roki (pogoj za pristop: najmanj 50% točk tako iz domačih nalog kot iz seminarja)
  

  1. rok: 25. 1. 2023 v P21 ob12.15h
     
  2. rok: 7. 2. 2023 v P19 ob12.15h
     
  3. rok: 7. 9. 2023
     

  
  

  • Vsebina Page
  • Datoteke Folder
  • Power Designer 12.5 (stara licenčna verzija) URL
  • Forum novic
  • Forum za študente

    Diskusije tem s področja tehnologije upravljanja podatkov.

• 

  3 October - 9 October

  Predavanja: uvod v predmet Tehnologija upravljanja podatkov. Konceptualno načrtovanje (začetek).

  Vaje: začetek v tednu od 10. 10.  (po urniku).

  
  

  • Predavanja: uvod, konceptualno načrtovanje (začetek) File
  • Video posnetek: uvod (2020); do 1:12:22 URL
  • Python dokumentacija Folder
• 

  10 October - 16 October

  Predavanja:  konceptualno načrtovanje podatkovnih baz (nadaljevanje).
  

  Vaje: Osnove konceptualnega načrtovanja s Power Designerjem.
  

  Ta teden sledi tudi prva domača naloga!

  • Predavanja: konceptualno načrtovanje (nadaljevanje) File
  • Video posnetek: konceptualno načrtovanje, prvi del (2020); od 1:12:22 dalje URL
  • Video posnetek: konceptualno načrtovanje, drugi del (2020); do 0:39:35 URL
  • Vaje: instalacija in spoznavanje orodij. Page
  • Vaja: konceptualni model avtomobilske zavarovalnice Page
  • Zavarovalnica - rešitev z eno napako v kardinalnosti File
  • Mednarodne klasifikacije bolezni (ICD) File Uploaded 19/10/17, 16:55
  • • Vaje:
      
    • SQL skripta jadralci.sql
    • Priklop na bazo FRI
    • MariaDB: pb.fri.uni-lj.si, U: tup, G: tupvaje    
      
    • PostgreSQL: pb.fri.uni-lj.si, U: tup, G: tupvaje (baza tup)

    
    

• 

  17 October - 23 October

  
  

  Predavanja: Konceptualno načrtovanje (metodologije, načrtovanje zunanjih shem, kvaliteta konceptualnega modela, zaključek). Logično načrtovanje (začetek).
  

  Vaje: konceptualni model zavarovalnice.

  Ta teden sledi tudi druga domača naloga!
  

  • Predavanja: logično načrtovanje podatkovnih baz (začetek) File
  • Power Designer za načrtovanje konceptualnega modela File
  • pogledamo tudi Workbench za CDM

• 

  24 October - 30 October

  Predavanja: Logično načrtovanje. Iskanje ključev. Normalne oblike relacij in tabel (začetek).
  

  Vaje:
  

  • Predavanja: logično načrtovanje podatkovnih baz, relacijski podatkovni model, normalizacija. File
  • Video posnetek: logično načrtovanje (2020); od 1:42:53 URL
  • Video posnetek: logično načrtovanje (2020); do 1:55:51 URL
• 

  31 October - 6 November

  Predavanja: v tem tednu si do poglejte video posnetek na temo logičnega (do konca)  in fizičnega načrtovanja podatkovne baze. Predavanj v živo ta teden ne bo.
  

  Vaje:  normalizacija, indeksi, denormalizacija
  

  • Predavanja: fizično načrtovanje podatkovnih baz File
  • Video posnetek: fizično načrtovanje, uvod (2022); od 1:55:51 URL
  • Video posnetek: fizično načrtovanje (2022); do 1:39:35 URL
  • TUP vaje 02.11.2022 BigBlueButton
  • Definicija podatkov v SQL File
  • Določanje funkcionalnih odvisnosti in ključev. Normalizacija. Page
  • Ključi in normalizacija File Uploaded 6/11/18, 15:12
  • Vaje: Indeksi File Uploaded 30/11/17, 11:48
  • Merjenje časa v MySQL/MariaDB URL
• 

  7 November - 13 November

  Predavanja: Ponovitev logično/fizično načrtovanje. Particioniranje. Shranjeni bazni podprogrami, bazni prožilci. Nadzorovana redundanca (denormalizacija). Zaključek fizičnega načrtovanja.
  

  Vaje: Praktično delo s podatkovno bazo.
  

  • Video posnetek: fizično načrtovanje (2020); od 1:39:35 URL
  • Pogoni v podatkovnih bazah Page
  • Vaje: Shranjeni podprogrami v SQL File Uploaded 30/11/17, 11:17
  • Naloge: procedure Page
  • Rešitve vaje iz procedur File Uploaded 30/11/17, 11:30
  • SQL ukazi za funkcije, procedure in triggerje Page
• 

  14 November - 20 November

  Predavanja: fizično načrtovanje (zaključek). Uporabniki podatkovne baze, programski dostop do podatkovne baze (ODBC). To so razmeroma nizkonivojske programske storitve, ki pa nam zelo koristijo pri baznih aplikacijah (tako spletnih, kot drugih). Še posebej so uporabne pri napredni analitični rabi podatkovnih baz (podatkovna skladišča, podatkovno rudarjenje) - tako pri uvozu, kot pri predobdelavi podatkov.
  

  Vaje:
  

  • Predavanja: dostop do podatkov v podatkovni bazi File
  • Video posnetek: fizično načrtovanje (zaključek) (2020); do 1:14:10 URL
  • Vaje: MariaDB in Prožilci File Uploaded 30/11/17, 11:46
  • XLS datoteke za 3.domačo nalogo: Diag, Lab in Param File Uploaded 15/12/17, 13:18
  • Vaje: Python in ODBC File
  • Vaje: delovni zvezek Python in ODBC File
• 

  21 November - 27 November

  Predavanja: programski dostop do podatkovne baze - ODBC, JDBC, ORM (nadaljevanje in zaključek). Podatkovna skladišča (začetek).
  

  Anketa: lepo povabljeni, da izpolnite anketo o predmetu: https://ucilnica.fri.uni-lj.si/mod/questionnaire/view.php?id=50782
  

  Vaje:
  

  • Predavanja: podatkovna skladišča File
  • Video posnetek: dostop do podatkov v PB - ODBC, JDBC (2020); od 1:14:10 URL
  • Video posnetek: podatkovna skladišča (2020): do 0:26:40. URL
  • Vaje: delovni zvezek Python in ODBC (nadaljevanje) File
  • Vaje: delovni zvezek za izračun skladnosti File
  • Vaje: delovni zvezek za Alchemy (Object Relational Mapper) File
  • Vaje: delovni zvezek za Alchemy 1 File
  • Vaje: delovni zvezek za Napredni SQL File
• 

  28 November - 4 December

  Predavanja:  Podatkovna skladišča, podatkovna jezera (nadaljevanje). Odkrivanje zakonitosti v podatkovnih bazah, podatkovno rudarjenje (začetek).
  

  Vaje: 

  • Predavanja: Podatkovno rudarjenje File
  • Video posnetek: podatkovna skladišča (2020): od 0:26:40. Podatkovno rudarjenje (začetek). URL
  • Video posnetek: Podatkovno rudarjenje, nadaljevanje (2020): do 1:33:38. URL
  • TUP vaje 2.12.20 ob 15.15h BigBlueButton
  • Seminarske naloge 2022/23 File Uploaded 28/11/22, 16:16
  • Vaje: kompleksnejša normalizacija Page
  • Vaje: Primeri rešitev normalizacij File
  • OLAP URL
  • Vaje: dostop do podatkov in vrtilne tabele v Excelu File
  • Primeri normalizacije z rešitvami File
  • MindsDB video URL
  • Priporočilni sistem v Pythonu video URL
• 

  5 December - 11 December

  Predavanja: podatkovno rudarjenje (nadaljevanje). .
  

  Vaje:
  

  • Video posnetek: Podatkovno rudarjenje, priporočilni sistemi (2020): od 1:33:38. URL
  • Vaje: Sočasen dostop do podatkovne baze Page
  • Primer rešitve naloge iz vaj glede sočasnega dostopa File
  • Še en primer prožilca Page
  • Start transaction File Uploaded 20/12/21, 15:29
  • Vaje: protokol 2PL File
  • Vaje: primer za izvedbo 2PL File
  • Vaje: rešitve primera za izvedbo 2PL File
• 

  12 December - 18 December

  Predavanja: Podatkovno rudarjenje, priporočilni sistemi (nadaljevanje in zaključek). Varnost v podatkovnih bazah. Transakcijska varnost..
  

  • Predavanja: Priporočilni sistemi File
  • Predavanja: varnost v podatkovnih bazah. Upravljanje s transakcijami. File
  • MariaDB set transaction isolation level URL
  • Transakcija-A File Uploaded 7/01/22, 11:36
  • Transakcija-B File Uploaded 7/01/22, 11:36
  • TransakcijeAB.py File Uploaded 4/01/18, 09:59
  • Pomoč in namigi za 4.DN File Uploaded 16/12/20, 19:07
• 

  19 December - 25 December

  Predavanja: Transakcijska in podatkovna varnost.
  

  
  

  • Predavanja: transakcijska in podatkovna varnost (nadaljevanje iz prejšnjega tedna). URL
  • sql users File Uploaded 4/01/18, 11:32
  • revoke URL
  • MongoDB pregled File Uploaded 15/12/20, 22:11

    Navodila za namestitev in osnove uporabe za nerelacijsko/dokumentno bazo MongoDB.

  • TUP vaje MongoDB (23.12.20 ob 15.15h) BigBlueButton
  • Še namig za agregcijo podatkov (unwind ...) URL
• 

  26 December - 1 January

  Vesel Božič ...

  

  ... in Srečno novo leto!

  

  
  

  Predavanja in vaje odpadejo (prazniki), vendar se kljub temu posvetite domači in seminarski nalogi.
  

   Še nekaj lahke literature za praznični čas:

  • High Performance MySQL, 4th Edition; Silvia Botros, Jeremy Tinley; O'Reilly Media, 2021 (prvo poglavje)
    
  • Transaction Management and Isolation Levels, Herong Yang, 2012
    
  • Differences between READ-COMMITTED and REPEATABLE-READ transaction isolation levels, Justin Swanhart, 2012

  • InnoDB Locking and Transaction Model, MySQL Reference Manual, pogl. 15.7
    

  Če pa boste imeli prazniki preveč časa, si oglejte nekaj primerov starih izpitov.  
  

  • Datoteka za predstavitev seminarske naloge (pptx ali pdf) Assignment

    Za drugi teden v 2023 pripravite predstavitve seminarskih nalog do 10.1.23. Predstavili jih boste v sredo in četrtek (11. in 12.1.23) ob terminih predavanj in vaj. Upoštevajte naslednje:

    • pripravite PowerPoint/PDF predstavitev v dolžini največ 5 minut, okvirno do 5 slajdov  (to oddate na učilnici)
      
    • opišite obseg in organizacijo podatkov
    • predstavite doslej narejeno in načrt za dokončanje naloge
    • opišite morebitne težave in njihove rešitve, ter morebitne dileme in nejasnosti
      
    • pripombe, ki jih dobite ob demonstraciji obvezno upoštevajte v končni izvedbi naloge
    • za vaje pripravite delujočo demonstracijo in se pripravite na praktična vprašanja
    • naloga lahko še ni v celoti dokončana, vendar mora biti vsaj delno narejena

    Tukaj naložite predstavitev vaše seminarske naloge. To je potrebno v izogib zamudam pri nalaganju z USB ključkov

    Datoteko naloži le en član skupine! Predstavljata pa oba oz. vsi člani skupine.

    Vrstni red predstavitev ni pomemben, važno je le, da tekoče poteka!

    Seminarske naloge še ni potrebno oddati do 10.1. Je pa potrebno oddati do nedelje 22.1.23!

• 

  2 January - 8 January

  Predavanja: podatkovna in dostopna podatkovna varnost (zaključek). Nerelacijske podatkovne baze.

  Vaje:
  

  • Predavanja:Dostopna varnost File
  • Predavanja: nerelacijski (NoSQL) podatkovni sistemi File
  • TUP vaje 6.1.21 ob 15.15h BigBlueButton
  • Vaje: transakcije v SQL File
  • Pravice uporabnikov v MySQL Page
  • Neo4j delovni zvezek File
  • Nekaj primerov izpitov TUP File
  • Koda s primeri (Neo4j, delovni zvezek) File
  • Koda s primeri (Neo4j, HTML) File
  • Koda s primeri (PyMongo, HTML) File
  • Koda s primeri (PyMongo, delovni zvezek) File
  • Vaje: Delo z bazo MongoDB File
• 

  9 January - 15 January

  Predavanja: nerelacijske podatkovne baze (prva ura). Predstavitve seminarskih nalog.
  

  Vaje:  predstavitve seminarskih nalog.

  
  

  
  
• 

  16 January - 22 January

  Not available
• 

  23 January - 29 January

  TUP izpit 

  1. rok: 25. 1. 2023 v P21 ob12.15h

  
  

  • TUP izpit 25.1.23 ob 12:00. Čas pisanja: 75 minut Quiz
• 

  30 January - 5 February

  TUP izpit 

      2. rok: 7. 2. 2023 v P19 ob12.15h

  
  

  • TUP izpit 7.2.23 ob 12:00. Čas pisanja: 75 minut Quiz
  • TUP izpit 7.9.23 ob 12:00. Čas pisanja: 75 minut Quiz