Przetwarzanie i analiza big data – bezpłatny kurs z Open Education, szkolenie 2 tygodnie, około 36 godzin tygodniowo, termin 29.11.2023.

Moduł 1 Temat 1.1 Wprowadzenie do nauki o danych Omawia rodzaje i źródła danych, zasady rozdzielanie i łączenie danych, rodzaje skal, metody czyszczenia danych i uzupełniania luk, kontrola zakresy. Temat 1.2 Narzędzia do przetwarzania danych Omawia podstawowe narzędzia do przetwarzania danych, takie jak arkusze kalkulacyjne (arkusze kalkulacyjne Google i Excel), obejmuje zagadnienia sortowania i filtrowania danych, sposobów agregacji i analizy danych tabelarycznych (tabele przestawne) Temat 1.3 Wizualizacja dane Zadania i metody wizualizacji danych w różnych narzędziach (arkusze kalkulacyjne Google i Excel), formy prezentacji danych ilościowych i dane jakościowe. Rozważana jest wizualizacja danych poznawczych. Temat 1.4 Analiza i transformacja danych. Rozważane są metody wygładzania i normalizacji danych, zagadnienia transformacji danych. Szczegółowo opisano rodzaje statystyk opisowych oraz metody ich obliczania. Temat 1.5 Praca z szeregami czasowymi Omówiono zasady pracy z szeregami czasowymi i metody ich analizy. Szczególną uwagę zwraca się na techniki wygładzania szeregów czasowych, wyznaczania trendów oraz składowych sezonowych szeregów czasowych.

Moduł 2 Przechowywanie dużych zbiorów danych Temat 2.1. Systemy zarządzania bazami danych Rozważana jest architektura systemów informatycznych i główne funkcje systemów zarządzania bazami danych. Temat 2.2. Projektowanie danych strukturalnych Rozważane są podstawowe pojęcia modelu relacyjnego (tabelarycznego). danych, projektowanie danych w modelu relacyjnym, zasady tworzenia tabel i definiowanie ograniczeń integralności. Temat 2.3. SQL - zapytania do danych i obiektów baz danych Omówiono zasady konstruowania zapytań do danych w języku SQL, w tym projekcja, sortowanie, ustawianie warunków wyboru, łączenie wielu tabel, operacje teorii mnogości, zagnieżdżanie upraszanie. Na wykładzie omówione są także obiekty baz danych - widoki, procedury/funkcje, wyzwalacze. Podano koncepcję indeksów, które mogą poprawić efektywność wykonywania szeregu zapytań. Temat 2.4. Pamięć NoSQL Rozważane są podstawowe pojęcia i cechy systemów NoSQL, różne typy i oceny systemów NoSQL: klucz-wartość, dokument, kolumna i wykres. Zasady budowania zapytań do danych w magazynach NoSQL. Temat 2.5. MongoDB - praca z przechowywaniem dokumentów Omawia organizowanie danych i budowanie zapytań w MongoDB. Podano przykłady budowania zapytań w demonstracyjnej bazie danych MongoDB.