1 / 49

Multimedialne bazy danych

Multimedialne bazy danych. Adam Duszeńko. Audio. Obiekty. Video. Zjawiska. Dane złożone. 3D. Dane proste. Geneza problemu. Świat. Cechy multimedialnych baz danych. Zawierają materiały typu: obraz, dźwięk animacja, sekwencja video

orsin
Download Presentation

Multimedialne bazy danych

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Multimedialne bazy danych Adam Duszeńko

  2. Audio Obiekty Video Zjawiska Dane złożone 3D Dane proste Geneza problemu Świat

  3. Cechy multimedialnych baz danych • Zawierają materiały typu: obraz, dźwięk animacja, sekwencja video • Posiadają mechanizmy zarządzania treścią, a nie tylko składowania • Dysponują specyficzną funkcjonalnością dedykowaną multimediom • Oferują typy danych dla multimediów

  4. Zagadnienia powiązane z MMBD • rozwój technik modelowania danych multimedialnych • techniki indeksowania i wyszukiwania informacji multimedialnych • rozwój wydajnych metod składowania heterogenicznych obiektów multimedialnych • zagadnienia związane z dostarczaniem informacji multimedialnych z założoną „jakością”

  5. Techniki modelowania MM • Dekompozycja danych złożonych na dane atomowe • Modelowanie w oparciu o analogie z tradycyjnymi danymi • Modelowanie w oparciu o specyfikę poszczególnych danych MM

  6. Informacje połączone z MM • właściwe informacje zawarte w materiale multimedialnym • parametry samego zbioru multimedialnego, jak jego format, rodzaj kompresji, system kodowania, rozmiar • parametry opisujące zbiór jak tytuł, autor, data powstania

  7. Metadane semantyczne • Niskopoziomowe • Wynikające bezpośrednio z budowy zasobu • Wysokopoziomowe • Są wynikiem interpretacji niskopoziomowych metadanych w oparciu o niezbędną wiedzę dziedzinową

  8. MPEG Moving Picture Experts Group • MPEG 1 – kompresja • MPEG 2 – kompresja • MPEG 4 – kompresja + obiekty • MPEG 7 – opis zasobów • Description Tools – metadane, ich struktura i relacje

  9. Drogi rozwoju • Natywne multimedialne bazy danych • Tradycyjne bazy danych z multimedialnymi rozszerzeniami

  10. Natywne MMBD • Bardziej dostosowane do specyfiki materiału multimedialnego • Lepsza wydajność • Konieczność implementacji mechanizmów relacyjnych • Transakcyjność, bezpieczeństwo • SCORE, TVQL, SMDS, CSQL, MOQL

  11. Rozszerzenia tradycyjnych BD • Bazowanie na dopracowywanej od lat wydajności, bezpieczeństwie • Gotowe zarządzanie danymi relacyjnymi • Uzupełnienie o specyficzne dla multimediów UDF i UDT

  12. Język zapytań MM • Podstawą jest SQL • Zdefiniowane UDF i UDT rozszerzają SQL o operacje na multimediach • Wygodne łączenie atrybutów multimedialnych z danymi relacyjnymi

  13. SQL to za mało • Zaniechano rozszerzania samego SQL’a • Stworzono nowy standard odnoszący się do pakietów SQL Multimedia and Applications Packages (SQM/MM) • Składa się z 4 części • Dotyczy poszczególnych typów MM

  14. Etapy analizy multimediów Użytkownik Interfejs Zapytanie Szacowanie podobieństwa Dane opisowe Noncontent metadata Niskopoziome operacje na obrazie Interpretacja Obiekty i relacja Ekstrakcja cech Obraz

  15. Formy składowania MM • Wewnątrz struktur bazy danych • W plikach w systemie plików systemu operacyjnego • Na zewnętrznych serwerach przeznaczonych do składowania multimediów

  16. Baza danych IBM DB2 • Image Extender, • Audio Extender, • Video Extender, • Text Extender

  17. Elementy pakietów • API administracyjne, za pomocą którego możemy zarządzać bazą zawierającą informacje multimedialne • API wyświetlania i odtwarzania obrazów i sekwencji video • QBIC API służące do przygotowywania obrazów i przeszukiwania ich według zawartości • Video shot detection API, służące do wykrywania sekwencji klatek na podstawie zmian sceny

  18. Przykładowa tabela

  19. Zapytanie SELECT FILENAME(ADS_VIDEO) FROM ADS WHERE CLIENT='IBM' AND SHIP_DATE>='01/01/1997' AND DURATION(ADS_VIDEO) <=30

  20. EXEC SQL OPEN c1; for (;;){ EXEC SQL FETCH c1 INTO :hvClient, :hvCampaign, :hvSdate, :hvVid_fname; if (SQLCODE != 0) break; printf("\nRecord %d:\n", ++count); printf("Client = '%s'\n", hvClient); printf("Campaign = '%s'\n", hvCampaign); printf("Sdate = '%s'\n", hvSdate); rc=DBvPlay(NULL,MMDB_PLAY_FILE,hvVid_fname,MMDB_PLAY_WAIT); } EXEC SQL CLOSE c1; #include <dmbvideo.h> int count = 0; EXEC SQL BEGIN DECLARE SECTION; char hvClient[30]; /*client name*/ char hvCampaign[30]; /*campaign name*/ char hvSdate[8]; /*ship date*/ char hvVid_fname [251] /*video file name*/ EXEC SQL END DECLARE SECTION; EXEC SQL DECLARE c1 CURSOR FOR SELECT CLIENT, CAMPAIGN, SHIP_DATE, FILENAME(ADS_VIDEO) FROM ADS WHERE CLIENT='IBM' AND SHIP_DATE>='01/01/1997' AND DURATION(ADS_VIDEO)<=30 FOR FETCH ONLY;

  21. QbImageSource is; is.type = qbiSource_AverageColor; /* run the get color subroutine */ getColor(argv[1], is.average.Color); QbQueryCreate(&qhandle); QbQueryAddFeature(qhandle, "QbColorFeatureClass"); QbQuerySetFeatureData(qhandle, "QbColorFeatureClass",&is); QbQuerySearch(qhandle, "ADS", "ADS_IMAGE", 10, 0, resultType &count, results); for (int j = 0; j <count; j++) { printf(j,":\n"); DBiBrowse("usr/local/bin/xv %s", MMDB_PLAY_HANDLE, handles[j], MMDB_PLAY_WAIT); } QbQueryDelete(qhandle); SQLDisconnect(hdbc); SQLFreeConnect(hdbc); SQLFreeEnv(henv); } #include <dmbqbqpi.h> #define MaxQueryReturns 10 static SQLHENV henv; static SQLHDBC hdbc; static SQLHSTMT hstmt; static SQLRETURN rc; void main(int argc, char* argv[]) { char line[4000]; char* handles[MaxQueryReturns]; QbQueryHandle qHandle=0; QbResult results[MaxQueryReturns]; SQLINTEGER count; SQLINTEGER resultType=qbiArray; SQlAllocEnv(&henv); SQLAllocConnect(henv, &hdbc); rc = SQLConnect(hdbc, (SQLCHAR*)"qtest", SQL_NTS, (SQLCHAR*)"", SQL_NTS, (SQLCHAR*)"", SQL_NTS); if (argc !=2) { printf("usage: query colorname\n"); exit(1); }

  22. Dostępność

  23. Obiektowe typy danych • Każdy obiekt traktowany jako obiekt z atrybutami i metodami • Obiekty umieszczane bezpośrednio w tabelach

  24. Typy Large Objects LOB • Binary large objects (BLOBs) • Character large objects (CLOBs) • Double-byte character large objects (DBCLOBs)

  25. Możliwości składowania • Każdy LOB może mieć do 2GB • W jednym wierszu tabeli może być przechowane 24GB • W całej tabeli do 4TB

  26. User defined types (UDT) • Tworzone za pomocą: CREATE DISTINCT TYPE map AS BLOB (1M) • Traktowane jak każdy typ prosty CREATE TABLE places (locid INTEGER NOT NULL, location CHAR (50), grid map)

  27. User defined function (UDF) • Rozszerzenie standardowych funkcji SQL CREATE FUNCTION map_scale (map) RETURNS SMALLINT EXTERNAL NAME 'scale!map' LANGUAGE C PARAMETER STYLE DB2SQL NO SQL DETERMINISTIC NO EXTERNAL ACTION • Wykorzystanie: SELECT map_scale (grid) FROM places WHERE location='SAN JOSE, CALIFORNIA'

  28. Używanie UDT i UDF • Nowe typy i funkcje należą do schematu MMDBSYS • Ustawienie zmiennej path SET CURRENT FUNCTION PATH = mmdbsys, CURRENT FUNCTION PATH • Funkcje mogą być przeciążane nawet w obrębie schematu

  29. Katalogi QBIC • Zbiór plików zawierających informacje o wizualnych właściwościach obrazów • Tworzony dla każdej kolumny obrazów, która ma być przeszukiwana po zawartości • Podczas tworzenia określa się analizowane atrybuty obrazu

  30. Atrybuty wykorzystywane w QBIC • Średni kolor • Histogram kolorów • Lokalny kolor • Tekstury

  31. Korzystanie z QBIC • Utworzenie i wypełnienie tabeli z obrazami • Stworzenie katalogu na bazie wskazanych cech obrazów • Zadanie zapytania odnoszącego się do cech umieszczonych w katalogu.

  32. Indeksy video • Plik służący do wyszukiwania klatek w materiale video • Budowany na podstawie zmian sceny • Odszukane zmiany są zaznaczane

  33. Przykład wykorzystania rozszerzeń

  34. Kolejne kroki • Uruchomienie usługi Image Extender (użytkownik systemu operacyjnego z uprawnieniami typu SYSADM): DMBSTART • Stworzenie bazy danych (linia poleceń bazy danych): CREATE DATABASE personnl ON /persdb WITH "Personnel database" • Podłączenia bazy do rozszerzenia(linia poleceń rozszerzenia): CONNECT TO personnlENABLE DATABASE FOR DB2IMAGE

  35. Kolejne kroki • Ustawienie zmiennej path: SET CURRENT FUNCTION PATH = mmdbsys, CURRENT FUNCTION PATH • Stworzenie tabeli (użytkownik z uprawnieniami DBA): CREATE TABLE employee (id CHAR(6) name VARCHAR(40) picture DB2IMAGE) • Podłączenie kolumny MM do rozszerzenia: ENABLE TABLE employee FOR DB2IMAGE ENABLE COLUMN employee picture FOR DB2IMAGE

  36. Dodanie obsługi Audio • Uruchomienie obsługi Audio Extender ENABLE DATABASE FOR DB2AUDIO • Dodanie kolumny audio ALTER TABLE employee ADD voice DB2AUDIO • Dodanie obsługi kolumny audio ENABLE TABLE employee FOR DB2AUDIO ENABLE COLUMN employee voice FOR DB2AUDIO

  37. Umieszczanie danych w tabeli • Umieszczanie w bazie na zasadzie • Kopiowania do struktury bazy • Umieszczenie w bazie referencji do zasobu znajdującego się nadal w systemie plików systemu operacyjnego

  38. EXEC SQL BEGIN DECLARE SECTION; long hvInt_Stor; long hvExt_Stor; EXEC SQL END DECLARE SECTION; hvInt_Stor = MMDB_STORAGE_TYPE_INTERNAL; hvExt_Stor = MMDB_STORAGE_TYPE_EXTERNAL; EXEC SQL INSERT INTO EMPLOYEE VALUES( '128557', /*id*/ 'Anita Jones', /*name*/ DB2IMAGE( /*Image Extender UDF*/ CURRENT SERVER, /*database server name in*/ /CURRENT SERVER register*/ '/employee/images/ajones.bmp' /*image source file*/ 'ASIS', /*keep the image format*/ :hvInt_Stor, /*store image in DB as BLOB*/ 'Anita''s picture'), /*comment*/ DB2AUDIO( /*Audio Extender UDF*/ CURRENT SERVER, /*database server name in*/ /*CURRENT SERVER register*/ '/employee/sounds/ajones.wav', /*audio source file*/ 'WAVE', /* audio format */ :hvExt_Stor, /*retain content in server file*/ 'Anita''s voice') /*comment*/ );

  39. Przebieg procesu ładowania • Odczytanie podanych w wywołaniu parametrów • Stworzenie unikalnego wskaźnik do pliku graficznego i umieszczenie go w osobnej tablicy administracyjnej • W osobnej tablicy administracyjnej zapisanie parametrów ładowanego obrazu Podobne czynności są wykonywane dla pliku audio ale pozostaje w systemie plików OS.

  40. interMeida Oracle 10g • Standardowa część pakietu bazy Oracle • Zawiera zbiór typów obiektowych • Przygotowane do rozszerzenia

  41. Rozszerzanie interMedia • dodatkowe formaty zapisu • nowe metody kompresji materiału • specjalizowane indeksy • specyficzne metody optymalizacji zapytań • nowe źródła danych • specjalistyczne algorytmy przetwarzania danych

  42. Formy składowania zasobów MM • Binary large objects (BLOB), składowany w bazie danych • File-based large objects (BFILE), składowany w lokalnym systemie plików systemu operacyjnego • URLs zawierające odniesienia do plików graficznych i dźwiękowych przechowywanych na serwerach HTTP • Specjalizowane serwery składowania multimediów

  43. Obiektowe typy danych • ORDImage, • ORDAudio, • ORDVideo, • ORDDoc

  44. Metadane • Parametry składowania (typ źródła, lokalizację, typ kompresji, datę i format) • Typ MIME • Obrazy (szerokość, wysokość, długość, liczba kolorów) • Audio (kodowanie, liczba kanałów, częstotliwość, kompresja) • Dodatkowe metadane (podawane przez użytkownika)

  45. Windows Media Services • Składowanie to podstawowe zagadnienie • Dostarczanie danych z zadaną jakością jest drugim zagadnieniem

  46. Terminy dot. transmisji • Unicast jest transmisją pakietów danych poprzez sieć o charakterze point-to-point pomiędzy klientem i serwerem. • Multicast jest metodą przesyłania materiału poprzez sieć pozwalającą wielu użytkownikom odbierać ten sam strumień. • Broadcast jest transmisją materiału do obszernej grupy słuchaczy jednocześnie.

  47. On-demand • On-demand określa metodę dostarczania materiału w oparciu o transmisje unicast tylko na konkretne żądanie klienta. Każdy klient ma pełna kontrolę nad transmisją (swoboda przewijania, wstrzymywania itp) gdyż serwer osobno obsługuje każdego klienta.

  48. Streaming • Streaming jest to transmisja materiału cyfrowego za pomocą pakietów, które mogą zostać wyświetlone jak tylko zostaną przesłane, umożliwiając odtwarzanie całości materiały jak gdyby był on lokalnie dostępnym zasobem bez konieczności oczekiwania przesłania całego zasobu.

  49. Podsumowanie • Obecnie tylko niektóre bazy dysponują mechanizmami wspomagającymi multimedia • Wsparcie to jest jeszcze niewystarczające • Duże możliwości i jeszcze większe potrzeby

More Related