Query » Historie » Verze 3

Jakub Jirůtka, 2011-08-16 21:30
odstraněn alternativní zápis logických operátorů & a | - v URL přeci & nelze použít, jak se mi to tam vůbec dostalo?

1 1 Jakub Jirůtka
h1. Vyhledávání
2 1 Jakub Jirůtka
3 2 Jakub Jirůtka
{{>toc}}
4 1 Jakub Jirůtka
5 2 Jakub Jirůtka
Komplexní podpora dotazování tvoří jednu ze základních funkcionalit databází. Oproti tomu většina běžných RESTových služeb nenabízí moc silné prostředky pro dotazování a omezuje se pouze na triviální předdefinované dotazy, příp. fulltextové vyhledávání. Ovšem mají-li webové služby IS(informačního systému) sloužit aplikacím jako přímý ^1^ zdroj dat, tak je komplexnější podpora vyhledávání prakticky nezbytná.
6 1 Jakub Jirůtka
7 1 Jakub Jirůtka
8 2 Jakub Jirůtka
h2. Předdefinované dotazy
9 1 Jakub Jirůtka
10 2 Jakub Jirůtka
Všechny zdroje s parametrem v URI(Uniform Resource Identifier) jsou v podstatě předdefinované vyhledávací dotazy. Kupříkladu "/units/18000":https://kosapi.fit.cvut.cz/api/3/units/18000/ vyhledá _organizační jednotku_ s kódem _18000_. Na pozadí dojde k vygenerování _SELECTu_ nad tabulkou nákladových středisek, kde kód střediska je rovný 18000. To je poměrně triviální dotaz. Trochu složitější se skrývá například za "/programmes/MI/courses":https://kosapi.fit.cvut.cz/api/3/programmes/MI/courses, který vyhledá všechny _předměty_ patřící pod _studijní program_ s kódem _MI_. Zde se vygeneruje polospojení nad programy, spojovou tabulkou a předměty, kde program má kód rovný MI.
11 1 Jakub Jirůtka
12 2 Jakub Jirůtka
Omezení takovýchto dotazů jsou zjevná. Co když potřebujeme například vyhledat všechny předměty, které se vyučují v zimním semestru, zajišťuje je Katedra softwarového inženýrství FIT a jejich název obsahuje slovo „prog“? Tady už potřebujeme nějaký dotazovací jazyk, který nám umožní kombinovat podmínky.
13 1 Jakub Jirůtka
14 2 Jakub Jirůtka
15 1 Jakub Jirůtka
h2. Dotazovací jazyky pro webové služby
16 1 Jakub Jirůtka
17 1 Jakub Jirůtka
Existují dva standardy (alespoň co jsem našel), které definují jazyk pro dotazování nad RESTovými webovými službami. Prvním je obsáhlý "Open Data Protocol":http://www.odata.org, který mimo jiné zahrnuje komplexní podporu pro dotazování. Využití OData pro KOSapi jsem z několika důvodů zavrhl a vzhledem k tomu, že podpora vyhledávání je přímo jeho součástí, tak mi její _samostatné_ využití nepřišlo přínosné.
18 1 Jakub Jirůtka
19 1 Jakub Jirůtka
Druhým je návrh IETF(Internet Engineering Task Force) standardu "Feed Item Query Language":http://tools.ietf.org/html/draft-nottingham-atompub-fiql-00, který definuje „URI-friendly“ syntaxi pro dotazování (správně spíš _vyhledávání_) nad Atom Feeds. Umožňuje vyhledávat záznamy Atom Entry podle jejich _metadat_. Jedná se pouze o návrh („draft“) z roku 2007, kterýžto nakonec nebyl standardizován, nicméně už jej implementuje např. framework "Apache CXF":http://cxf.apache.org. Syntaxe FIQL(Feed Item Query Language) je výhodná svým prvoplánovým určením pro zápis v URI(Uniform Resource Identifier), díky čemuž ji není potřeba zakódovávat. To ovšem můžeš být zároveň nevýhodou, neb kvůli tomu není příliš intuitivní. Jelikož jsem si stejně musel napsat vlastní parser, rozhodl jsem se tuto syntaxi využít a rozšířit ji ještě o alternativní zápis ala Java. Tím vznikl RESTful Resource Query Language (RSQL).
20 1 Jakub Jirůtka
21 1 Jakub Jirůtka
22 1 Jakub Jirůtka
h2. RSQL
23 1 Jakub Jirůtka
24 2 Jakub Jirůtka
*UPOZORNĚNÍ: Integrace RSQL ještě není úplně dokončená, takže pro některé zdroje a konkrétní atributy nemusí fungovat správně! Ještě nefungují podmínky pro XLink vazby a možná dojde k drobným změnám v syntaxi (použití uvozovek).*
25 1 Jakub Jirůtka
26 2 Jakub Jirůtka
RSQL(RESTful Resource Query Language) umožňuje vyhledávat záznamy (Atom Entry) podle jejich strukturovaných elementů (atributů) v Atom Content. Tím se také odlišuje od FIQL(Feed Item Query Language), který je naopak určený pouze pro vyhledávání záznamů podle jejich _metadat_ v Atom Entry. Všechny zdroje KOSapi jsou koncipované tak, že Atom elementy využívají pouze pro metadata a vlastní data z KOSu jsou obsažená v Atom Content ve strukturované podobě (závisí na _Content-Type_, výchozí je XML(Extensible Markup Language)). RSQL(RESTful Resource Query Language) dotazy se v KOSapi překládají na SQL(Structured Query Language) dotazy do KOSu.
27 1 Jakub Jirůtka
28 2 Jakub Jirůtka
Jak již bylo napsáno, RSQL(RESTful Resource Query Language) umožňuje dva způsoby zápisu - „URI-friendly“ syntaxi FIQL(Feed Item Query Language) a alternativní syntaxi inspirovanou Javou.
29 1 Jakub Jirůtka
30 2 Jakub Jirůtka
31 1 Jakub Jirůtka
h3. Struktura výrazu
32 1 Jakub Jirůtka
33 1 Jakub Jirůtka
Výraz se skládá z jednoho či více _porovnání_, které se spojují logickými (Booleovskými) operátory.
34 1 Jakub Jirůtka
35 1 Jakub Jirůtka
* _výraz_ = [ "(" ] ( _podmínka_ / _výraz_ ) [ _logický-operátor_ ( _podmínka_ / _výraz_ ) ] [ ")" ]
36 1 Jakub Jirůtka
* _podmínka_ = _selektor_ _operátor-porovnání_ _argument_
37 1 Jakub Jirůtka
* _logický-operátor_ = "@;@" / "@&@" / "@ and @" / "@,@" / "@|@" / "@ or @"
38 1 Jakub Jirůtka
* _operátor-porovnání_ = ( "@==@" / "@=@" / "@!=@" / "@=lt=@" / "@<@" / "@=le=@" / "@<=@" / "@=gt=@" / "@>@" / "@=ge=@" / "@>=@" )
39 1 Jakub Jirůtka
* _selektor_ = @[a-zA-Z_]([a-zA-Z_0-9\-])*@
40 1 Jakub Jirůtka
* _argument_ = ( "@'@" @[^']+@ "@'@" / "@"@" @[^"]+@ "@"@" )
41 1 Jakub Jirůtka
42 1 Jakub Jirůtka
43 1 Jakub Jirůtka
h3. Logické operátory
44 1 Jakub Jirůtka
45 3 Jakub Jirůtka
|_. Název	|_. FIQL		|_. Alternativní	|
46 3 Jakub Jirůtka
| AND		| @;@		| "@ and @"		|
47 3 Jakub Jirůtka
| OR		| @,@		| "@ or @"		|
48 1 Jakub Jirůtka
49 1 Jakub Jirůtka
Operátor AND má standardně přednost, tj. všechny operátory OR se vyhodnocují až po něm. Toto chování samozřejmě lze změnit pomocí uzávorkování výrazů.
50 1 Jakub Jirůtka
51 1 Jakub Jirůtka
52 1 Jakub Jirůtka
h3. Operátory porovnání
53 1 Jakub Jirůtka
54 1 Jakub Jirůtka
|_. Název			|_. FIQL		|_. Alternativní		|_. Platné datové typy							|
55 1 Jakub Jirůtka
| rovná se			| @==@		| @=@				| textový řetězec, číslo, datum, výčtový typ, XLink	|
56 1 Jakub Jirůtka
| nerovná se		        | @!=@		| @!=@				| textový řetězec, číslo, datum, výčtový typ, XLink	|
57 1 Jakub Jirůtka
| menší než			| @=lt=@	| @<@				| číslo, datum									|
58 1 Jakub Jirůtka
| menší nebo rovno	| @=le=@	| @<=@				| číslo, datum									|	
59 1 Jakub Jirůtka
| větší než			| @=gt=@	| @>@				| číslo, datum									|
60 1 Jakub Jirůtka
| větší nebo rovno	| @=ge=@	| @>=@				| číslo, datum									|
61 1 Jakub Jirůtka
62 1 Jakub Jirůtka
Porovnávání textových řetězců nezohledňuje velikost písmen (je _case insensitive_). Pokud je URL parametr [[URLParameters#multilang|multilang]] nastaven na @true@, tak zohledňuje texty v obou jazycích. V opačném případě vyhledává pouze ve zvoleném jazyce (podle Accept-Language, nebo  [[URLParameters#lang|lang]]).
63 1 Jakub Jirůtka
64 1 Jakub Jirůtka
Při porovnávání řetězců lze využít i _divoké karty_ a hledat pomocí nich i jen podle části řetězce. Způsob zápisu je stejný jako v SQL _LIKE_, pouze s tím rozdílem, že místo @%@ se zde používá @*@. Například podmínce @name='prog*'@ vyhoví všechny předměty, jejichž název začíná na „prog“ (opět bez ohledu na velikost písmen).
65 1 Jakub Jirůtka
66 1 Jakub Jirůtka
V případě elementů, které reprezentují výčtový typ, je nutné jako argument uvádět _výčtový název_ (enum), nikoli jeho lokalizovaný popis.
67 1 Jakub Jirůtka
68 1 Jakub Jirůtka
Argumentem pro XLink je identifikátor záznamu použitý v URI(Uniform Resource Identifier), což většinou bývá kód nebo ID.
69 1 Jakub Jirůtka
70 1 Jakub Jirůtka
71 1 Jakub Jirůtka
h3. Parametry
72 1 Jakub Jirůtka
73 1 Jakub Jirůtka
RSQL(RESTful Resource Query Language) výraz se zapisuje do URL parametru [[URLParameters#query|query]] a je možné ho efektivně kombinovat s parametry [[URLParameters#startIndex|startIndex]], [[URLParameters#maxResults|maxResults]] a [[URLParameters#orderBy|orderBy]].
74 1 Jakub Jirůtka
75 1 Jakub Jirůtka
76 1 Jakub Jirůtka
h3. Příklady
77 1 Jakub Jirůtka
78 2 Jakub Jirůtka
* "<code>/courses?query=name=='*prog*'</code>":https://kosapi.fit.cvut.cz/api/3/courses?query=name=%27prog*%27 - vrátí předměty, jejichž název obsahuje „prog“
79 2 Jakub Jirůtka
* "<code>/courses?query=credits>'5'</code>":https://kosapi.fit.cvut.cz/api/3/courses?query=credits%3E%275%27 - vrátí předměty za více než 5 kreditů
80 2 Jakub Jirůtka
* "<code>/courses?query=season=='WINTER';(completion=='CLFD_CREDIT',completion=='CREDIT')</code>":https://kosapi.fit.cvut.cz/api/3/courses?query=season==%27WINTER%27;%28completion==%27CLFD_CREDIT%27,completion==%27CREDIT%27%29 - vrátí předměty, které se vyučují v zimním semestru a jsou zakončené klasifikovaným zápočtem nebo zápočtem
81 2 Jakub Jirůtka
* "/teachers?query=extern=='true'&orderBy=lastName&maxResults=50":https://kosapi.fit.cvut.cz/api/3/teachers?query=extern==%27true%27&orderBy=lastName&maxResults=50 - vrátí vyučující externisty, seřadí je podle příjmení a výstup omezí na max. 50 záznamů
82 1 Jakub Jirůtka
83 1 Jakub Jirůtka
h3. Pár slov k implementaci
84 1 Jakub Jirůtka
85 1 Jakub Jirůtka
TODO
86 2 Jakub Jirůtka
87 2 Jakub Jirůtka
__
88 2 Jakub Jirůtka
^1^ To znamená, že aplikace si nebudou uchovávat lokální kopii celé ani části databáze IS (cache se tím nevylučuje), ale budou je přímo získávat z webové služby.