Groovy und CouchDB - Berlin Expert Daysbed-con.org/images/files/bed2011/bed2011-groovycouchdb.pdf · 2016-01-15 · Groovy Dynamisch optionale Typisierung (Keyword def) Skriptfähigkeit

18.04.2011

Groovy und CouchDB

Ein traumhaftes Paar

Thomas Westphal

Herzlich Willkommen

Thomas Westphal

► Software Engineer @ adesso AG

► Projekte, Beratung, Schulung

► www.adesso.de

► [email protected]

18.04.2011 Groovy und CouchDB2

http://www.adesso.de/

mailto:[email protected]

Agenda

►Warum?

►Groovy

► CouchDB

► 4 Wege

►Was haben wir davon?


Warum?


► Ausdrucksschwacher Code

► Altlasten in Java

► RDBMS

Ausgangsbasis


Groovy

Wie?

Ausgangsbasis


CouchDBDaten

Arten von Daten


Strukturiert

► Beispiel Kommentar

Unstrukturiert

► Beispiel Kommentar

► Beispiel Umfragen

Strukturierte Daten


class Artikel {

String titel

String text

Map<String, Kommentar> kommentare

}

class Kommentar {

String email

String text

Date erstellungsZeitpunkt

}

Beispiel Kommentar

Unstrukturierte Daten


Beispiel Umfragen

def formulardaten1 = [

formularName: 'Umfrage1'‚

name: 'Westphal'‚

vorname: 'Thomas'

]

def formulardaten2 = [

formularName: 'Testformular2'‚

kanal: '1'‚

nutzer: [

name: 'Westphal'‚

vorname: 'Thomas']

]

Groovy


Was ist Groovy?

Groovy

… ist eine dynamische Sprache für die JVM.

► Elemente aus Sprachen wie Python, Ruby und Smalltalk

► Java-ähnliche Syntax

► seit 2003

► aktuelle Version 1.7.8

► http://groovy.codehaus.org


http://groovy.codehaus.org/

Groovy

Dynamisch

► optionale Typisierung (Keyword def)

► Skriptfähigkeit

► Meta-Programmierung (Meta Object Protocol)

► AST-Transformation

Java Plattform

► läuft auf jeder JVM

► Zugriff auf jegliche Java-Bibliotheken (Jakarta Commons, JUnit)

► Zugriff von Java auf Groovy-Objekte


Groovy

Features (Auswahl):

► Expressive Syntax

► Native Schreibweise für Listen und Maps

► Builder (HTTPBuilder, JsonGroovyBuilder)

► GPath

► Grails


CouchDB


Was ist

CouchDB?

CouchDB

… ist eine dokumentenorientierte Datenbank.

► Cluster of unreliable commodity hardware Data Base

► seit 2005


► http://couchdb.apache.org


http://couchdb.apache.org/

CouchDB

Ein anderer Weg!


JSON:

{„rechnungsnummer“: 19881,„rechnungsbetrag“: 35.75,„kunde“: {„name“: „Firma Pahl & Co.“,„adresse“: {„ort“: „Braunschweig“,„strasse“: „Kaiserstr. 19“

}}

}

Reale Daten Reale Dokumente

CouchDB

Ein anderer Weg!


Adresse 2:

...„adresse“: {

„ort“: „Halle/Saale“„postfach“: „0815“

}...

Schemafrei

Adresse 1:

...„adresse“: {„ort“: „Braunschweig“„strasse“: „Kaiserstr. 19“

}...

CouchDB

Zugriff!


POST

GET

PUT

DELETE

REST-HTTP-Schnittstelle

Create

Read

Update

Delete

CouchDB

Zugriff!



Die Datenbank für Rechnungen erstellen:

curl -X PUT http://127.0.0.1:5984/rechnungen

Antwort:

{"ok":true}

CouchDB

Zugriff!



Eine Rechnung erstellen:

curl -X POST http://127.0.0.1:5984/rechnungen -H 'Content-Type: application/json‘ -d '{"rechnungsnummer": 19881, ...}'

Antwort:

{"ok":true,"id":"a6fb0ae60611d87ced0c0dd6b30c023c","rev":"1-8dd617694443d5dfc6b55a9e57a8a4d3"}

CouchDB

Zugriff!



Die Rechnung abrufen:

curl -X GET http://127.0.0.1:5984/rechnungen/a6fb0ae60611d87ced0c0dd6b30c023c

Antwort:

{"_id":"a6fb0ae60611d87ced0c0dd6b30c023c","_rev":"1-8dd617694443d5dfc6b55a9e57a8a4d3","rechnungsnummer":19881,...}

CouchDB

Zugriff!



Eine Rechnung ändern:

curl -X PUT http://127.0.0.1:5984/rechnungen/a6fb0ae60611d87ced0c0dd6b30c023c -d '{"_id":"a6fb0ae60611d87ced0c0dd6b30c023c","_rev":"1-8dd617694443d5dfc6b55a9e57a8a4d3","rechnungsnummer": ... }'

Antwort:

{"ok":true,"id":"a6fb0ae60611d87ced0c0dd6b30c023c","rev":"2-06d624eadf589bd8d2eaf99af36641af"}

CouchDB

Zugriff!



Eine Rechnung löschen: So nicht!

curl -X DELETE http://127.0.0.1:5984/rechnungen/a6fb0ae60611d87ced0c0dd6b30c023c

Antwort:{"error":"conflict","reason":"Document update conflict."}

Eine Rechnung löschen:

curl -X DELETE http://127.0.0.1:5984/rechnungen/a6fb0ae60611d87ced0c0dd6b30c023c?rev=2-06d624eadf589bd8d2eaf99af36641af

Antwort:{"ok":true,"id":"a6fb0ae60611d87ced0c0dd6b30c023c","rev":"3-1fd850455664ff9c32fec6b9bbd4545c"}

CouchDB

Zugriff? Views!


Query-Engine

► = Ansichten

► MapReduce

► JavaScript

► Ergebnis: Schlüssel-Werte Paare

► temporäre Views

► permanente Views = Designdokumente

CouchDB

Zugriff? Views!


Query-Engine

Rechnungen filtern und nach Rechnungsnummer sortieren:

function(doc) {if (doc.rechnungsnummer) {emit({"rechnungsnummer":doc.rechnungsnummer}, doc);

}}

CouchDB

Zugriff? Views!


Query-Engine

Rechnungen filtern und nach Rechnungsnummer sortieren:

curl -X GET http://localhost:5984/rechnungen/_design/rechnungen/_view/alle

Antwort:

{"total_rows":3,"offset":0,"rows":[ {"id":"a6fb0ae60...","key":{"rechnungsnummer“...}},{"id":"a6fb0ae60...","key":{"rechnungsnummer“...}}, {"id":"a6fb0ae60...","key":{"rechnungsnummer"...}}]}

CouchDB

Zugriff? Views!


Query-Engine

Rechnungen filtern mit Parameter (Browser):

http://localhost:5984/rechnungen/_design/rechnungen/_view/alle?key={rechnungsnummer:19882}

Antwort:{"total_rows":3,"offset":1,"rows":[{"id":"a6fb0ae606...78","key":{"rechnungsnummer“...}}]}

CouchDB

Zugriff? Views!


Query-Engine

Rechnungen und Artikel in getrennten Dokumenten - alle Rechnungen mit

deren Artikel (JOIN) anzeigen:

function(doc) {if (doc.rechnungsnummer && !doc.artikelnummer) {// Dies ist eine Rechnungemit({"rechnungsnummer":doc.rechnungsnummer}, doc);

}if (doc.rechnungsnummer && doc.artikelnummer) {// Dies ist ein Artikelemit({"rechnungsnummer":doc.rechnungsnummer,

"artikelnummer":doc.artikelnummer}, doc);}

}

4 Wege


4 Wege


jcouchdb Groovy GrailsEktorp

4 Wege



jcouchdb

… ist ein Java 5 CouchDB Treiber.

► für dynamische Daten und POJOs

► nutzt die svenson JSON Bibliothek


► http://code.google.com/p/jcouchdb


jcouchdb

http://code.google.com/p/jcouchdb

http://code.google.com/p/jcouchdb

jcouchdb

Kontakt!


org.jcouchdb.db.Database

Verbindung zur CouchDB herstellen:

def couchDb = new Database(‘localhost’, ‘artikel’)

public class Kommentar extends org.jcouchdb.document.BaseDocument {

private String email;private String text;private Date erstellungsZeitpunkt;

@org.svenson.JSONProperty(value = "type", readOnly = true)public String getType() {

return Kommentar.class.getSimpleName();}

public String getEmail() { return email; }...

}

jcouchdb

Java: Strukturierte Daten


Beispiel Kommentare

Kommentar kommentar1 = new Kommentar();kommentar1.setEmail("[email protected]");kommentar1.setText("Reaktion 1");...

Map<String, Kommentar> kommentare = new HashMap<String, Kommentar>();kommentare.put("kommentar1", kommentar1);kommentare.put("kommentar2", kommentar2);

Artikel artikel = new Artikel();artikel.setTitel("Java und jcouchdb");artikel.setText("Objekte mit Java und jcouchdb in die CouchDb speichern...");artikel.setKommentare(kommentare);

couchDb.createDocument(artikel);

jcouchdb



Beispiel Kommentare

Artikel artikel = new Artikel(titel: "Groovy und jcouchdb",text: "Objekte mit Groovy und jcouchdb in die CouchDb speichern...",kommentare: [

kommentar1: new Kommentar(email: "[email protected]", text: "Reaktion 1"),

kommentar2: new Kommentar(email: "[email protected]", text: "Reaktion 2")

])

couchDb.createDocument(artikel)

jcouchdb

Groovy: Strukturierte Daten


Beispiel Kommentare

Map<String, String> kommentar1 = new HashMap<String, String>();kommentar1.put("email", "[email protected]");kommentar1.put("text", "Reaktion 1");...

Map<String, Map<String, String>> kommentare = new HashMap<String, Map<String, String>>();

kommentare.put("kommentar1", kommentar1);kommentare.put("kommentar2", kommentar2);

Map<String, Object> artikel = new HashMap<String, Object>();artikel.put("titel", "Java und jcouchdb");artikel.put("text", "Maps mit Java und jcouchdb in die CouchDb speichern...");artikel.put("kommentare", kommentare);

couchDb.createDocument(artikel);

jcouchdb

Java: Unstrukturierte Daten


Beispiel Kommentare

couchDb.createDocument([titel: "Groovy und jcouchdb",text: "Maps mit Groovy und jcouchdb in die CouchDb speichern...",kommentare: [

kommentar1: [email: "[email protected]", text: "Reaktion 1"],kommentar2: [email: “[email protected]", text: "Reaktion 2"]

]])

jcouchdb

Groovy: Unstrukturierte Daten


Beispiel Kommentare

4 Wege



4 Wege



Ektorp

… ist eine Java Persistenz API für CouchDB.

► für dynamische Daten und POJOs

► nutzt die Jackson JSON Bibliothek


► http://code.google.com/p/ektorp


Ektorp

http://code.google.com/p/ektorp

http://code.google.com/p/ektorp

Ektorp

Kontakt!


org.ektorp.CouchDbConnector


def httpClient = new StdHttpClient.Builder().host(‘localhost’).port(5984).build()

def instance = new StdCouchDbInstance(httpClient)

CouchDbConnector couchDb = new StdCouchDbConnector(‘artikel’, instance)

@org.codehaus.jackson.annotate.JsonIgnoreProperties( ['id', 'revision'] )@org.codehaus.jackson.map.annotate.JsonSerialize(include=Inclusion.NON_NULL)class Kommentar {

@org.codehaus.jackson.annotate.JsonProperty("_id")String id

@org.codehaus.jackson.annotate.JsonProperty("_rev")String revision

String emailString textDate erstellungsZeitpunktString type = Kommentar.class.getSimpleName()

}

Ektorp



Beispiel Kommentare

Kommentar kommentar1 = new Kommentar();kommentar1.setEmail("[email protected]");kommentar1.setText("Reaktion 1");

...

Map<String, Kommentar> kommentare = new HashMap<String, Kommentar>();kommentare.put("kommentar1", kommentar1);kommentare.put("kommentar2", kommentar2);

Artikel artikel = new Artikel();artikel.setTitel("Java und Ektorp");artikel.setText("Objekte mit Java und Ektorp in die CouchDb speichern...");artikel.setKommentare(kommentare);

couchDb.create(artikel);

Ektorp



Beispiel Kommentare

Artikel artikel = new Artikel(titel: "Groovy und Ektorp",text: "Objekte mit Groovy und Ektorp in die CouchDb speichern...",kommentare: [

kommentar1: new Kommentar(email: "[email protected]", text: "Reaktion 1"),

kommentar2: new Kommentar(email: "[email protected]", text: "Reaktion 2")

])

couchDb.create(artikel)

Ektorp



Beispiel Kommentare

Map<String, String> kommentar1 = new HashMap<String, String>();kommentar1.put("email", "[email protected]");kommentar1.put("text", "Reaktion 1");...

Map<String, Map<String, String>> kommentare = new HashMap<String, Map<String, String>>();

kommentare.put("kommentar1", kommentar1);kommentare.put("kommentar2", kommentar2);

Map<String, Object> artikel = new HashMap<String, Object>();artikel.put("titel", "Java und Ektorp");artikel.put("text", "Maps mit Java und Ektorp in die CouchDb speichern...");artikel.put("kommentare", kommentare);

couchDb.create(artikel);

Ektorp

Java: Unstrukturierte Daten


Beispiel Kommentare

couchDb.create([titel: "Groovy und Ektorp",text: "Maps mit Groovy und Ektorp in die CouchDb speichern...",kommentare: [

kommentar1: [email: "[email protected]", text: "Reaktion 1"],kommentar2: [email: “[email protected]", text: "Reaktion 2"]

]])

Ektorp



Beispiel Kommentare

4 Wege



4 Wege



HTTPBuilder

… ist ein Groovy Modul für HTTP-basierende Dienste.

► bietet einen RESTClient

► bietet Builder und Parser für JSON

► nutzt Apache's HttpClient Bibliothek


► http://groovy.codehaus.org/modules/http-builder/home.html


http://groovy.codehaus.org/modules/http-builder/home.html



HTTPBuilder

Kontakt!


groovyx.net.http.RESTClient


def couchDb = new RESTClient(‘http://localhost:5984’)

class Kommentar {

String emailString textDate erstellungsZeitpunktString type = Kommentar.class.getSimpleName()

}

HTTPBuilder



Beispiel Kommentare

Artikel artikel = new Artikel(titel: ‘Groovy und HTTPBuilder’,text: ‘Objekte mit Groovy und HTTPBuilder in die CouchDb speichern...’,kommentare: [

kommentar1: new Kommentar(email: ‘[email protected]’, text: ‘Reaktion 1’),

kommentar2: new Kommentar(email: ‘[email protected]’, text: ‘Reaktion 2’)

])

def response = couchDb.post(path: ‘artikel’,contentType: JSON, requestContentType: JSON,body: artikel)

HTTPBuilder



Beispiel Kommentare

def response = couchDb.put(path: "artikel/${uuid}", contentType: JSON, requestContentType: JSON,body: [

titel: 'Groovy und HTTPBuilder',text: 'Maps mit Groovy und HTTPBuilder in die CouchDb speichern...',kommentare: [

kommentar1: [ email: ‘[email protected]', text: 'Reaktion 1' ],kommentar2: [ email: ‘[email protected]', text: 'Reaktion 2' ]

]])

HTTPBuilder



Beispiel Kommentare

4 Wege



4 Wege



Grails CouchDB Plugin

… ist ein Grails Plugin für CouchDB.

► bietet GORM-Funktionalität

► nutzt die jcouchdb Bibliothek


► http://www.grails.org/plugin/gorm-couchdb


CouchDB Plugin


Kontakt!


Konfigurationsdatei

Datei DataSource.groovy:

couchdb {host = "localhost"port = 5984database = "artikel"username = ""password = ""

}dataSource {

configClass = CouchDomainConfiguration.class}

@grails.plugins.couchdb.CouchEntity(type='kommentar')class Kommentar {

String emailString textDate erstellungsZeitpunkt

static constraints = {}

}


Grails: Strukturierte Daten


Beispiel Kommentare

def kommentarInstance = new Kommentar(params)kommentarInstance.save(flush: true)




Beispiel Kommentare

► Speichern und Löschen:kommentarInstance.save( flush: true)kommentarInstance.delete(flush: true)

► Zusätzliche Felder:def id = kommentarInstance.iddef version = kommentarInstance.version

► Auslesen:def instance = Kommentar.get(id)def instanceList = Kommentar.list(params)def instanceTotal = Kommentar.count()




Beispiel Kommentare

4 Wege



4 Wege



Grails + strukturierte Daten

CouchDB + Groovy

jcouchdb und Ektorp

jcouchdb und Ektorp

jcouchdb

► CouchDB Plugin

► auch ohne Treiber möglich

► flexibel durch Annotations

► Out-of-the-Box CRUD

► CouchdDBUpdater

Groovy und CouchDB


Was haben wir davon?

Groovy und CouchDB

► starke Ausdrucksmöglichkeiten in Groovy

> Listen und Maps

> JSON

> Groovy-Objekte



Verständlich!

Groovy und CouchDB

► sehr einfacher Zugriff auf die CouchDB

> viele Wege

> einfaches JSON-Format

► Dokumente passen besser zu OOP und realen Objekten



Einfach!

Groovy und CouchDB

► CouchDB ist

> schemalos

> sehr einfach replizierbar



Flexibilität!


Groovy und CouchDB

Einfachheitermöglicht den Blick für das

Wesentliche



Vielen Dank für Ihre Aufmerksamkeit.

Relax!

[email protected]

Wir suchen Sie als

Software-Architekt (m/w)

Projektleiter (m/w)

Senior Software Engineer (m/w)

http://www.adesso.de/

mailto:[email protected]

Documents

Groovy und CouchDB - Berlin Expert Daysbed-con.org/images/files/bed2011/bed2011-groovycouchdb.pdf · 2016-01-15 · Groovy Dynamisch optionale Typisierung (Keyword def) Skriptfähigkeit