Benötigt wird ein verteiltes System zum Nachschlagen von Schlüsselwerten

Question

Ich brauche eine Möglichkeit, Key-Value-Lookups über (potenziell) Hunderte von GB an Daten durchzuführen. Idealerweise etwas, das auf einer verteilten Hashtabelle basiert, die gut mit Java funktioniert. Es sollte fehlertolerant sein, und Open Source.

Der Speicher sollte beständig sein, würde aber idealerweise Daten im Speicher zwischenspeichern, um den Vorgang zu beschleunigen.

Es sollte in der Lage sein, gleichzeitige Lese- und Schreibvorgänge von mehreren Rechnern aus zu unterstützen (Lesevorgänge werden allerdings 100 Mal häufiger vorkommen). Der Zweck besteht im Wesentlichen darin, eine schnelle erste Abfrage von Benutzer-Metadaten für einen Webdienst durchzuführen.

Kann jemand etwas empfehlen?

Answer 1

Vielleicht möchten Sie sich informieren über Hazelcast . Es ist verteilt/partitioniert, superleicht, einfach und kostenlos.

java.util.Map map = Hazelcast.getMap ("mymap");
map.put ("key1", "value1");

Herzliche Grüße,

-talip

Answer 2

Offener Akkord ist eine Implementierung des CHORD Protokoll in Java. Es handelt sich um ein verteiltes Hash-Tabellen-Protokoll, das Ihren Bedürfnissen perfekt entsprechen sollte.

Answer 3

Je nach Anwendungsfall, Terrakotta kann genau das sein, was Sie brauchen.

Answer 4

Sie sollten wahrscheinlich angeben, ob es persistent sein soll oder nicht, ob es im Speicher sein soll oder nicht, usw. Sie könnten es versuchen: http://www.danga.com/memcached/

Answer 5

Zu den verteilten Hash-Tabellen gehören Tapestry, Chord und Pastry. Eine dieser Tabellen sollte Ihren Anforderungen entsprechen.