Auf welchen Datenbanken laufen die größten Websites im World Wide Web?

Question

Diese Frage soll als Liste der Datenbanken und ihrer Konfigurationen dienen, die von den großen Websites verwendet werden, und wäre eine gute Referenz für alle, die ihre Website auf die Größe von Twitter, Facebook oder sogar Google skalieren wollen.

Bitte beschränken Sie Ihre Antworten auf ein Minimum und geben Sie alle verwendeten Quellen an.

EDIT:

Außerdem, bitte fett sowohl den Namen der Website als auch der Datenbank, um das Scannen zu erleichtern.

Answer 1

Yahoo.de

• PostgreSQL (geändert) - Ein Client kann sich mit jedem beliebigen Knoten des Clusters (oder einer durch Richtlinien eingeschränkten Teilmenge) verbinden. Eine Abfrage fließt vom Client zu dem Server, mit dem er sich verbinden möchte. Der SQL-Compiler auf diesem Knoten kompiliert und optimiert die Abfrage auf diesem einzelnen Knoten (keine Parallelität).

Yahoo.com-Statistiken:

• 24 Milliarden Ereignisse pro Tag
• 2-Petabyte, behauptet größte Datenbank (März 2008)

Quelle:

• http://perspectives.mvdirona.com/2008/05/23/PetascaleSQLDBAtYahoo.aspx
• http://www.computerworld.com/s/article/9087918/Size_matters_Yahoo_claims_2_petabyte_database_is_world_s_biggest_busiest

Answer 2

Digg

• MySQL (Relationale Datenbank) für die Skalierung von Lesevorgängen
• MemcacheDB (Key-Value Store) für die Skalierung von Schreibvorgängen

Beide Datenspeicher sind auf mehrere Server verteilt.

Digg-Statistiken:

• 30 Millionen Nutzer
• 26 Millionen Unikate pro Monat
• 2 Milliarden Anfragen pro Monat
• 13.000 Anfragen pro Sekunde, Spitzenwert: 27.000 Anfragen pro Sekunde.

Quellen:

• http://www.krisjordan.com/2008/09/18/joe-stump-scaling-digg-and-other-web-applications/
• http://highscalability.com/scaling-digg-and-other-web-applications

Answer 3

Twitter.com

• MySQL (Relationale Datenbank).
• Cassandra (Mehrdimensionaler, verteilter Schlüsselwertspeicher). Twitter fängt gerade erst an, Cassandra bei Twitter zu nutzen (siehe zweite Quelle).

Im Mai 2008 hatte Twitter 1 MySQL-Instanz für Schreibvorgänge und mehrere MySQL-Slave-Instanzen für Lesevorgänge.

Twitter-Statistiken:

• Benutzer insgesamt: 1+ Million
• Aktive Nutzer insgesamt: 200.000 pro Woche
• Twitter-Nachrichten insgesamt: 3 Millionen/Tag
• 5 % der Twitter-Nutzer sind für 75 % der gesamten Aktivitäten verantwortlich
• 72,5 % aller Nutzer, die in den ersten fünf Monaten des Jahres 2009 beitraten

Quellen:

• http://blog.twitter.com/2008/05/its-not-rocket-science-but-its-our-work.html
• http://blog.evanweaver.com/articles/2009/07/06/up-and-running-with-cassandra/
• http://www.sysomos.com/insidetwitter/
• http://www.techcrunch.com/2008/04/29/end-of-speculation-the-real-twitter-usage-numbers/

Answer 4

Google verwendet BigTable : http://research.google.com/archive/bigtable.html

Answer 5

PlentyOfFish.de mit Microsoft SQL Server:

https://blog.codinghorror.com/scaling-up-vs-scaling-out-hidden-costs/