Google BigTable

Google använder en egenutvecklad databas för att lagra stora mängder information, upp till 9 petabyte klarar BigTable av att lagra:

Bigtable is a distributed storage system for managing structured data that is designed to scale to a very large size: petabytes of data across thousands of commodity servers. Many projects at Google store data in Bigtable, including web indexing, Google Earth, and Google Finance.

These applications place very different demands on Bigtable, both in terms of data size (from URLs to web pages to satellite imagery) and latency requirements (from backend bulk processing to real-time data serving). Despite these varied demands, Bigtable has successfully provided a flexible, high-performance solution for all of these Google products.

In this paper we describe the simple data model provided by Bigtable, which gives clients dynamic control over data layout and format, and we describe the design and implementation of Bigtable.

http://labs.google.com/papers/bigtable-osdi06.pdf

Tyvärr är BigTable inte öppet att använda utanför Google så därför finns det ett antal opensource projekt som är snarlika: HBase samt Hypertable.

2 reaktioner på ”Google BigTable

  1. Vi testar båda projekten, hbase är mer moget än hypertable men hypertable har nog mer potential i form av prestanda.

    Kommer skriva en del på vår blogg om detta framöver.

Lämna ett svar

Din e-postadress kommer inte publiceras. Obligatoriska fält är märkta *