Google introduceert nosql-database Cloud Bigtable

Google start per vandaag met een nieuwe service, gebaseerd op zijn Bigtable-databasesoftware met de naam Cloud Bigtable. De Cloud Bigtable-dienst kan benaderd worden via de opensource Apache HBase-api.

Het bedrijf kondigt de nieuwe service woensdag aan op zijn clouddienstblog. Bigtable bedient onder andere al Googles Search, Gmail en Analytics en de schaalbare nosql-databaseservice komt nu ook beschikbaar voor andere bedrijven via het Google Cloud Platform.

Met Cloud Bigtable richt Google zich op grote organisaties die op zoek zijn naar schaalbare rekenkracht voor data-intensieve toepassingen en die zich met het werken aan applicaties in plaats van het onderhouden en bouwen van een database-infrastructuur willen bezighouden. Naast bestaande applicaties, moet het systeem ook een motor worden voor het steeds volwassener wordende Internet of Things.

Het systeem schaalt automatisch mee met de eisen van de gebruiker. De latency van het systeem ligt onder de 10ms, schrijft het bedrijf op zijn blog. Het systeem is toegankelijk via onder andere Apache's HBase-api en daarmee is integratie met bestaande big-data-oplossingen als Hadoop mogelijk. Alle data wordt automatisch gerepliceerd en versleuteld opgeslagen.

Tegen Techcrunch zegt een medewerker van Google dat Cloud Datastore binnen het App Engine-platform ook gebruikmaakt van een service die gebaseerd is op Bigtable, maar dat deze service zich vooral richt op veel leesacties van web-applicaties en mobiele apps. Cloud Bigtable is ontworpen voor grote bedrijven en instellingen die veel data moeten verwerken en waar de taken complexer zijn, bijvoorbeeld een organisatie die data moet streamen en analyseren uit een enkele grote database.

De nieuwe service is beschikbaar in bèta, wat betekent dat er nog geen officiële technische ondersteuning is.

Reacties (16)

[Verwijderd]

Mis ik in de vergelijking nu Azure DocumentDB, of doet dit iets anders?

[Yaz]

De vergelijking met Azure DocumentDB is natuurlijk alleen maar interessant als het product een gelijkwaardige dienst bied en jij een beter product hebt dan de andere diensten in je vergelijking (Graph is van Google).

Nu ben ik geen NoSQL dienst expert dus ik kan niet met zekerheid zeggen dat ze hetzelfde bieden (maar het lijkt er aan de commerciële teksten wel op) dus ik denk dat het fout gaat op puntje 2.

Maar niet alleen Azure DocumentDB mist, ook Amazon DynamoDB zou een concurrent kunnen zijn en dus in het vergelijkingslijstje kunnen horen.

[Reactie gewijzigd door Yaz op 1 augustus 2024 01:08]

[Verwijderd]

De vergelijking met Azure DocumentDB is natuurlijk alleen maar interessant als het product een gelijkwaardige dienst bied en jij een beter product hebt dan de andere diensten in je vergelijking (Graph is van Google).

Nu ben ik geen NoSQL dienst expert dus ik kan niet met zekerheid zeggen dat ze hetzelfde bieden (maar het lijkt er aan de commerciële teksten wel op) dus ik denk dat het fout gaat op puntje 2.

Maar niet alleen Azure DocumentDB mist, ook Amazon DynamoDB zou een concurrent kunnen zijn en dus in het vergelijkingslijstje kunnen horen.

Dit zijn de alternatieven.
Zie: Google introduces Cloud Bigtable managed NoSQL database to process data at scale

The move is Google’s latest step toward the leadership position of the growing public cloud market, where Amazon Web Services currently reigns supreme and Microsoft Azure is rapidly introducing new services.

Amazon has its DynamoDB managed NoSQL database, which built on the concepts laid out in Amazon’s Dynamo paper, and now Google has Cloud Bigtable, based on Bigtable. Microsoft, for its part, made its own managed NoSQL database, Azure DocumentDB, earlier this year. Meanwhile IBM has cloud database technology Cloudant.

[Henrikop]

Amazon has its DynamoDB managed NoSQL database, which built on the concepts laid out in Amazon’s Dynamo paper.

Een paar weken terug was ik op een Q&A met Werner Vogels in Amsterdam. Daar deed iemand een presentatie van Cassandra en haalde toen ook dit stukje tekst aan, waarop Werner (een tikkeltje fel) uithaalde en zei dat DynamoDB totaal anders is geworden dan de eerste DynamoDB paper beschrijft.

Just saying

Overigens denk ik dat dit een killer product is die het veel big data sales de das om zullen doen.

[klakkie.57th]

mits je er natuurlijk geen probleem mee hebt dat je "Big Data" in een public cloud staat. Het feit dat Google claimed dat ze de data versleutelen moet je maar voor je zelf uitmaken of dit voldoende is om ze te vertrouwen.

Eens je de fysieke hardware uithanden geeft, heb je geen controle meer over het geheel.

[Reactie gewijzigd door klakkie.57th op 1 augustus 2024 01:08]

[Martao]

Dat ligt er nogal aan wat voor data je er in opslaat. Voor de meeste data zal opslaan in de cloud een prima optie zijn.

[HerrPino]

Is dat zo? Ik denk zelfs dat veruit de meeste data op de een of andere manier concurrentie of privacy gevoelige data is. Cloud opslag is voor commerciële doeleinden eigenlijk sowieso geen optie ... als je CDN's buiten beschouwing laat.

[geertdo]

De vergelijking met Azure DocumentDB is natuurlijk alleen maar interessant als het product een gelijkwaardige dienst bied en jij een beter product hebt dan de andere diensten in je vergelijking (Graph is van Google).

Dus 2 vragen:
- Is dit een gelijkwaardige dienst? (lijkt mij wel namelijk)
- Waarom is het alleen maar interessant als je een beter product hebt? (niet mee eens namelijk)

Wel eigenaardig dat de GA (general availability) van DocumentDB recentelijk geen Tweakers nieuws was en dit wel. Of überhaupt iets over DocumentDB sinds het ontstaan op 21 augustus 2014.
http://azure.microsoft.co...-now-generally-available/

Ik heb begrepen dat DocumentDB ook samenwerkt met HBase en HDInsight (Hadoop on Azure).

Performance uitdrukken in MB/s per dollar Lastig vergelijken met DocumentDB

En latency, DocumentDB: Under 15ms write latency and single digit read latencies for 99% requests maar dat was misschien nog niet op low latency SSD.

Rode en groene appels vergelijken?

[Yaz]

Dus 2 vragen:
- Waarom is het alleen maar interessant als je een beter product hebt? (niet mee eens namelijk)

Artikel is allang uit de lijst maar toch nog even

De grafiek kwam van Google af. Je wilt in zo'n advertorial als best naar voren komen (staat raar op je eigen site, als slechtste uit de bus komen) dus daar zoek je de juiste concurrenten bij. Het gros van de lezers van deze graph is niet bekend met de materie en onthoud alleen maar "Goh, dat doet Google goed!". De rest prikt er doorheen gaat vragen stellen zoals "Maar hoe zou het vergelijken met concurrent X".

Het gaat Google om de eerste groep.

[kozue]

Ik vind het sowieso maar rare vergelijkingen. Mb per dollar? Klinkt alsof ze goed hebben gezocht naar een punt waarop ze beter waren, niets konden vinden en daarom de prijs net zo lang hebben verlaagt totdat ze een mooie grafiek konden tonen.
Prijs in geld zegt bij Google sowieso niets. Je betaald bij Google altijd extra kosten in de vorm van privacy. Gezien hun track record van de afgelopen jaren zullen ze zelf ook wel door je data zitten te struinen. Daar veranderd encrypted oplslag helemaal niets aan want Google heeft natuurlijk gewoon een master key op alle data.

[keesdewit]

Als Azure DocumentDB dezelfde performance heeft dan zie ik het verschil ook niet en zou het een vergelijking waard zijn.

[Reactie gewijzigd door keesdewit op 1 augustus 2024 01:08]

[MrVulcan]

HBase en Cassandra zijn allebei een implementatie van Bigtable n.a.v. de white paper die Google daarvan gereleased heeft in 2006. Vandaar dat de comparison zich daar op richt. Omdat Google hun implementatie compatible heeft gemaakt met de HBase-API zouden deze relatief makkelijk uitgewisseld moeten kunnen worden.

Azure DocumentDB gebruikt onderliggend Elasticsearch als opslag en is gebaseerd op JSON. Een hele andere technologie dus en kan dus minder makkelijk worden geintegreerd in bestaande systemen.

[Martao]

Het is inderdaad niet hetzelfde. DocumentDB is een document database, zoals bijvoorbeeld ook MongoDB. Bigtable is een (wide) column store.

Je opmerking dat het minder makkelijk kan worden geintegreerd lijkt mij een slag in de lucht.

[borft]

volgens mij legt ie het precies uit. Google's could bigtable is compatible met HBase, en daardoor een drop-in replacement (== makkelijke integratie).

[MrVulcan]

Punt is dat Google met het aanbieden van Bigtable klanten wil trekken die nu al gebruik maken (of willen gaan maken) van een open-source implementatie. Daarom vind ik het logisch dat ze hun vergelijkingen daarop afstemmen. Daarmee laat Google namelijk zien dat ze zelf de beste implementatie hebben van Bigtable.

Een vergelijking met andere technologieën lijkt me minder interessant omdat een DocumentDB en wide column store andere doelen hebben. Daarom snap ik niet waarom hier naar gevraagd wordt.

[NEO256]

- Verwijdert. Heb me vergist in de bedrijfsnaam -

[Reactie gewijzigd door NEO256 op 1 augustus 2024 01:08]