bigtable数据模型（bigtable数据模型和系统架构）

本篇目录：

1、怎么保证服务可靠性,数据一致性,以及一旦宕机数据恢复2、什么是分布式结构化数据表3、数据库分为哪几种类型?4、大数据常用哪些数据库

怎么保证服务可靠性,数据一致性,以及一旦宕机数据恢复

备份恢复 如果有定期备份服务器数据的策略，可以使用备份数据进行恢复。通常，需要将备份数据还原到服务器上，以恢复丢失的文件和数据库。这可能涉及使用备份软件或通过命令行工具执行相应的恢复操作。

Zab协议是zookeeper专门设计的一种 支持崩溃恢复 的 原子广播协议， 是Zookeeper保证数据一致性的核心算法。

宕机的leader活过来也像follower一样同步数据，来保证数据的一致性。

复制集群确保数据一致性的核心设计是：从上面4点我们可以得出 MongoDB 高可用的如下结论：MongoDB宕机重启之后可以通过checkpoint快速恢复上一个60s之前的数据。

这样，如果NameNode宕机，可以通过SecondaryNameNode中保存的FSImage和EditLog数据恢复出NameNode最近的状态，尽量减少数据的损失；（3）心跳机制和副本重新创建 ① 为了保证NameNode和各个DataNode的联系，HDFS采用了心跳机制。

什么是分布式结构化数据表

结构化数据，简单来说就是数据库。结合到典型场景中更容易理解，比如企业ERP、财务系统；医疗HIS数据库；教育一卡通；政府行政审批；其他核心数据库等。基本包括高速存储应用需求、数据备份需求、数据共享需求以及数据容灾需求。

分布式是指多个系统协同合作完成一个特定任务的系统。它是不同的系统部署在不同的服务器上，服务器之间相互调用。好比多个人一起做不同的事。分布式是解决中心化管理的问题，把所有的任务叠加到一个节点处理，太慢了。

结构化数据（有时称为关系数据）是遵循某种严格架构的数据，因此所有数据都具有相同的字段或属性。共享架构允许使用SQL（结构化查询语言）等查询语言轻松搜索此类数据。

结构化数据：结构化数据也称作行数据，是由二维表结构来逻辑表达和实现的数据，严格地遵循数据格式与长度规范，主要通过关系型数据库进行存储和管理。

Bigtable 是一个分布式的结构化数据存储系统，它被设计用来处理海量数据：通常是分布在数千台普通服务器上的PB 级的数据。Google 的很多项目使用Bigtable 存储数据，包括Web 索引、GoogleEarth、Google Finance。

HBase 是 Apache 的 Hadoop 项目的子项目，它不同于一般的关系数据库，而是一个适合于非结构化数据存储的数据库。HBase 分布式数据库具有如下几个显著特点。

数据库分为哪几种类型?

按数据结构来分类，有三种：层次式数据库：是将数据组织成有向有序的树结构，并用“一对多”的关系联结不同层次的数据库。

数据库共有3种类型，为关系数据库、非关系型数据库和键值数据库。

数据库可以按照内容类型分类：书目、全文、数字和图像。在计算中，数据库有时根据其组织方法进行分类。有许多不同类型的数据库，从最流行的方法关系数据库到分布式数据库、云数据库或NoSQL数据库。

基本数据类型有四类八种，分别为：整型：byte，short，int，long。浮点型：float，double。逻辑型：boolean。字符型：char。数据库的常用数据类型如下：整数数据类型：整数数据类型是最常用的数据类型之一。

数据库通常分为层次式数据库、网络式数据库和关系式数据库三种。而不同的数据库是按不同的数据结构来联系和组织的。所谓数据结构是指数据的组织形式或数据之间的联系。

数据库有两种类型，分别是关系型数据库与非关系型数据库。

大数据常用哪些数据库

1、NoSQL数据库 NoSQL数据库对于大型分布式数据集非常有用。NoSQL数据库对于关系数据库无法解决的大数据性能问题非常有效。当组织必须分析大量非结构化数据或存储在云中多个虚拟服务器上的数据时，它们是最有效的。

2、常用的数据库有mysql、SQLServer、Oracle、Sybase、DB2，所谓“数据库”系以一定方式储存在一起、能予多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合。一个数据库由多个表空间（Tablespace）构成。

3、在关系数据库中，Oracle、MySQL/MariaDB、SQL Server、PostgrcSQL、 DB2等数据库应用较广泛。在时序数据库类型中，InfluxDB、RRDtool、Graphite等数据库也较为常见。

4、目前关系型数据库主要有MySQL、SQLServer、数蚕数据库、Oracle数据库。MySQL：免费产品，中小企业使用广泛。SQLServer：微软的商业化产品，微软SQL语句兼容性好，商业化成熟度高。

5、HBase：基于HDFS，支持海量数据读写（尤其是写），支持上亿行、上百万列的，面向列的分布式NoSql数据库。天然分布式，主从架构，不支持事务，不支持二级索引，不支持sql。

到此，以上就是小编对于bigtable数据模型和系统架构的问题就介绍到这了，希望介绍的几点解答对大家有用，有任何问题和不懂的，欢迎各位老师在评论区讨论，给我留言。

数据库