数据的分类（结构化、半结构化、非结构化）和存储

随着互联网的发展，数据呈现出井喷式的发展，尤其是非结构化的数据。这些数据粗略地分成三种：

• 结构化
• 半结构化
• 非结构化

其中结构化的又可以分成 OLTP 和OLAP。OLTP你可以简单理解成传统的关系型数据库，主要是事务处理，例如银行交易，对延迟和一致性要求较高，常见的数据库譬如mysql和PG等。OLAP是数据仓库系统，主要支持复杂的分析操作，侧重于大数据的处理，并且提供直观易懂的查询结果。常见的数据库服务如Druid、Presto。

半结构化的数据主要是key-value结构（map也属于key-value结构），还有json或者bson等数据类型。这些数据可以通过某个字段做检索，但没法像关系型数据那样支持复杂的SQL处理。常见的数据库服务：redis和mongo。

非结构化的数据主要是图片和视频，他们基本都是以二进制流的方式传输和存储。目前它们量是最大的，尤其是短视频爆发的当下。常见的数据库服务如：S3对象存储或者HDFS。