关于大数据的技术与计算方式，加米谷学院。
作者：张老师 浏览次数： 2019-07-31 14:18
现在的时代处于飞速发展中的状态，而大数据则成为了时代飞速发展的一个推动力，数据这个资源无论对各大行业还是各个企业来说，都是一项很宝贵的财富。可以这么说，谁可以更好的利用和处理好数据，谁就站在互联网的前列。所以，一些大公司不惜重金在大数据上投入了很多人力、物力。这也让一些大数据培训机构发展了起来。那么，大数据里有哪些计算方式和技术呢？
流式计算
1、Twitter Rainbird
简介：Rainbird一款基于Zookeeper, Cassandra, Scribe, Thrift的分布式实时统计系统。
2、Twitter Storm
简介：Storm是Twitter开源的一个类似于Hadoop的实时数据处理框架。
3、Facebook Puma
简介：实时数据流分析。
资源管理
1、Hadoop Yarn
简介：Hadoop 新 MapReduce 框架 Yarn。
2、Twitter Mesos
简介：Apache Mesos是由加州大学伯克利分校的AMPLab首先开发的一款开源群集管理软件
键值存储
1、Apache Accumulo
简介：Apache Accumulo 是一个可靠的、可伸缩的、高性能的排序分布式的 Key-Value 存储解决方案。
2、Voldemort
简介：Voldemort是一个分布式键值存储系统。
3、Tair
简介：tair 是淘宝自己开发的一个分布式 key/value 存储引擎。
4、RocksDB
简介：RocksDB在代码层面上是在LevelDB原有的代码上进行开发的。
5、Redis
Redis是一个高性能的key-value存储系统。
6、HyperDex
HyperDex是一个分布式、可搜索的键值存储系统。
7、Amazon Dynamo
简介：Amazon Dynamo 是一个经典的分布式Key-Value 存储系统。
8、LevelDB
简介：Leveldb是一个google实现的非常高效的kv数据库。
9、TokyoCabinet
简介：日本人Mikio Hirabayashi（平林干雄）开发的一款DBM数据库。
文件存储
1、Tachyon
简介：Tachyon是一个分布式内存文件系统。
2、CouchDB
简介：CouchDB是用Erlang开发的面向文档的数据库系统。
3、HDFS
简介：Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。
4、MongoDB
简介：MongoDB 是一个基于分布式文件存储的数据库。
表格存储
1、OceanBase
简介：OceanBase是一个支持海量数据的高性能分布式数据库系统。
2、Amazon SimpleDB
Amazon SimpleDB是一个分散式数据库，以Erlang撰写。
3、Vertica
简介：Vertica基于列存储。相比传统面向行存储的数据库具有巨大的优势。
4、Cassandra
简介：Cassandra是一套开源分布式NoSQL数据库系统。
5、HyperTable
简介：Hypertable是一个开源、高性能、可伸缩的数据库。
6、FoundationDB
简介：支持ACID事务处理的NoSQL数据库。
7：HBase
简介：HBase是一个分布式的、面向列的开源数据库。
随着互联网的发展，大数据行业以高额的薪资、优厚的福利待遇，吸引了众多的学习者，无论是其他行业想要转行的朋友，还是互联网领域发展遇到瓶颈的程序员，又或者是刚毕业，零基础的大学生，都纷纷关注到大数据行业。如果你对大数据的学习有一点兴趣的话，可以在线咨询加米谷学院的老师，有福利哦！
流式计算
1、Twitter Rainbird
简介：Rainbird一款基于Zookeeper, Cassandra, Scribe, Thrift的分布式实时统计系统。
2、Twitter Storm
简介：Storm是Twitter开源的一个类似于Hadoop的实时数据处理框架。
3、Facebook Puma
简介：实时数据流分析。
资源管理
1、Hadoop Yarn
简介：Hadoop 新 MapReduce 框架 Yarn。
2、Twitter Mesos
简介：Apache Mesos是由加州大学伯克利分校的AMPLab首先开发的一款开源群集管理软件
键值存储
1、Apache Accumulo
简介：Apache Accumulo 是一个可靠的、可伸缩的、高性能的排序分布式的 Key-Value 存储解决方案。
2、Voldemort
简介：Voldemort是一个分布式键值存储系统。
3、Tair
简介：tair 是淘宝自己开发的一个分布式 key/value 存储引擎。
4、RocksDB
简介：RocksDB在代码层面上是在LevelDB原有的代码上进行开发的。
5、Redis
Redis是一个高性能的key-value存储系统。
6、HyperDex
HyperDex是一个分布式、可搜索的键值存储系统。
7、Amazon Dynamo
简介：Amazon Dynamo 是一个经典的分布式Key-Value 存储系统。
8、LevelDB
简介：Leveldb是一个google实现的非常高效的kv数据库。
9、TokyoCabinet
简介：日本人Mikio Hirabayashi（平林干雄）开发的一款DBM数据库。
文件存储
1、Tachyon
简介：Tachyon是一个分布式内存文件系统。
2、CouchDB
简介：CouchDB是用Erlang开发的面向文档的数据库系统。
3、HDFS
简介：Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。
4、MongoDB
简介：MongoDB 是一个基于分布式文件存储的数据库。
表格存储
1、OceanBase
简介：OceanBase是一个支持海量数据的高性能分布式数据库系统。
2、Amazon SimpleDB
Amazon SimpleDB是一个分散式数据库，以Erlang撰写。
3、Vertica
简介：Vertica基于列存储。相比传统面向行存储的数据库具有巨大的优势。
4、Cassandra
简介：Cassandra是一套开源分布式NoSQL数据库系统。
5、HyperTable
简介：Hypertable是一个开源、高性能、可伸缩的数据库。
6、FoundationDB
简介：支持ACID事务处理的NoSQL数据库。
7：HBase
简介：HBase是一个分布式的、面向列的开源数据库。
随着互联网的发展，大数据行业以高额的薪资、优厚的福利待遇，吸引了众多的学习者，无论是其他行业想要转行的朋友，还是互联网领域发展遇到瓶颈的程序员，又或者是刚毕业，零基础的大学生，都纷纷关注到大数据行业。如果你对大数据的学习有一点兴趣的话，可以在线咨询加米谷学院的老师，有福利哦！
