主页 > 新闻资讯 >
大数据学习:Spark SQL常见数据源操作

大数据学习:Spark SQL常见数据源操作

Spark SQL作为Spark处理结构化数据的重要模块,而结构化数据的引入,就涉及到数据源的操作。针对于不同的数据源,Spark提供了多种数据导入方式。今天的大数据学习分享,我们就来讲讲...

查看详情 >>
大数据学习:Spark SQL和DataFrame基础入门

大数据学习:Spark SQL和DataFrame基础入门

Spark框架的学习当中,Spark SQL部分算是比较重点的一个部分,作为Spark处理结构化数据的一个重要模块,提供查询和计算的接口,而其中的交互,有涉及到DataSet、DataFrame相关的概念。今天...

查看详情 >>
大数据培训:Spark RDD的管理与操作

大数据培训:Spark RDD的管理与操作

前面我们已经对Spark RDD的概念及特征做了基本的介绍,了解了基本的概念之后,RDD的管理和操作,在Spark框架当中又是如何去运行和操作的呢?今天的大数据培训分享,我们就来对Spark...

查看详情 >>
大数据学习:Spark RDD概念及特征

大数据学习:Spark RDD概念及特征

基本上提到Spark,常常被提及的就是其性能优势,相比同是批处理的MapReduce,Spark在实验环境下可做到计算性能提高10-100倍,而Spark计算性能的提升,与其引入的RDD有很大关系。今天的大...

查看详情 >>
大数据学习:Spark RDD的Checkpoint机制

大数据学习:Spark RDD的Checkpoint机制

Spark作为大数据技术生态当中的代表性框架,其性能优势在于,相比前代的Hadoop MapReduce,把计算过程转移到内存当中进行,大大提升了计算效率。而基于内存计算,确保数据的稳定和安...

查看详情 >>
作为5G大国,大数据与5G的相辅相成表现在哪些地方?

作为5G大国,大数据与5G的相辅相成表现在哪些地方?

作为5G大国,大数据与5G的相辅相成表现在哪些地方? 众所周知,我国-中国是5G大国,工信部副部长刘烈宏19日在国新办举行的国务院政策例行吹风会上说,我国建成全球规模最大的信息...

查看详情 >>
大数据培训:Spark Streaming数据源导入

大数据培训:Spark Streaming数据源导入

Spark Streaming作为Spark的流处理引擎,主要是负责数据流的处理,而这就需要集中各种各样的数据源,而基于不同来源的数据,其性质和格式不一,而Spark Streaming也提供了不同的导入方式。...

查看详情 >>
大数据学习:Spark Streaming编程入门示例

大数据学习:Spark Streaming编程入门示例

作为大数据离线处理的代表性框架,Spark发展至今,依然在市场上占据着重要的地位,而在大数据学习当中,围绕Spark框架,也需要投入相当的时间和精力。今天的大数据学习分享,我们...

查看详情 >>
大数据培训:Hive分桶表及动态分区、静态分区

大数据培训:Hive分桶表及动态分区、静态分区

Hive组件在Hadoop生态圈的地位,还是相当重要的,作为操作数据库的重要工具,其性能和效率对于整体的数据处理效率是有着明显的影响的。今天的大数据培训分享,我们就来讲讲Hive分桶...

查看详情 >>
大数据学习:Hive如何将SQL转换成MapReduce

大数据学习:Hive如何将SQL转换成MapReduce

在Hadoop生态圈,Hive常常被定义为数据仓库工具,在具体的应用场景下,主要负责处理结构化的数据,其原理简单来说,就是通过Hive SQL转换成MapReduce去进行操作。今天的大数据学习分享...

查看详情 >>
大数据开发-HDFS(HA)

大数据开发-HDFS(HA)

昨天结束了zookeeper的学习,今天就给大家带来大数据开发-HDFS(HA),大家不要感到奇怪,HDFS讲了那么多章怎么还没讲完,因为HDFS是大数据开发的一个重要知识点,含有很多的内容,也因此...

查看详情 >>
  • 首页
  • 上一页
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38
  • 39
  • 40
  • 下一页
  • 末页
  • 3243564
  • 热点排行
    推荐文章
    立即申请>>