全部 大数据新闻动态 大数据技术文章 大数据常见问题 技术问答

• • 

    Sqoop工作原理是什么?

    Sqoop是一个开源工具，用于在Apache Hadoop和关系型数据库之间进行数据传输。它的主要目的是简化大规模数据集的导入和导出。 查看全文>>

    大数据常见问题2023-07-07 |传智教育 |Sqoop,连接数据库,划分数据

  • 

    常见的数据清洗方法有哪些?

    常见的数据质量问题主要包括缺失值、重复值以及错误值等问题。下面针对缺失值的清洗、重复值的清洗以及错误值的清洗进行讲解... 查看全文>>

    大数据常见问题2022-08-12 |传智教育 |数据清洗,常见数据清洗方法

  • 

    大数据培训：HDFS的高可用框架

    在HDFS中，NameNode是系统的核心节点，它存储了各类元数据的信息，并负责管理文件系统的命名空间和客户端对文件的访问。但是，在Hadoop1.0版本中，NameNode只有一个，一旦这个NameNode发生故障，就会导致整个Hadoop集群不可用，也就是发生了单点故障问题。 查看全文>>

    大数据技术文章2022-06-28 |传智教育 |大数据培训,HDFS高可用框架

  • 

    大数据基本的业务分析应该包括哪些流程？怎样收集数据？

    大数据分析有完善的操作步骤，先分析什么，后分析什么，各个分析点之间都有逻辑联系，体系化的分析形成，使工作更加高效便捷，数据更有说服力。 查看全文>>

    大数据技术文章2021-04-22 |传智教育 |大数据业务分析步骤,数据的收集,整理,展现和工作报告

  • 

    大数据Hadoop版本介绍，1.0版本和2.0对比有哪些缺点？

    Hadoop发行版本分为开源社区版和商业版，社区版是指由Apache软件基金会维护的版本，是官方维护的版本体系。商业版Hadoop是指由第三方商业公司在社区版Hadoop基础上进行了一些修改、整合以及各个服务组件兼容性测试而发行的版本。 查看全文>>

    大数据技术文章2021-04-14 |传智教育 |大数据Hadoop,HDFS,MapReduce

  • 

    Spark SQL如何实现Hive数据仓库的操作？

    Apache Hive是Hadoop上的SQL引擎，也是大数据系统中重要的数据仓库工具，Spark SQL支持访问Hive数据仓库，然后在Spark引擎中进行统计分析。接下来介绍通过Spark SQL操作Hive数据仓库的具体实现步骤。 查看全文>>

    大数据技术文章2021-04-14 |传智教育 |Hive数据仓库的操作, Spark SQL实现Hive数据仓库的操作

  • 

    怎样操作DataFrame？不同操作风格有什么区别？

    DataFrame提供了两种语法风格，即DSL风格语法和SQL风格语法，二者在功能上并无区别，仅仅是根据用户习惯，自定义选择操作方式。接下来，我们通过两种语法风格，分别讲解DataFrame操作的具体方法。 查看全文>>

    大数据技术文章2021-04-14 |传智教育 |DataFrame操作，DataFrame的常用操作

  • 

    怎样使用Spark方法完成RDD的创建？

    Spark可以通过并行集合创建RDD。即从一个已经存在的集合、数组上，通过SparkContext对象调用parallelize()方法创建RDD。 查看全文>>

    大数据技术文章2021-03-23 |传智教育 |Spark方法创建RDD

  << 1 2 3 4 5 6 7 8 9 ... 38 > >>