软件1801 (广州商学院)

打开零回复博文 |
筛选 : 零回复博文
零回复博文 仅作业博文 老师 / 助教 学生 全部

  • Spark SQL 及其 DataFrame 的基本操作

    Spark SQL 及其 DataFrame 的基本操作 Q & A 1. Spark SQL 出现的原因是什么? 关系数据库已经流行多年，能较好的满足各类商业公司的业务数据管理需求，但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作（包括结构化和非结构化数据）
      2021-05-10 21:59   0   109

  • Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个叫作Data Frame的编程抽象结构数据模型(即带有Schema信息的RDD),Spark SQL的前身是 Shark，由于 Shark过于依赖Hive，因此在版本迭代时很难添加新的
    牛哈哈呀   2021-05-10 21:55   0   374

  • Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Spark SQL出现是因为关系数据库已经不能满足各种在大数据时代新增的用户需求。首先，用户需要在不同的结构化和非结构化数据中执行各种操作。其次，用户需要执行像机器学习和图像处理等等高级分析，在实际应用中，也经常需要融合关系查询和分析复杂算法。 2.用sp
    嘛意思   2021-05-10 21:44   0   100

  • 07 从RDD创建DataFrame

    0.前次作业：从文件创建DataFrame 1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 http://www.lining0
    写那么快干嘛啊？   2021-05-10 21:26   0   68

  • dataframe

    1.Spark SQL出现的 原因是什么? 2.用spark.read 创建DataFrame 3.观察从不同类型文件创建DataFrame有什么异同? 4.观察Spark的DataFrame与Python pandas的DataFrame有什么异同？ spark_sql中DataFrame创建:
    JestZLB   2021-05-10 21:18   0   118

  • 06 spark SQL及其DataFrame的基本操作

    一，Spark SQL出现的 原因是什么? SparkSQL抛弃原有Shark的代码，汲取了Shark的一些优点，如内存列存储（In-Memory Columnar Storage）、Hive兼容性等，重新开发了SparkSQL代码； 由于摆脱了对hive的依赖性，SparkSQL无论在数据兼容、性
    儒雅随和的t君   2021-05-10 20:46   0   50

  • 06 Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? 由于MapReduce这种计算模型执行效率比较慢，所以Spark SQL的应运而生，它是将Spark SQL转换成RDD，然后提交到集群执行，执行效率非常快，同时Spark SQL也支持从Hive中读取数据。 2.用spark.read 创建DataFra
    会喷水的海参   2021-05-10 20:02   0   100

  • 06 Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Spark SQL的前身是 Shark，它运行在Spark系统之上，Shark重用了Hive的工作机制，并直接继承了Hive的各个组件， Shark将SQL语句的转换从MapReduce作业替换成了Spark作业，虽然这样提高了计算效率，但由于 Shark
    赶作业的YI点   2021-05-10 20:01   0   45

  • Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Shark和sparkSQL 但是，随着Spark的发展，其中sparkSQL作为Spark生态的一员继续发展，而不再受限于hive，只是兼容hive；而hive on spark是一个hive的发展计划，该计划将spark作为hive的底层引擎之一，也就
    拿大刀的犬夜叉   2021-05-10 19:52   0   142

  • 从RDD创建DataFrame

    0.前次作业：从文件创建DataFrame 1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() # 从数组创建pandas dataframe import pandas as pd im
    小王子C   2021-05-10 19:31   0   168
< Prev1···1516171819202122232425···92Next >