软件1801 (广州商学院)

打开零回复博文 |
筛选 : 仅作业博文
零回复博文 仅作业博文 老师 / 助教 学生 全部

  • 07 从RDD创建DataFrame

    0.前次作业：从文件创建DataFrame 1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() >>> import pandas as pd >>> import numpy as np
    隔壁老尤   2021-05-13 00:00   0   30

  • 从RDD创建DataFrame

    1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 http://www.lining0806.com/spark%E4%B8%8E
    026王渡   2021-05-12 23:02   0   45

  • 07 从RDD创建DataFrame

    1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 http://www.lining0806.com/spark%E4%B8%8E
    方大师   2021-05-12 22:40   0   34

  • 07 从RDD创建DataFrame

    1.pandas df 与 spark df的相互转换 3.1 利用反射机制推断RDD模式 sc创建RDD 转换成Row元素，列名=值 spark.createDataFrame生成df df.show(), df.printSchema() 3.2 使用编程方式定义RDD模式 生成“表头” fie
    starrysky~ocean   2021-05-11 23:27   0   68

  • Spark SQL 及其 DataFrame 的基本操作

    Spark SQL 及其 DataFrame 的基本操作 Q & A 1. Spark SQL 出现的原因是什么? 关系数据库已经流行多年，能较好的满足各类商业公司的业务数据管理需求，但关系数据库在大数据时代已经不能满足各种新增的用户需求。用户需要从不同数据源执行各种操作（包括结构化和非结构化数据）
    1After909   2021-05-10 21:59   0   93

  • Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个叫作Data Frame的编程抽象结构数据模型(即带有Schema信息的RDD),Spark SQL的前身是 Shark，由于 Shark过于依赖Hive，因此在版本迭代时很难添加新的
    牛哈哈呀   2021-05-10 21:55   0   360

  • Spark SQL 及其DataFrame的基本操作

    1.Spark SQL出现的 原因是什么? Spark SQL出现是因为关系数据库已经不能满足各种在大数据时代新增的用户需求。首先，用户需要在不同的结构化和非结构化数据中执行各种操作。其次，用户需要执行像机器学习和图像处理等等高级分析，在实际应用中，也经常需要融合关系查询和分析复杂算法。 2.用sp
    嘛意思   2021-05-10 21:44   0   94

  • 07 从RDD创建DataFrame

    0.前次作业：从文件创建DataFrame 1.pandas df 与 spark df的相互转换 df_s=spark.createDataFrame(df_p) df_p=df_s.toPandas() 2. Spark与Pandas中DataFrame对比 http://www.lining0
    写那么快干嘛啊？   2021-05-10 21:26   0   66

  • dataframe

    1.Spark SQL出现的 原因是什么? 2.用spark.read 创建DataFrame 3.观察从不同类型文件创建DataFrame有什么异同? 4.观察Spark的DataFrame与Python pandas的DataFrame有什么异同？ spark_sql中DataFrame创建:
    JestZLB   2021-05-10 21:18   0   108

  • 06 spark SQL及其DataFrame的基本操作

    一，Spark SQL出现的 原因是什么? SparkSQL抛弃原有Shark的代码，汲取了Shark的一些优点，如内存列存储（In-Memory Columnar Storage）、Hive兼容性等，重新开发了SparkSQL代码； 由于摆脱了对hive的依赖性，SparkSQL无论在数据兼容、性
    儒雅随和的t君   2021-05-10 20:46   0   46
< Prev1···1516171819202122232425···93Next >