牛客图书馆 > 读书笔记
  • Spark SQL(三)

    JDBC/ODBC Spark SQL也提供JDBC连接支持。JDBC服务器作为一个独立的Spark驱动器程序运行,可以在多用户之间共享。任何一个客户端都可以在内存中缓存数据表,对表进行查询。集群的资源和缓存的数据都在所用用户之间共享。 Spark...
    君一时一迈 编辑于 2019-08-24 13:25:36
  • Spark SQL(二)

    读取和存储数据 Spark SQL支持很多种结构化数据源,可以轻松从各种数据源中读取到Row对象。这些数据源包括Hive表、JSON和Parquet文件。此外,当使用SQL查询这些数据源中的数据且只用到部分字段时,Spark SQL可以智能地只扫描这些用...
    君一时一迈 编辑于 2019-08-17 12:01:43
  • Spark SQL

    Spark SQL——用来操作结构化和半结构化的数据接口。 结构化数据:指任何有结构信息的数据。所谓结构信息,就是每条记录共用的已知的字段集合。当数据符合这样的条件时,Spark SQL就会使得针对这些数据的读取和查询变得更加高效。 Spark S...
    君一时一迈 编辑于 2019-08-09 22:43:23