首页
IT技术
前端
后端
移动开发
编程语言
数据库
大数据
每日资讯
登录
标签
sparksql
hadoop 3.x大数据集群搭建系列9-配置pyspark
一.问题描述之前的文章,我们已经安装完成Spark,然后配置了Spark相关的环境变量,但是运行pyspark报错[root@hp7~]#pysparkenv:python3:没有那个文件或目录从报错可以看到,spark默认
编译
依赖包
sparksql
admin
8月前
18
0
Spark SQL(五)—— Spark SQL数据源
文章目录1. 使用load(加载函数)、save(存储函数)2. Parquet文件2.1 把其他文件转换成Parquet文件2.2 支持Schema合并3. JSON文件4. JDBC4.1 方式一:read.format("
sparksql
scala
spark
SQL
admin
8月前
22
0