【Spark】Spark DataFrame – 获取超过 20 行和列的完整值

文章目录

前言

当我们使用 spark-sql 命令来执行任务，返回结果后，有些字段无法显示完全，并且只能最多显示20条数据。

示例

saprk-submit --master yarn

> spark.sql("show tables from nrdp_db").show()

在这里插入图片描述

Spark需要几个参数来获取超过20行并获取完整的列值，以下是DataFrame show（）的示例

spark.sql("show tables from nrdp_db").show() // Show 20 rows & 20 characters for columns
spark.sql("show tables from nrdp_db").show(100)  Show 100 rows
spark.sql("show tables from nrdp_db").show(100, false) // Show 100 rows & full column value
版权声明：本文为Mrerlou原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接和本声明。