Spark & Scala

[ spark & scala ] spark.sql.DataFrame 길이 구하는 방법

구티맨 2020. 4. 6. 08:33

Pandas Dataframe 에서는 size 함수를 이용하여 row 의 개수를 받아 올 수 있지만,

spark sql dataframe에는 size 함수가 없다고 나온다. 대신에, count 를 사용하면 row의 개수를 받아올 수 있다.

df.count