tablesample

Spark SQL 抽样函数 ——TABLESAMPLE 的坑点

最近需要实现一段 Spark SQL 逻辑，对数据集进行抽样指定的行数。由于数据集较大，刚开始的逻辑是，取窗口函数随机排序后 row_number 的前 n 行。但运行速度较慢，所…

数据运维 2024年 4月 22日 61.6k
nobgpic