Sql Select 随机行，使得列子组的组合是唯一的

发布于03月07日

从具有列a、b、c、d和e的my_table行中，我想随机 Select N行，使得列a、b和c的组合是唯一的.

我试着和一个小组一起解决这个问题，方法是:

select a, b, c, min(d), min(e) from my_table
group by a, b, c

这种方法不起作用，因为它不返回my_table中的实际现有行，因为列d和e的最小值可以在不同的行中.此外，min不是一个合适的函数，因为它不返回随机行.

我怎样才能做到这一点？

我正在与亚马逊雅典娜合作，它建立在Presto上，运行标准的ANSI SQL.

推荐答案

我没有安装Presto，只安装了Trino(但Athena Engine v3应该是基于Trino的)，在Trino中，你可以try 使用min_by/max_by函数，将它们与random相结合来"排序"，并使用一些ROW魔术:

select a, b, c, 
    min_by((d, e), random()).* as (d, e)
from my_table
group by a, b, c

另一种应该适用于v2和v3引擎的方法是对分区使用row_number窗口函数，并再次使用random进行排序:

select a, b, c, d, e 
from(
    select *,
       row_number() over(partition by a, b, c order by random()) rn
    from dataset)
where rn = 1

实用课程推荐