[improvement][supersonic] add text-to-sql evaluation (#696)

* [improvement] llm supports all models

* [improvement] alias convert to SemanticParseInfo

* [improvement] support join

* [improvement] add evaluation.py

* [improvement] add text2sql_evalution.py

* [improvement] add text2sql_evalution.py

* [improvement] add evalution

* [improvement] add evalution

* [improvement] add evalution

---------

Co-authored-by: zuopengge <hwzuopengge@tencent.com>
This commit is contained in:
mainmain
2024-01-30 10:46:45 +08:00
committed by GitHub
parent aae3d6b297
commit c398ac1a84
29 changed files with 3347 additions and 15 deletions

View File

@@ -0,0 +1,100 @@
在各公司所有品牌收入排名中,给出每一个品牌,其所在公司以及收入占该公司的总收入比例,同时给出该公司的年营业额
在各公司所有品牌收入排名中,给出每一个品牌,其所在公司以及收入占该公司的总收入比例
在各公司所有品牌收入排名中,给出每一个品牌和其法人,其所在公司以及收入占该公司的总收入比例
在各公司所有品牌收入排名中,给出每一个品牌,其所在公司以及收入占该公司的总收入比例,同时给出该公司总部所在地
在公司各品牌收入排名的利润占比最多10%时,给出公司的名称品牌的名称并给出公司各品牌收入排名的营收占比
在公司各品牌收入排名的利润占比小于10%时,给出公司的名称品牌的名称并给出公司各品牌收入排名的营收占比
在公司各品牌收入排名的利润占比不止10%时,给出公司的名称品牌的名称并给出公司各品牌收入排名的营收占比
注册资本不小于1亿的品牌中哪个品牌的平均营收占比最大并给出它的法定代表人
注册资本大于1亿的品牌中哪5个品牌收入最少并给出它们的法定代表人
找到注册资本少于一个亿的品牌及其法人,并给出对应公司的平均营收占比
给出注册资本不少于一亿的品牌及其法人,并给出对应的公司的平均营收占比
给出注册资本不超过一亿的的品牌及其法人,并给出对应的公司的总营收占比
给出注册资本少于一亿的品牌及其法人,并给出对应的公司的最大营收占比
给出注册资本不超过1亿的品牌及其法人并找出对应的公司的最大营收占比
在注册资本超过一亿的公司中给出公司各品牌收入品牌的平均营收占比正好50%的品牌及其法人
在注册资本不超过一亿的公司中,给出个品牌收入排名五的品牌及其法人
在各品牌收入在公司排名中当品牌的注册资本不大于1亿时给出公司各品牌收入排名的支出占比的平均值小于等于45%的那些品牌的名称以及公司各品牌收入排名的营收占比的平均值
在各品牌收入在公司排名中当品牌的注册资本小于1亿时给出公司各品牌收入排名数量小于等于5的那些品牌的名称以及公司各品牌收入排名的营收占比的最小值
在各品牌收入在公司排名中,给出每个品牌的名称,品牌的法定代表人,以及公司各品牌收入排名的营收占比的平均值
在各品牌收入在公司排名中,给出每个品牌的名称,品牌的法定代表人,以及公司各品牌收入排名的营收占比的最小值
在各品牌收入在公司排名中,给出每个品牌的名称,品牌的法定代表人,以及公司各品牌收入排名的营收占比的总和
在各品牌收入在公司排名中,给出每个品牌的名称,品牌的法定代表人,以及公司各品牌收入排名的营收占比的最大值
在各品牌收入在公司排名中给出收入排名不超过5的品牌及其法人
在各品牌收入在公司排名中给出在收入排名中的平均营收占比超过50%的品牌及其法人
在各品牌收入在公司排名中当公司各品牌收入排名的利润占比的平均值小于等于60%时,给出品牌的名称以及公司各品牌收入排名的营收占比的平均值
在各品牌收入在公司排名中当公司各品牌收入排名数量等于5时给出品牌的名称以及公司各品牌收入排名的营收占比的最小值
哪个品牌收入的平均利润占比最大,给出品牌的法定代表人,以及其收入平均营收占比
哪3个品牌的收入最多给出品牌的法定代表人以及其收入总营收占比
在公司各品牌收入排名的利润占比由少到多排列,给出对应的品牌的名称公司的名称以及公司各品牌收入排名的营收占比
在公司各品牌收入排名的支出占比最少时给出排名前3对应的品牌的名称公司的名称以及公司各品牌收入排名的营收占比
在公司各品牌收入排名的支出占比最多时给出排名前3对应的品牌的名称公司的名称以及公司各品牌收入排名的营收占比公司各品牌收入排名的利润占比
在公司各品牌收入排名的利润占比最多时给出排名前3对应的品牌的名称公司的名称以及公司各品牌收入排名的营收占比
哪些法人的品牌的不在注册资本少于100万中这些法定代表人的品牌都是哪些
给出每一个品牌和其法人,所属的公司以及该公司的年营业额
给出每一个品牌和注册时所用资本,以及所属的公司
给出每一个品牌和注册时所用资本,所属的公司以及该公司的年营业额
给出每一个品牌和注册时所用资本,所属的公司和总部所在地
给出每一个品牌和其法人,所属的公司以及总部所在城市
有自己品牌的公司有哪些?给出这些公司和总部所在地
有自己品牌的公司有哪些?给出这些公司和年营业额
在各公司其品牌的历年收入中,给出每一个品牌,其所属的公司和公司总部所在地点,并给出该品牌近几年的营收
在各公司其品牌的历年收入中,给出每一个品牌,其所属的公司和公司年营业额,并给出该品牌近几年的营收
在各公司其品牌的历年收入中,给出每一个品牌,其所属的公司和公司法人,并给出该品牌近几年的营收
在各公司其品牌的历年收入中,给出每一个品牌,其所属的公司,以及该品牌近几年的营收
在品牌的注册资本至少1亿时给出公司的名称以及公司的总部地点品牌的法定代表人
在品牌的注册资本少于1亿时给出公司的名称以及公司的总部地点品牌的法定代表人
在品牌的注册资本超过1亿时给出公司的名称以及公司的总部地点品牌的法定代表人
在品牌的注册资本最多1亿时给出公司的名称以及公司的年营业额品牌的法定代表人
找到注册资本不止1亿且年营业额不超过288亿的公司以及给出总部地点法人
找出注册资本不止一亿且年营业额低于288亿的公司以及总部地点和法人
找出注册资本不到1亿且年营业额少于288亿的公司以及给出总部地点和法人
给出注册资本不超过1亿且年营业额不少于288亿的公司总部地点和法人
给出注册资本不低于一亿且年营业额不止288亿的公司以及总部地点和法人
给出注册资本不超过一亿且年营业额超过288亿的公司总部在哪法人是谁
给出注册资本超过一亿且年营业额不止288亿的公司以及总部在哪法人是谁
给出注册资本不超过一亿且年营业额少于288亿的公司以及总部地点和法人
找出注册资本少于一亿且年营业额不超过288亿的公司以及总部在哪法人是谁
在公司品牌历年收入的利润最多500亿时给出公司的名称品牌的名称并给出公司品牌历年收入的营收
在公司品牌历年收入的营收同比增长至少100%时,给出公司的名称品牌的名称并给出公司品牌历年收入的营收
年营业额不小于288亿的公司中哪5个公司的平均营收占比最少,并给出它们的总部地点
年营业额不小于288亿的公司中哪个公司的平均营收占比最大并给出它的总部地点
注册资本大于1亿的品牌中哪个品牌历年收入的平均营收最大并给出它的法定代表人
注册资本不大于1亿的品牌中哪个品牌历年收入的平均营收最大并给出它的法定代表人
年营业额不小于288亿的公司中哪5个公司品牌的平均注册资本最多并给出它们的总部地点
年营业额不小于288亿的公司中哪5个公司品牌的平均注册资本总共最少并给出它们的总部地点
找到年营业额不少于288亿的公司及总部地点并给出对应的公司的最高营收占比
给出年营业额少于288亿的公司及总部地点并给出对应的公司的总营收占比
给出年营业额不止288亿的公司及总部地点并给出对应的公司的最大营收占比
找出年营业额不少于288亿的公司及总部地点并给出对应的公司的总营收占比
请找出年营业额不超过288亿的公司及总部地点并给出对应的公司的平均营收占比
找到品牌的注册资本不大于1亿品牌的法定代表人并给出公司品牌历年收入的营收的平均值
找到品牌的注册资本不小于1亿品牌的法定代表人并给出公司品牌历年收入的营收的平均值
找到品牌的注册资本小于1亿品牌的法定代表人并给出公司品牌历年收入的营收的最小值
找到品牌的注册资本不大于1亿品牌的法定代表人并给出公司品牌历年收入的营收的最大值
找到品牌的注册资本小于1亿品牌的法定代表人并给出公司品牌历年收入的营收的平均值
给出年营业额超过288亿的公司及总部地点并给出对应的品牌中的最小注册资本
给出年营业额不超过288亿的公司及总部地点并给出对应的品牌中的最小注册资本
给出不超过288亿年营业额的公司及总部地点并给出这些品牌中的平均注册资本
给出不超过288亿年营业额的公司及其总部地点并给出这些品牌的的最大注册资本
给出年营业额超过288亿的公司及其总部地点并给出这些品牌的的总注册资本
给出年营业额不超过288亿的各公司品牌中给出收入排名中的营收占比加起来不超过50%的公司及其总部地点
给出年营业额低于288亿的各公司的各品牌中给出收入排名中的总营收占比不超过50%的公司及总部地点中
在年营业额不少于288亿的公司中给出品牌不超过5个的公司及其总部地点
在年营业额不超过288亿的公司中给出品牌少于5个的公司及其总部地点
在各公司的各品牌收入排名中当公司的年营业额大于288亿时给出公司各品牌收入排名数量大于5的那些公司的名称以及公司各品牌收入排名的营收占比的最小值
在各公司的各品牌收入排名中当公司的年营业额小于288亿时给出公司各品牌收入排名的利润占比的平均值大于75%的那些公司的名称以及公司各品牌收入排名的营收占比的最大值
在各品牌的历年收入中当品牌的注册资本不大于1亿时给出公司品牌历年收入的利润同比增长的总和小于等于1000000的那些品牌的名称以及公司品牌历年收入的营收的最大值
在各品牌的历年收入中当品牌的注册资本小于1亿时给出公司品牌历年收入数量小于5的那些品牌的名称以及公司品牌历年收入的营收的最小值
在各品牌所属的公司中当公司的年营业额大于288亿时给出品牌数量小于5的那些公司的名称以及品牌的注册资本的总和
在各品牌所属的公司中当公司的年营业额小于288亿时给出品牌数量大于等于5的那些公司的名称以及品牌的注册资本的总和
在各公司每个品牌的收入排名中,给出每个公司,其总部地点,以及各品牌的最大营收占比
在各公司每个品牌的收入排名中,给出每个公司,其总部地点,以及各品牌的最小营收占比
在各公司每个品牌的收入排名中,给出每个公司,其总部地点,以及各品牌的总营收占比
在各公司每个品牌的收入排名中,给出每个公司,其总部地点,以及各品牌的平均营收占比
在各品牌的历年收入中,给出每个品牌的名称,品牌的法定代表人,以及公司品牌历年收入的营收的平均值
在各品牌的历年收入中,给出每个品牌的名称,品牌的法定代表人,以及公司品牌历年收入的营收的最小值
在各品牌的历年收入中,给出每个品牌的名称,品牌的法定代表人,以及公司品牌历年收入的营收的总和
在各品牌的历年收入中,给出每个品牌的名称,品牌的法定代表人,以及公司品牌历年收入的营收的最大值
在各品牌所属的公司中,给出每个公司的名称,公司的总部地点,以及品牌的注册资本的总和
在各品牌所属的公司中,给出每个公司的名称,公司的总部地点,以及品牌的注册资本的最大值