(improvement) Move out the datasource and merge the datasource with the model, and adapt the chat module (#423)

Co-authored-by: jolunoluo <jolunoluo@tencent.com>
2026-04-26 18:24:20 +08:00 · 2023-11-27 11:05:24 +08:00
parent 0534053ff9
commit 27bb1b322e
190 changed files with 3900 additions and 10561 deletions
--- a/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_1_2.txt
+++ b/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_1_2.txt
@@ -5,14 +5,14 @@ dean _1_2 36
 john _1_2 50
 jack _1_2 38
 admin _1_2 70
-周杰伦 _2_7 100
-陈奕迅 _2_7 100
-林俊杰 _2_7 100
-张碧晨 _2_7 100
-程响 _2_7 100
-Taylor#Swift _2_7 100
-内地 _2_4 100
-欧美 _2_4 100
-港台 _2_4 100
-流行 _2_6 100
-国风 _2_6 100
+周杰伦 _4_9 100
+陈奕迅 _4_9 100
+林俊杰 _4_9 100
+张碧晨 _4_9 100
+程响 _4_9 100
+Taylor#Swift _4_9 100
+内地 _4_6 100
+欧美 _4_6 100
+港台 _4_6 100
+流行 _4_8 100
+国风 _4_8 100
--- a/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_1_3.txt
+++ b/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_1_3.txt
@@ -1,6 +1,6 @@
-p1 _1_3 52
-p2 _1_3 47
-p3 _1_3 31
-p4 _1_3 36
-p5 _1_3 50
-p6 _1_3 38
+p1 _3_4 52
+p2 _3_4 47
+p3 _3_4 31
+p4 _3_4 36
+p5 _3_4 50
+p6 _3_4 38
--- a/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_2_7.txt
+++ b/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_2_7.txt
@@ -1,9 +0,0 @@
-周杰伦 _2_7 9000
-周深 _2_7 8000
-周传雄 _2_7 7000
-周华建 _2_7 6000
-陈奕迅 _2_7 8000
-林俊杰 _2_7 7000
-张碧晨 _2_7 7000
-程响 _2_7 7000
-Taylor#Swift _2_7 7000
--- a/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_4_9.txt
+++ b/launchers/standalone/src/main/resources/data/dictionary/custom/DimValue_4_9.txt
@@ -0,0 +1,9 @@
+周杰伦 _4_9 9000
+周深 _4_9 8000
+周传雄 _4_9 7000
+周华建 _4_9 6000
+陈奕迅 _4_9 8000
+林俊杰 _4_9 7000
+张碧晨 _4_9 7000
+程响 _4_9 7000
+Taylor#Swift _4_9 7000
--- a/launchers/standalone/src/main/resources/data/dictionary/custom/benchmark_cspider.txt
+++ b/launchers/standalone/src/main/resources/data/dictionary/custom/benchmark_cspider.txt
@@ -1,68 +0,0 @@
-tagore _3_8 9000
-nazrul _3_8 9000
-民间 _3_8 9000
-现代 _3_8 9000
-蓝调 _3_8 9000
-流行 _3_8 9000
-孟加拉国 _3_10 9000
-锡尔赫特、吉大港、库斯蒂亚 _3_10 9000
-加拿大 _3_10 9000
-美国 _3_10 9000
-Shrikanta _3_11 9000
-Prity _3_11 9000
-Farida _3_11 9000
-Topu _3_11 9000
-Enrique _3_11 9000
-Michel _3_11 9000
-孟加拉国 _3_12 9000
-印度 _3_12 9000
-美国 _3_12 9000
-英国 _3_12 9000
-男性 _3_13 9000
-女性 _3_13 9000
-mp4 _3_19 9000
-mp3 _3_19 9000
-Tumi#长袍#尼罗布 _3_20 9000
-舒克诺#帕塔尔#努普尔#帕埃 _3_20 9000
-阿米·奥帕尔·霍伊 _3_20 9000
-我的爱 _3_20 9000
-打败它 _3_20 9000
-阿杰伊阿卡什 _3_20 9000
-孟加拉国 _3_22 9000
-印度 _3_22 9000
-美国 _3_22 9000
-英国 _3_22 9000
-孟加拉语 _3_26 9000
-英文 _3_26 9000
-=======
-孟加拉国 _3_8 9000
-锡尔赫特、吉大港、库斯蒂亚 _3_8 9000
-加拿大 _3_8 9000
-美国 _3_8 9000
-tagore _3_9 9000
-nazrul _3_9 9000
-民间 _3_9 9000
-现代 _3_9 9000
-蓝调 _3_9 9000
-流行 _3_9 9000
-孟加拉国 _3_10 9000
-印度 _3_10 9000
-美国 _3_10 9000
-英国 _3_10 9000
-男性 _3_11 9000
-女性 _3_11 9000
-Shrikanta _3_12 9000
-Prity _3_12 9000
-Farida _3_12 9000
-Topu _3_12 9000
-Enrique _3_12 9000
-Michel _3_12 9000
-mp4 _3_14 9000
-mp3 _3_14 9000
-孟加拉语 _3_16 9000
-英文 _3_16 9000
-Tumi#长袍#尼罗布 _3_18 9000
-舒克诺#帕塔尔#努普尔#帕埃 _3_18 9000
-阿米·奥帕尔·霍伊 _3_18 9000
-我的爱 _3_18 9000
-打败它 _3_18 9000