radm commited on
Commit
f825f50
β€’
1 Parent(s): 80d42fb

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +4 -0
README.md CHANGED
@@ -43,6 +43,10 @@ Evaluation results on ZebraGrid
43
  β”‚ gpt-4-turbo-2024-04-09 β”‚ greedy β”‚ single β”‚ 1 β”‚ 28.4 β”‚ 80.71 β”‚ 8.06 β”‚ 47.9 β”‚ 0.1 β”‚ 1000 β”‚ 1148.46 β”‚
44
  β”‚ gpt-4o-2024-05-13 β”‚ greedy β”‚ single β”‚ 1 β”‚ 28.2 β”‚ 77.86 β”‚ 8.89 β”‚ 38.72 β”‚ 19.3 β”‚ 1000 β”‚ 1643.51 β”‚
45
  β”‚ Athene-V2-Chat-AWQ β”‚ greedy β”‚ single β”‚ 1 β”‚ 27.8 β”‚ 77.14 β”‚ 8.61 β”‚ 45.83 β”‚ 6.4 β”‚ 1000 β”‚ 1785.7 β”‚
 
 
 
 
46
  β”‚ Athene-70B β”‚ greedy β”‚ single β”‚ 1 β”‚ 16.7 β”‚ 52.5 β”‚ 2.78 β”‚ 32.98 β”‚ 21.1 β”‚ 1000 β”‚ 391.19 β”‚
47
  β•˜β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•›
48
  ```
 
43
  β”‚ gpt-4-turbo-2024-04-09 β”‚ greedy β”‚ single β”‚ 1 β”‚ 28.4 β”‚ 80.71 β”‚ 8.06 β”‚ 47.9 β”‚ 0.1 β”‚ 1000 β”‚ 1148.46 β”‚
44
  β”‚ gpt-4o-2024-05-13 β”‚ greedy β”‚ single β”‚ 1 β”‚ 28.2 β”‚ 77.86 β”‚ 8.89 β”‚ 38.72 β”‚ 19.3 β”‚ 1000 β”‚ 1643.51 β”‚
45
  β”‚ Athene-V2-Chat-AWQ β”‚ greedy β”‚ single β”‚ 1 β”‚ 27.8 β”‚ 77.14 β”‚ 8.61 β”‚ 45.83 β”‚ 6.4 β”‚ 1000 β”‚ 1785.7 β”‚
46
+ β”‚ gpt-4-0314 β”‚ greedy β”‚ single β”‚ 1 β”‚ 27.1 β”‚ 77.14 β”‚ 7.64 β”‚ 47.43 β”‚ 0.2 β”‚ 1000 β”‚ 1203.17 β”‚
47
+ β”‚ claude-3-opus-20240229 β”‚ greedy β”‚ single β”‚ 1 β”‚ 27 β”‚ 78.21 β”‚ 7.08 β”‚ 48.91 β”‚ 0 β”‚ 1000 β”‚ 855.72 β”‚
48
+ β”‚ Qwen2.5-72B-Instruct β”‚ greedy β”‚ single β”‚ 1 β”‚ 26.6 β”‚ 76.43 β”‚ 7.22 β”‚ 40.92 β”‚ 11.9 β”‚ 1000 β”‚ 1795.9 β”‚
49
+ β”‚ Qwen2.5-32B-Instruct β”‚ greedy β”‚ single β”‚ 1 β”‚ 26.1 β”‚ 77.5 β”‚ 6.11 β”‚ 43.39 β”‚ 6.3 β”‚ 1000 β”‚ 1333.07 β”‚
50
  β”‚ Athene-70B β”‚ greedy β”‚ single β”‚ 1 β”‚ 16.7 β”‚ 52.5 β”‚ 2.78 β”‚ 32.98 β”‚ 21.1 β”‚ 1000 β”‚ 391.19 β”‚
51
  β•˜β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•§β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•β•›
52
  ```