Upload Modelfile
Browse filestop_p parameter added
Modelfile
CHANGED
@@ -6,7 +6,8 @@ ADAPTER ./codellama-13b-qml.gguf
|
|
6 |
# Parameters optimized for code generation
|
7 |
PARAMETER temperature 0
|
8 |
PARAMETER repeat_penalty 1.1
|
9 |
-
PARAMETER num_predict 300
|
|
|
10 |
PARAMETER stop "<SUF>"
|
11 |
PARAMETER stop "<PRE>"
|
12 |
PARAMETER stop "</PRE>"
|
|
|
6 |
# Parameters optimized for code generation
|
7 |
PARAMETER temperature 0
|
8 |
PARAMETER repeat_penalty 1.1
|
9 |
+
PARAMETER num_predict 300
|
10 |
+
PARAMETER top_p 0.9
|
11 |
PARAMETER stop "<SUF>"
|
12 |
PARAMETER stop "<PRE>"
|
13 |
PARAMETER stop "</PRE>"
|