Upload Modelfile
Browse filestop_p parameter added
Modelfile
CHANGED
|
@@ -6,7 +6,8 @@ ADAPTER ./codellama-13b-qml.gguf
|
|
| 6 |
# Parameters optimized for code generation
|
| 7 |
PARAMETER temperature 0
|
| 8 |
PARAMETER repeat_penalty 1.1
|
| 9 |
-
PARAMETER num_predict 300
|
|
|
|
| 10 |
PARAMETER stop "<SUF>"
|
| 11 |
PARAMETER stop "<PRE>"
|
| 12 |
PARAMETER stop "</PRE>"
|
|
|
|
| 6 |
# Parameters optimized for code generation
|
| 7 |
PARAMETER temperature 0
|
| 8 |
PARAMETER repeat_penalty 1.1
|
| 9 |
+
PARAMETER num_predict 300
|
| 10 |
+
PARAMETER top_p 0.9
|
| 11 |
PARAMETER stop "<SUF>"
|
| 12 |
PARAMETER stop "<PRE>"
|
| 13 |
PARAMETER stop "</PRE>"
|