deebak14 commited on
Commit
2883889
·
verified ·
1 Parent(s): 58d5307

Upload model

Browse files
Files changed (2) hide show
  1. adapter_config.json +5 -485
  2. adapter_model.safetensors +2 -2
adapter_config.json CHANGED
@@ -27,496 +27,16 @@
27
  "rank_pattern": {},
28
  "revision": null,
29
  "target_modules": [
30
- "v_proj",
31
  "down_proj",
32
- "q_proj",
33
  "o_proj",
34
- "k_proj",
35
  "up_proj",
36
- "gate_proj"
 
 
 
37
  ],
38
  "task_type": "CAUSAL_LM",
39
- "trainable_token_indices": {
40
- "embed_tokens": [
41
- 151665,
42
- 151666,
43
- 151667,
44
- 151668,
45
- 151669,
46
- 151670,
47
- 151671,
48
- 151672,
49
- 151673,
50
- 151674,
51
- 151675,
52
- 151676,
53
- 151677,
54
- 151678,
55
- 151679,
56
- 151680,
57
- 151681,
58
- 151682,
59
- 151683,
60
- 151684,
61
- 151685,
62
- 151686,
63
- 151687,
64
- 151688,
65
- 151689,
66
- 151690,
67
- 151691,
68
- 151692,
69
- 151693,
70
- 151694,
71
- 151695,
72
- 151696,
73
- 151697,
74
- 151698,
75
- 151699,
76
- 151700,
77
- 151701,
78
- 151702,
79
- 151703,
80
- 151704,
81
- 151705,
82
- 151706,
83
- 151707,
84
- 151708,
85
- 151709,
86
- 151710,
87
- 151711,
88
- 151712,
89
- 151713,
90
- 151714,
91
- 151715,
92
- 151716,
93
- 151717,
94
- 151718,
95
- 151719,
96
- 151720,
97
- 151721,
98
- 151722,
99
- 151723,
100
- 151724,
101
- 151725,
102
- 151726,
103
- 151727,
104
- 151728,
105
- 151729,
106
- 151730,
107
- 151731,
108
- 151732,
109
- 151733,
110
- 151734,
111
- 151735,
112
- 151736,
113
- 151737,
114
- 151738,
115
- 151739,
116
- 151740,
117
- 151741,
118
- 151742,
119
- 151743,
120
- 151744,
121
- 151745,
122
- 151746,
123
- 151747,
124
- 151748,
125
- 151749,
126
- 151750,
127
- 151751,
128
- 151752,
129
- 151753,
130
- 151754,
131
- 151755,
132
- 151756,
133
- 151757,
134
- 151758,
135
- 151759,
136
- 151760,
137
- 151761,
138
- 151762,
139
- 151763,
140
- 151764,
141
- 151765,
142
- 151766,
143
- 151767,
144
- 151768,
145
- 151769,
146
- 151770,
147
- 151771,
148
- 151772,
149
- 151773,
150
- 151774,
151
- 151775,
152
- 151776,
153
- 151777,
154
- 151778,
155
- 151779,
156
- 151780,
157
- 151781,
158
- 151782,
159
- 151783,
160
- 151784,
161
- 151785,
162
- 151786,
163
- 151787,
164
- 151788,
165
- 151789,
166
- 151790,
167
- 151791,
168
- 8726,
169
- 66040,
170
- 151792,
171
- 151793,
172
- 151794,
173
- 151795,
174
- 151796,
175
- 151797,
176
- 151798,
177
- 151799,
178
- 151800,
179
- 151801,
180
- 151802,
181
- 151803,
182
- 151804,
183
- 151805,
184
- 151806,
185
- 151807,
186
- 151808,
187
- 151809,
188
- 151810,
189
- 151811,
190
- 151812,
191
- 151813,
192
- 151814,
193
- 151815,
194
- 151816,
195
- 151817,
196
- 151818,
197
- 151819,
198
- 151820,
199
- 151821,
200
- 151822,
201
- 151823,
202
- 151824,
203
- 151825,
204
- 151826,
205
- 151827,
206
- 151828,
207
- 151829,
208
- 151830,
209
- 151831,
210
- 151832,
211
- 151833,
212
- 151834,
213
- 151835,
214
- 151836,
215
- 151837,
216
- 151838,
217
- 151839,
218
- 151840,
219
- 151841,
220
- 151842,
221
- 151843,
222
- 151844,
223
- 151845,
224
- 151846,
225
- 151847,
226
- 151848,
227
- 151849,
228
- 151850,
229
- 151851,
230
- 151852,
231
- 151853,
232
- 151854,
233
- 151855,
234
- 151856,
235
- 151857,
236
- 151858,
237
- 151859,
238
- 151860,
239
- 151861,
240
- 151862,
241
- 151863,
242
- 151864,
243
- 151865,
244
- 151866,
245
- 151867,
246
- 151868,
247
- 151869,
248
- 151870,
249
- 151871,
250
- 151872,
251
- 151873,
252
- 151874,
253
- 151875,
254
- 151876,
255
- 151877,
256
- 151878,
257
- 151879,
258
- 151880,
259
- 151881,
260
- 151882,
261
- 151883,
262
- 151884,
263
- 151885,
264
- 151886,
265
- 151887,
266
- 151888,
267
- 151889,
268
- 151890,
269
- 151891,
270
- 151892,
271
- 151893,
272
- 151894,
273
- 151895,
274
- 151896,
275
- 151897,
276
- 151898,
277
- 151899,
278
- 151900,
279
- 151901,
280
- 151902,
281
- 151903,
282
- 151904,
283
- 151905,
284
- 151906,
285
- 151907,
286
- 151908,
287
- 151909,
288
- 151910,
289
- 151911,
290
- 151912,
291
- 151913,
292
- 151914,
293
- 151915,
294
- 151916,
295
- 151917,
296
- 151918,
297
- 151919,
298
- 151920,
299
- 151921,
300
- 151922,
301
- 151923,
302
- 151924,
303
- 151925,
304
- 151926,
305
- 151927,
306
- 151928,
307
- 151929,
308
- 151930,
309
- 151931,
310
- 151932,
311
- 151933,
312
- 151934,
313
- 151935,
314
- 151936,
315
- 151937,
316
- 151938,
317
- 151939,
318
- 151940,
319
- 151941,
320
- 151942,
321
- 151943,
322
- 151944,
323
- 151945,
324
- 151946,
325
- 151947,
326
- 151948,
327
- 151949,
328
- 151950,
329
- 151951,
330
- 151952,
331
- 151953,
332
- 151954,
333
- 151955,
334
- 151956,
335
- 151957,
336
- 151958,
337
- 151959,
338
- 151960,
339
- 151961,
340
- 151962,
341
- 151963,
342
- 151964,
343
- 151965,
344
- 151966,
345
- 151967,
346
- 151968,
347
- 151969,
348
- 151970,
349
- 151971,
350
- 151972,
351
- 151973,
352
- 151974,
353
- 151975,
354
- 151976,
355
- 151977,
356
- 151978,
357
- 151979,
358
- 151980,
359
- 151981,
360
- 151982,
361
- 151983,
362
- 151984,
363
- 151985,
364
- 151986,
365
- 151987,
366
- 151988,
367
- 151989,
368
- 151990,
369
- 151991,
370
- 151992,
371
- 151993,
372
- 151994,
373
- 151995,
374
- 151996,
375
- 151997,
376
- 151998,
377
- 151999,
378
- 152000,
379
- 152001,
380
- 152002,
381
- 152003,
382
- 152004,
383
- 152005,
384
- 152006,
385
- 152007,
386
- 152008,
387
- 152009,
388
- 15939,
389
- 152010,
390
- 152011,
391
- 152012,
392
- 152013,
393
- 152014,
394
- 152015,
395
- 152016,
396
- 152017,
397
- 152018,
398
- 152019,
399
- 14778,
400
- 152020,
401
- 152021,
402
- 152022,
403
- 41745,
404
- 152023,
405
- 152024,
406
- 152025,
407
- 152026,
408
- 152027,
409
- 152028,
410
- 152029,
411
- 152030,
412
- 152031,
413
- 152032,
414
- 152033,
415
- 152034,
416
- 152035,
417
- 152036,
418
- 152037,
419
- 152038,
420
- 152039,
421
- 152040,
422
- 152041,
423
- 152042,
424
- 152043,
425
- 37748,
426
- 152044,
427
- 152045,
428
- 152046,
429
- 152047,
430
- 49530,
431
- 152048,
432
- 152049,
433
- 152050,
434
- 152051,
435
- 152052,
436
- 152053,
437
- 152054,
438
- 152055,
439
- 152056,
440
- 152057,
441
- 152058,
442
- 152059,
443
- 152060,
444
- 152061,
445
- 152062,
446
- 152063,
447
- 152064,
448
- 152065,
449
- 152066,
450
- 152067,
451
- 152068,
452
- 152069,
453
- 152070,
454
- 152071,
455
- 152072,
456
- 152073,
457
- 152074,
458
- 152075,
459
- 152076,
460
- 152077,
461
- 152078,
462
- 152079,
463
- 152080,
464
- 152081,
465
- 152082,
466
- 152083,
467
- 152084,
468
- 152085,
469
- 152086,
470
- 152087,
471
- 152088,
472
- 152089,
473
- 152090,
474
- 152091,
475
- 152092,
476
- 152093,
477
- 152094,
478
- 152095,
479
- 152096,
480
- 152097,
481
- 152098,
482
- 152099,
483
- 152100,
484
- 152101,
485
- 152102,
486
- 152103,
487
- 152104,
488
- 152105,
489
- 152106,
490
- 152107,
491
- 152108,
492
- 152109,
493
- 152110,
494
- 152111,
495
- 152112,
496
- 152113,
497
- 152114,
498
- 152115,
499
- 152116,
500
- 152117,
501
- 152118,
502
- 152119,
503
- 152120,
504
- 152121,
505
- 152122,
506
- 152123,
507
- 152124,
508
- 152125,
509
- 152126,
510
- 152127,
511
- 152128,
512
- 152129,
513
- 152130,
514
- 152131,
515
- 152132,
516
- 152133,
517
- 152134
518
- ]
519
- },
520
  "use_dora": false,
521
  "use_qalora": false,
522
  "use_rslora": false
 
27
  "rank_pattern": {},
28
  "revision": null,
29
  "target_modules": [
 
30
  "down_proj",
 
31
  "o_proj",
 
32
  "up_proj",
33
+ "gate_proj",
34
+ "v_proj",
35
+ "k_proj",
36
+ "q_proj"
37
  ],
38
  "task_type": "CAUSAL_LM",
39
+ "trainable_token_indices": null,
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
40
  "use_dora": false,
41
  "use_qalora": false,
42
  "use_rslora": false
adapter_model.safetensors CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:f93bcf98e6aa419e3545233a436bcdb3caa8b386efd82669d63f8fc9aabc3dfb
3
- size 6791812448
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:389641294157c84c9b7b2ca54b59f4f62487a3b92a3f258b83f440ff587d4109
3
+ size 2107728656