adapter_config.json

{
  "peft_type": "PACA",
  "r": 64,
  "lora_alpha": 64,
  "paca_alpha": 8.0,
  "target_modules": [
    "q_proj",
    "k_proj",
    "v_proj",
    "o_proj",
    "gate_proj",
    "up_proj",
    "down_proj"
  ],
  "base_model_name_or_path": "meta-llama/Llama-3.1-8B"
}