{ "per_channel": false, "reduce_range": false, "per_model_config": { "decoder_model": { "op_types": [ "Range", "Unsqueeze", "Sqrt", "Div", "Add", "Equal", "CumSum", "Cast", "ReduceMean", "MatMul", "Shape", "Slice", "ConstantOfShape", "Softmax", "Less", "Sub", "Expand", "Concat", "Reshape", "Max", "Gather", "Mul", "Constant", "Relu", "Transpose", "Pow", "Where", "Squeeze", "Gemm" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Unsqueeze", "Sqrt", "Div", "Add", "Equal", "CumSum", "Cast", "ReduceMean", "MatMul", "Shape", "Slice", "ConstantOfShape", "Softmax", "Sub", "Expand", "Concat", "Reshape", "Max", "Gather", "Mul", "Constant", "Relu", "Transpose", "Pow", "Where", "Squeeze", "Gemm" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Range", "Unsqueeze", "Sqrt", "Div", "Add", "Equal", "Cast", "CumSum", "ReduceMean", "MatMul", "Shape", "Slice", "ConstantOfShape", "Softmax", "Less", "Sub", "Expand", "Concat", "Reshape", "Max", "Gather", "Mul", "Constant", "If", "Relu", "Transpose", "Pow", "Where", "Squeeze", "Gemm" ], "weight_type": "QInt8" } } }