{ "per_channel": false, "reduce_range": false, "per_model_config": { "decoder_with_past_model": { "op_types": [ "Gather", "Slice", "MatMul", "Mul", "Softmax", "Max", "CumSum", "Expand", "Add", "Sub", "Equal", "Reshape", "Unsqueeze", "ReduceMean", "Shape", "Where", "Constant", "Div", "Transpose", "Squeeze", "Relu", "Concat", "Sqrt", "Gemm", "ConstantOfShape", "Pow", "Cast" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Gather", "Less", "Slice", "MatMul", "Mul", "Softmax", "Max", "CumSum", "Expand", "Add", "Sub", "Equal", "Reshape", "Unsqueeze", "ReduceMean", "Shape", "Where", "Constant", "Div", "Range", "Squeeze", "Transpose", "Relu", "If", "Concat", "Sqrt", "Gemm", "ConstantOfShape", "Pow", "Cast" ], "weight_type": "QInt8" }, "decoder_model": { "op_types": [ "Gather", "Less", "Slice", "MatMul", "Mul", "Softmax", "Max", "CumSum", "Expand", "Add", "Sub", "Equal", "Reshape", "Unsqueeze", "ReduceMean", "Shape", "Where", "Constant", "Div", "Range", "Squeeze", "Transpose", "Relu", "Concat", "Sqrt", "Gemm", "ConstantOfShape", "Pow", "Cast" ], "weight_type": "QInt8" } } }