{ "per_channel": false, "reduce_range": false, "per_model_config": { "decoder_model": { "op_types": [ "Transpose", "Sub", "Cast", "Softmax", "Slice", "ReduceMean", "Squeeze", "Gather", "Range", "Unsqueeze", "Pow", "MatMul", "Add", "Equal", "Concat", "Neg", "Reshape", "Div", "Mul", "Sqrt", "ConstantOfShape", "Where", "Tanh", "Shape", "Expand", "Constant", "Split" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Transpose", "Sub", "Cast", "Softmax", "Slice", "ReduceMean", "Squeeze", "Gather", "Range", "Unsqueeze", "Pow", "MatMul", "Add", "Equal", "Concat", "If", "Neg", "Reshape", "Div", "Mul", "Sqrt", "ConstantOfShape", "Where", "Tanh", "Shape", "Expand", "Constant", "Split" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Transpose", "Sub", "Cast", "Softmax", "Slice", "ReduceMean", "Squeeze", "Gather", "Range", "Unsqueeze", "Pow", "MatMul", "Add", "Equal", "Concat", "Neg", "Reshape", "Div", "Mul", "Sqrt", "ConstantOfShape", "Where", "Tanh", "Shape", "Expand", "Constant", "Split" ], "weight_type": "QInt8" } } }