{ "per_channel": false, "reduce_range": false, "per_model_config": { "decoder_model": { "op_types": [ "Cast", "Equal", "Sqrt", "Softmax", "Neg", "Reshape", "ReduceMean", "Where", "MatMul", "Slice", "Shape", "Unsqueeze", "Gather", "Sub", "Squeeze", "Mul", "Split", "Expand", "ConstantOfShape", "Concat", "Constant", "Transpose", "Range", "Pow", "Tanh", "Add", "Div" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Cast", "Equal", "Sqrt", "Softmax", "Neg", "Reshape", "ReduceMean", "Where", "MatMul", "Slice", "Shape", "Gather", "Unsqueeze", "Sub", "Squeeze", "Mul", "Split", "Expand", "ConstantOfShape", "Concat", "Constant", "Transpose", "Range", "Pow", "Tanh", "Add", "If", "Div" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Cast", "Equal", "Sqrt", "Softmax", "Neg", "Reshape", "ReduceMean", "Where", "MatMul", "Slice", "Shape", "Unsqueeze", "Gather", "Sub", "Squeeze", "Mul", "Split", "Expand", "ConstantOfShape", "Concat", "Constant", "Transpose", "Range", "Pow", "Tanh", "Add", "Div" ], "weight_type": "QInt8" } } }