{ "per_channel": true, "reduce_range": true, "per_model_config": { "encoder_model": { "op_types": [ "Div", "Concat", "Reshape", "Mul", "Equal", "Cast", "Slice", "Sqrt", "Shape", "Pow", "Add", "ConstantOfShape", "Unsqueeze", "Constant", "Sub", "Max", "ReduceMean", "Where", "MatMul", "Gather", "Softmax", "Transpose", "Tanh" ], "weight_type": "QInt8" }, "decoder_model": { "op_types": [ "Div", "Concat", "Reshape", "Mul", "Cast", "Sqrt", "Shape", "Range", "Pow", "Add", "ConstantOfShape", "Unsqueeze", "Constant", "Sub", "Less", "ReduceMean", "Neg", "Where", "MatMul", "Log", "Min", "Gather", "Softmax", "Transpose", "Tanh" ], "weight_type": "QInt8" }, "decoder_with_past_model": { "op_types": [ "Div", "Concat", "Reshape", "Mul", "Cast", "Slice", "Sqrt", "Shape", "Range", "Pow", "Add", "ConstantOfShape", "Unsqueeze", "Constant", "Sub", "Less", "ReduceMean", "Neg", "Where", "MatMul", "Log", "Min", "Gather", "Softmax", "Transpose", "Tanh" ], "weight_type": "QInt8" }, "decoder_model_merged": { "op_types": [ "Div", "Concat", "Reshape", "Mul", "Cast", "Slice", "Sqrt", "Shape", "Range", "Pow", "Add", "ConstantOfShape", "Unsqueeze", "If", "Constant", "Sub", "Less", "ReduceMean", "Neg", "Where", "MatMul", "Log", "Min", "Gather", "Softmax", "Transpose", "Tanh" ], "weight_type": "QInt8" } } }