; LLVM IR from zchrissirhcz/pixel :: legacy/matcalc (matrix_transpose)

; Unoptimized IR (clang -disable-llvm-passes):
target datalayout = "e-m:e-p270:32:32-p271:32:32-p272:64:64-i64:64-i128:128-f80:128-n8:16:32:64-S128"
target triple = "x86_64-unknown-linux-gnu"

; Function Attrs: nocallback nofree nosync nounwind willreturn memory(argmem: readwrite)
declare void @llvm.lifetime.start.p0(i64 immarg, ptr nocapture) #0

; Function Attrs: nocallback nofree nosync nounwind willreturn memory(argmem: readwrite)
declare void @llvm.lifetime.end.p0(i64 immarg, ptr nocapture) #0

; Function Attrs: nounwind uwtable
define dso_local void @matrix_transpose_u8_partition(ptr noundef %0, i32 noundef %1, i32 noundef %2, ptr noundef %3, i32 noundef %4) #1 {
  %6 = alloca ptr, align 8
  %7 = alloca i32, align 4
  %8 = alloca i32, align 4
  %9 = alloca ptr, align 8
  %10 = alloca i32, align 4
  %11 = alloca i32, align 4
  %12 = alloca i32, align 4
  %13 = alloca i32, align 4
  %14 = alloca i32, align 4
  %15 = alloca i32, align 4
  %16 = alloca i32, align 4
  %17 = alloca i32, align 4
  %18 = alloca i32, align 4
  %19 = alloca ptr, align 8
  %20 = alloca ptr, align 8
  %21 = alloca i64, align 8
  %22 = alloca i32, align 4
  %23 = alloca i32, align 4
  %24 = alloca i32, align 4
  %25 = alloca i32, align 4
  %26 = alloca i32, align 4
  %27 = alloca i32, align 4
  %28 = alloca i8, align 1
  %29 = alloca i32, align 4
  %30 = alloca i32, align 4
  %31 = alloca i32, align 4
  %32 = alloca i32, align 4
  %33 = alloca i32, align 4
  %34 = alloca i32, align 4
  %35 = alloca i32, align 4
  %36 = alloca i32, align 4
  store ptr %0, ptr %6, align 8, !tbaa !5
  store i32 %1, ptr %7, align 4, !tbaa !9
  store i32 %2, ptr %8, align 4, !tbaa !9
  store ptr %3, ptr %9, align 8, !tbaa !5
  store i32 %4, ptr %10, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %11) #3
  %37 = load i32, ptr %7, align 4, !tbaa !9
  %38 = load i32, ptr %7, align 4, !tbaa !9
  %39 = load i32, ptr %10, align 4, !tbaa !9
  %40 = urem i32 %38, %39
  %41 = sub i32 %37, %40
  store i32 %41, ptr %11, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %12) #3
  %42 = load i32, ptr %8, align 4, !tbaa !9
  %43 = load i32, ptr %8, align 4, !tbaa !9
  %44 = load i32, ptr %10, align 4, !tbaa !9
  %45 = urem i32 %43, %44
  %46 = sub i32 %42, %45
  store i32 %46, ptr %12, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %13) #3
  %47 = load i32, ptr %10, align 4, !tbaa !9
  %48 = zext i32 %47 to i64
  %49 = mul i64 %48, 1
  %50 = trunc i64 %49 to i32
  store i32 %50, ptr %13, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %14) #3
  %51 = load i32, ptr %8, align 4, !tbaa !9
  %52 = zext i32 %51 to i64
  %53 = mul i64 %52, 1
  %54 = trunc i64 %53 to i32
  store i32 %54, ptr %14, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %15) #3
  %55 = load i32, ptr %7, align 4, !tbaa !9
  %56 = zext i32 %55 to i64
  %57 = mul i64 %56, 1
  %58 = trunc i64 %57 to i32
  store i32 %58, ptr %15, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %16) #3
  store i32 0, ptr %16, align 4, !tbaa !9
  br label %59

59:                                               ; preds = %115, %5
  %60 = load i32, ptr %16, align 4, !tbaa !9
  %61 = load i32, ptr %11, align 4, !tbaa !9
  %62 = icmp ult i32 %60, %61
  br i1 %62, label %64, label %63

63:                                               ; preds = %59
  store i32 2, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %16) #3
  br label %119

64:                                               ; preds = %59
  call void @llvm.lifetime.start.p0(i64 4, ptr %18) #3
  store i32 0, ptr %18, align 4, !tbaa !9
  br label %65

65:                                               ; preds = %110, %64
  %66 = load i32, ptr %18, align 4, !tbaa !9
  %67 = load i32, ptr %12, align 4, !tbaa !9
  %68 = icmp ult i32 %66, %67
  br i1 %68, label %70, label %69

69:                                               ; preds = %65
  store i32 5, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %18) #3
  br label %114

70:                                               ; preds = %65
  call void @llvm.lifetime.start.p0(i64 8, ptr %19) #3
  %71 = load ptr, ptr %6, align 8, !tbaa !5
  %72 = load i32, ptr %16, align 4, !tbaa !9
  %73 = load i32, ptr %8, align 4, !tbaa !9
  %74 = mul i32 %72, %73
  %75 = load i32, ptr %18, align 4, !tbaa !9
  %76 = add i32 %74, %75
  %77 = zext i32 %76 to i64
  %78 = getelementptr inbounds i8, ptr %71, i64 %77
  store ptr %78, ptr %19, align 8, !tbaa !5
  call void @llvm.lifetime.start.p0(i64 8, ptr %20) #3
  %79 = load ptr, ptr %9, align 8, !tbaa !5
  %80 = load i32, ptr %18, align 4, !tbaa !9
  %81 = load i32, ptr %7, align 4, !tbaa !9
  %82 = mul i32 %80, %81
  %83 = load i32, ptr %16, align 4, !tbaa !9
  %84 = add i32 %82, %83
  %85 = zext i32 %84 to i64
  %86 = getelementptr inbounds i8, ptr %79, i64 %85
  store ptr %86, ptr %20, align 8, !tbaa !5
  call void @llvm.lifetime.start.p0(i64 8, ptr %21) #3
  store i64 0, ptr %21, align 8, !tbaa !11
  br label %87

87:                                               ; preds = %106, %70
  %88 = load i64, ptr %21, align 8, !tbaa !11
  %89 = load i32, ptr %10, align 4, !tbaa !9
  %90 = zext i32 %89 to i64
  %91 = icmp ult i64 %88, %90
  br i1 %91, label %93, label %92

92:                                               ; preds = %87
  store i32 8, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 8, ptr %21) #3
  br label %109

93:                                               ; preds = %87
  %94 = load ptr, ptr %20, align 8, !tbaa !5
  %95 = load ptr, ptr %19, align 8, !tbaa !5
  %96 = load i32, ptr %13, align 4, !tbaa !9
  %97 = zext i32 %96 to i64
  call void @llvm.memcpy.p0.p0.i64(ptr align 1 %94, ptr align 1 %95, i64 %97, i1 false)
  %98 = load i32, ptr %14, align 4, !tbaa !9
  %99 = load ptr, ptr %19, align 8, !tbaa !5
  %100 = zext i32 %98 to i64
  %101 = getelementptr inbounds i8, ptr %99, i64 %100
  store ptr %101, ptr %19, align 8, !tbaa !5
  %102 = load i32, ptr %15, align 4, !tbaa !9
  %103 = load ptr, ptr %20, align 8, !tbaa !5
  %104 = zext i32 %102 to i64
  %105 = getelementptr inbounds i8, ptr %103, i64 %104
  store ptr %105, ptr %20, align 8, !tbaa !5
  br label %106

106:                                              ; preds = %93
  %107 = load i64, ptr %21, align 8, !tbaa !11
  %108 = add i64 %107, 1
  store i64 %108, ptr %21, align 8, !tbaa !11
  br label %87, !llvm.loop !13

109:                                              ; preds = %92
  call void @llvm.lifetime.end.p0(i64 8, ptr %20) #3
  call void @llvm.lifetime.end.p0(i64 8, ptr %19) #3
  br label %110

110:                                              ; preds = %109
  %111 = load i32, ptr %10, align 4, !tbaa !9
  %112 = load i32, ptr %18, align 4, !tbaa !9
  %113 = add i32 %112, %111
  store i32 %113, ptr %18, align 4, !tbaa !9
  br label %65, !llvm.loop !15

114:                                              ; preds = %69
  br label %115

115:                                              ; preds = %114
  %116 = load i32, ptr %10, align 4, !tbaa !9
  %117 = load i32, ptr %16, align 4, !tbaa !9
  %118 = add i32 %117, %116
  store i32 %118, ptr %16, align 4, !tbaa !9
  br label %59, !llvm.loop !16

119:                                              ; preds = %63
  call void @llvm.lifetime.start.p0(i64 4, ptr %22) #3
  store i32 0, ptr %22, align 4, !tbaa !9
  br label %120

120:                                              ; preds = %194, %119
  %121 = load i32, ptr %22, align 4, !tbaa !9
  %122 = load i32, ptr %12, align 4, !tbaa !9
  %123 = icmp ult i32 %121, %122
  br i1 %123, label %125, label %124

124:                                              ; preds = %120
  store i32 11, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %22) #3
  br label %198

125:                                              ; preds = %120
  call void @llvm.lifetime.start.p0(i64 4, ptr %23) #3
  store i32 0, ptr %23, align 4, !tbaa !9
  br label %126

126:                                              ; preds = %189, %125
  %127 = load i32, ptr %23, align 4, !tbaa !9
  %128 = load i32, ptr %11, align 4, !tbaa !9
  %129 = icmp ult i32 %127, %128
  br i1 %129, label %131, label %130

130:                                              ; preds = %126
  store i32 14, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %23) #3
  br label %193

131:                                              ; preds = %126
  call void @llvm.lifetime.start.p0(i64 4, ptr %24) #3
  store i32 0, ptr %24, align 4, !tbaa !9
  br label %132

132:                                              ; preds = %185, %131
  %133 = load i32, ptr %24, align 4, !tbaa !9
  %134 = load i32, ptr %10, align 4, !tbaa !9
  %135 = icmp ult i32 %133, %134
  br i1 %135, label %137, label %136

136:                                              ; preds = %132
  store i32 17, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %24) #3
  br label %188

137:                                              ; preds = %132
  call void @llvm.lifetime.start.p0(i64 4, ptr %25) #3
  store i32 0, ptr %25, align 4, !tbaa !9
  br label %138

138:                                              ; preds = %181, %137
  %139 = load i32, ptr %25, align 4, !tbaa !9
  %140 = load i32, ptr %24, align 4, !tbaa !9
  %141 = icmp ult i32 %139, %140
  br i1 %141, label %143, label %142

142:                                              ; preds = %138
  store i32 20, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %25) #3
  br label %184

143:                                              ; preds = %138
  call void @llvm.lifetime.start.p0(i64 4, ptr %26) #3
  %144 = load i32, ptr %22, align 4, !tbaa !9
  %145 = load i32, ptr %24, align 4, !tbaa !9
  %146 = add i32 %144, %145
  %147 = load i32, ptr %7, align 4, !tbaa !9
  %148 = mul i32 %146, %147
  %149 = load i32, ptr %23, align 4, !tbaa !9
  %150 = load i32, ptr %25, align 4, !tbaa !9
  %151 = add i32 %149, %150
  %152 = add i32 %148, %151
  store i32 %152, ptr %26, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %27) #3
  %153 = load i32, ptr %22, align 4, !tbaa !9
  %154 = load i32, ptr %25, align 4, !tbaa !9
  %155 = add i32 %153, %154
  %156 = load i32, ptr %7, align 4, !tbaa !9
  %157 = mul i32 %155, %156
  %158 = load i32, ptr %23, align 4, !tbaa !9
  %159 = load i32, ptr %24, align 4, !tbaa !9
  %160 = add i32 %158, %159
  %161 = add i32 %157, %160
  store i32 %161, ptr %27, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 1, ptr %28) #3
  %162 = load ptr, ptr %9, align 8, !tbaa !5
  %163 = load i32, ptr %27, align 4, !tbaa !9
  %164 = zext i32 %163 to i64
  %165 = getelementptr inbounds i8, ptr %162, i64 %164
  %166 = load i8, ptr %165, align 1, !tbaa !17
  store i8 %166, ptr %28, align 1, !tbaa !17
  %167 = load ptr, ptr %9, align 8, !tbaa !5
  %168 = load i32, ptr %26, align 4, !tbaa !9
  %169 = zext i32 %168 to i64
  %170 = getelementptr inbounds i8, ptr %167, i64 %169
  %171 = load i8, ptr %170, align 1, !tbaa !17
  %172 = load ptr, ptr %9, align 8, !tbaa !5
  %173 = load i32, ptr %27, align 4, !tbaa !9
  %174 = zext i32 %173 to i64
  %175 = getelementptr inbounds i8, ptr %172, i64 %174
  store i8 %171, ptr %175, align 1, !tbaa !17
  %176 = load i8, ptr %28, align 1, !tbaa !17
  %177 = load ptr, ptr %9, align 8, !tbaa !5
  %178 = load i32, ptr %26, align 4, !tbaa !9
  %179 = zext i32 %178 to i64
  %180 = getelementptr inbounds i8, ptr %177, i64 %179
  store i8 %176, ptr %180, align 1, !tbaa !17
  call void @llvm.lifetime.end.p0(i64 1, ptr %28) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %27) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %26) #3
  br label %181

181:                                              ; preds = %143
  %182 = load i32, ptr %25, align 4, !tbaa !9
  %183 = add i32 %182, 1
  store i32 %183, ptr %25, align 4, !tbaa !9
  br label %138, !llvm.loop !18

184:                                              ; preds = %142
  br label %185

185:                                              ; preds = %184
  %186 = load i32, ptr %24, align 4, !tbaa !9
  %187 = add i32 %186, 1
  store i32 %187, ptr %24, align 4, !tbaa !9
  br label %132, !llvm.loop !19

188:                                              ; preds = %136
  br label %189

189:                                              ; preds = %188
  %190 = load i32, ptr %10, align 4, !tbaa !9
  %191 = load i32, ptr %23, align 4, !tbaa !9
  %192 = add i32 %191, %190
  store i32 %192, ptr %23, align 4, !tbaa !9
  br label %126, !llvm.loop !20

193:                                              ; preds = %130
  br label %194

194:                                              ; preds = %193
  %195 = load i32, ptr %10, align 4, !tbaa !9
  %196 = load i32, ptr %22, align 4, !tbaa !9
  %197 = add i32 %196, %195
  store i32 %197, ptr %22, align 4, !tbaa !9
  br label %120, !llvm.loop !21

198:                                              ; preds = %124
  call void @llvm.lifetime.start.p0(i64 4, ptr %29) #3
  store i32 0, ptr %29, align 4, !tbaa !9
  br label %199

199:                                              ; preds = %235, %198
  %200 = load i32, ptr %29, align 4, !tbaa !9
  %201 = load i32, ptr %11, align 4, !tbaa !9
  %202 = icmp ult i32 %200, %201
  br i1 %202, label %204, label %203

203:                                              ; preds = %199
  store i32 23, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %29) #3
  br label %238

204:                                              ; preds = %199
  call void @llvm.lifetime.start.p0(i64 4, ptr %30) #3
  %205 = load i32, ptr %12, align 4, !tbaa !9
  store i32 %205, ptr %30, align 4, !tbaa !9
  br label %206

206:                                              ; preds = %231, %204
  %207 = load i32, ptr %30, align 4, !tbaa !9
  %208 = load i32, ptr %8, align 4, !tbaa !9
  %209 = icmp ult i32 %207, %208
  br i1 %209, label %211, label %210

210:                                              ; preds = %206
  store i32 26, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %30) #3
  br label %234

211:                                              ; preds = %206
  call void @llvm.lifetime.start.p0(i64 4, ptr %31) #3
  %212 = load i32, ptr %29, align 4, !tbaa !9
  %213 = load i32, ptr %8, align 4, !tbaa !9
  %214 = mul i32 %212, %213
  %215 = load i32, ptr %30, align 4, !tbaa !9
  %216 = add i32 %214, %215
  store i32 %216, ptr %31, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %32) #3
  %217 = load i32, ptr %30, align 4, !tbaa !9
  %218 = load i32, ptr %7, align 4, !tbaa !9
  %219 = mul i32 %217, %218
  %220 = load i32, ptr %29, align 4, !tbaa !9
  %221 = add i32 %219, %220
  store i32 %221, ptr %32, align 4, !tbaa !9
  %222 = load ptr, ptr %6, align 8, !tbaa !5
  %223 = load i32, ptr %31, align 4, !tbaa !9
  %224 = zext i32 %223 to i64
  %225 = getelementptr inbounds i8, ptr %222, i64 %224
  %226 = load i8, ptr %225, align 1, !tbaa !17
  %227 = load ptr, ptr %9, align 8, !tbaa !5
  %228 = load i32, ptr %32, align 4, !tbaa !9
  %229 = zext i32 %228 to i64
  %230 = getelementptr inbounds i8, ptr %227, i64 %229
  store i8 %226, ptr %230, align 1, !tbaa !17
  call void @llvm.lifetime.end.p0(i64 4, ptr %32) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %31) #3
  br label %231

231:                                              ; preds = %211
  %232 = load i32, ptr %30, align 4, !tbaa !9
  %233 = add i32 %232, 1
  store i32 %233, ptr %30, align 4, !tbaa !9
  br label %206, !llvm.loop !22

234:                                              ; preds = %210
  br label %235

235:                                              ; preds = %234
  %236 = load i32, ptr %29, align 4, !tbaa !9
  %237 = add i32 %236, 1
  store i32 %237, ptr %29, align 4, !tbaa !9
  br label %199, !llvm.loop !23

238:                                              ; preds = %203
  call void @llvm.lifetime.start.p0(i64 4, ptr %33) #3
  %239 = load i32, ptr %11, align 4, !tbaa !9
  store i32 %239, ptr %33, align 4, !tbaa !9
  br label %240

240:                                              ; preds = %275, %238
  %241 = load i32, ptr %33, align 4, !tbaa !9
  %242 = load i32, ptr %7, align 4, !tbaa !9
  %243 = icmp ult i32 %241, %242
  br i1 %243, label %245, label %244

244:                                              ; preds = %240
  store i32 29, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %33) #3
  br label %278

245:                                              ; preds = %240
  call void @llvm.lifetime.start.p0(i64 4, ptr %34) #3
  store i32 0, ptr %34, align 4, !tbaa !9
  br label %246

246:                                              ; preds = %271, %245
  %247 = load i32, ptr %34, align 4, !tbaa !9
  %248 = load i32, ptr %8, align 4, !tbaa !9
  %249 = icmp ult i32 %247, %248
  br i1 %249, label %251, label %250

250:                                              ; preds = %246
  store i32 32, ptr %17, align 4
  call void @llvm.lifetime.end.p0(i64 4, ptr %34) #3
  br label %274

251:                                              ; preds = %246
  call void @llvm.lifetime.start.p0(i64 4, ptr %35) #3
  %252 = load i32, ptr %33, align 4, !tbaa !9
  %253 = load i32, ptr %8, align 4, !tbaa !9
  %254 = mul i32 %252, %253
  %255 = load i32, ptr %34, align 4, !tbaa !9
  %256 = add i32 %254, %255
  store i32 %256, ptr %35, align 4, !tbaa !9
  call void @llvm.lifetime.start.p0(i64 4, ptr %36) #3
  %257 = load i32, ptr %34, align 4, !tbaa !9
  %258 = load i32, ptr %7, align 4, !tbaa !9
  %259 = mul i32 %257, %258
  %260 = load i32, ptr %33, align 4, !tbaa !9
  %261 = add i32 %259, %260
  store i32 %261, ptr %36, align 4, !tbaa !9
  %262 = load ptr, ptr %6, align 8, !tbaa !5
  %263 = load i32, ptr %35, align 4, !tbaa !9
  %264 = zext i32 %263 to i64
  %265 = getelementptr inbounds i8, ptr %262, i64 %264
  %266 = load i8, ptr %265, align 1, !tbaa !17
  %267 = load ptr, ptr %9, align 8, !tbaa !5
  %268 = load i32, ptr %36, align 4, !tbaa !9
  %269 = zext i32 %268 to i64
  %270 = getelementptr inbounds i8, ptr %267, i64 %269
  store i8 %266, ptr %270, align 1, !tbaa !17
  call void @llvm.lifetime.end.p0(i64 4, ptr %36) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %35) #3
  br label %271

271:                                              ; preds = %251
  %272 = load i32, ptr %34, align 4, !tbaa !9
  %273 = add i32 %272, 1
  store i32 %273, ptr %34, align 4, !tbaa !9
  br label %246, !llvm.loop !24

274:                                              ; preds = %250
  br label %275

275:                                              ; preds = %274
  %276 = load i32, ptr %33, align 4, !tbaa !9
  %277 = add i32 %276, 1
  store i32 %277, ptr %33, align 4, !tbaa !9
  br label %240, !llvm.loop !25

278:                                              ; preds = %244
  call void @llvm.lifetime.end.p0(i64 4, ptr %15) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %14) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %13) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %12) #3
  call void @llvm.lifetime.end.p0(i64 4, ptr %11) #3
  ret void
}

; Function Attrs: nocallback nofree nounwind willreturn memory(argmem: readwrite)
declare void @llvm.memcpy.p0.p0.i64(ptr noalias nocapture writeonly, ptr noalias nocapture readonly, i64, i1 immarg) #2

attributes #0 = { nocallback nofree nosync nounwind willreturn memory(argmem: readwrite) }
attributes #1 = { nounwind uwtable "min-legal-vector-width"="0" "no-trapping-math"="true" "stack-protector-buffer-size"="8" "target-cpu"="x86-64" "target-features"="+cmov,+cx8,+fxsr,+mmx,+sse,+sse2,+x87" "tune-cpu"="generic" }
attributes #2 = { nocallback nofree nounwind willreturn memory(argmem: readwrite) }
attributes #3 = { nounwind }

!llvm.module.flags = !{!0, !1, !2, !3}
!llvm.ident = !{!4}

!0 = !{i32 1, !"wchar_size", i32 4}
!1 = !{i32 8, !"PIC Level", i32 2}
!2 = !{i32 7, !"PIE Level", i32 2}
!3 = !{i32 7, !"uwtable", i32 2}
!4 = !{!"clang version 19.1.0 (git@github.com:llvm/llvm-project.git a4bf6cd7cfb1a1421ba92bca9d017b49936c55e4)"}
!5 = !{!6, !6, i64 0}
!6 = !{!"any pointer", !7, i64 0}
!7 = !{!"omnipotent char", !8, i64 0}
!8 = !{!"Simple C/C++ TBAA"}
!9 = !{!10, !10, i64 0}
!10 = !{!"int", !7, i64 0}
!11 = !{!12, !12, i64 0}
!12 = !{!"long", !7, i64 0}
!13 = distinct !{!13, !14}
!14 = !{!"llvm.loop.mustprogress"}
!15 = distinct !{!15, !14}
!16 = distinct !{!16, !14}
!17 = !{!7, !7, i64 0}
!18 = distinct !{!18, !14}
!19 = distinct !{!19, !14}
!20 = distinct !{!20, !14}
!21 = distinct !{!21, !14}
!22 = distinct !{!22, !14}
!23 = distinct !{!23, !14}
!24 = distinct !{!24, !14}
!25 = distinct !{!25, !14}


; Optimized IR (opt -passes='default<O3>'):
target datalayout = "e-m:e-p270:32:32-p271:32:32-p272:64:64-i64:64-i128:128-f80:128-n8:16:32:64-S128"
target triple = "x86_64-unknown-linux-gnu"

; Function Attrs: nofree norecurse nosync nounwind memory(readwrite, inaccessiblemem: none) uwtable
define dso_local void @matrix_transpose_u8_partition(ptr nocapture noundef readonly %0, i32 noundef %1, i32 noundef %2, ptr nocapture noundef %3, i32 noundef %4) local_unnamed_addr #0 {
  %6 = ptrtoint ptr %0 to i64
  %7 = ptrtoint ptr %3 to i64
  %8 = ptrtoint ptr %0 to i64
  %9 = ptrtoint ptr %3 to i64
  %10 = urem i32 %1, %4
  %11 = sub nuw i32 %1, %10
  %12 = urem i32 %2, %4
  %13 = sub nuw i32 %2, %12
  %14 = zext i32 %4 to i64
  %15 = zext i32 %2 to i64
  %16 = zext i32 %1 to i64
  %.not = icmp eq i32 %11, 0
  br i1 %.not, label %.preheader119, label %.preheader126.lr.ph

.preheader126.lr.ph:                              ; preds = %5
  %.not147 = icmp eq i32 %12, %2
  br i1 %.not147, label %.preheader120.lr.ph, label %.preheader126.us.preheader

.preheader126.us.preheader:                       ; preds = %.preheader126.lr.ph
  %umax = tail call i64 @llvm.umax.i64(i64 %14, i64 1)
  %xtraiter = and i64 %umax, 3
  %17 = icmp ult i32 %4, 4
  %unroll_iter = and i64 %umax, 4294967292
  %lcmp.mod.not = icmp eq i64 %xtraiter, 0
  br label %.preheader126.us

.preheader126.us:                                 ; preds = %.preheader126.us.preheader, %._crit_edge.us
  %.0131.us = phi i32 [ %39, %._crit_edge.us ], [ 0, %.preheader126.us.preheader ]
  %18 = mul i32 %.0131.us, %2
  br label %19

19:                                               ; preds = %.preheader126.us, %.epilog-lcssa
  %.0103130.us = phi i32 [ 0, %.preheader126.us ], [ %29, %.epilog-lcssa ]
  %20 = add i32 %.0103130.us, %18
  %21 = zext i32 %20 to i64
  %22 = getelementptr inbounds i8, ptr %0, i64 %21
  %23 = mul i32 %.0103130.us, %1
  %24 = add i32 %23, %.0131.us
  %25 = zext i32 %24 to i64
  %26 = getelementptr inbounds i8, ptr %3, i64 %25
  br i1 %17, label %.unr-lcssa, label %.new

.unr-lcssa:                                       ; preds = %.new, %19
  %.0104129.us.unr = phi ptr [ %22, %19 ], [ %37, %.new ]
  %.0107128.us.unr = phi ptr [ %26, %19 ], [ %38, %.new ]
  br i1 %lcmp.mod.not, label %.epilog-lcssa, label %.epil.preheader

.epil.preheader:                                  ; preds = %.unr-lcssa, %.epil.preheader
  %.0104129.us.epil = phi ptr [ %27, %.epil.preheader ], [ %.0104129.us.unr, %.unr-lcssa ]
  %.0107128.us.epil = phi ptr [ %28, %.epil.preheader ], [ %.0107128.us.unr, %.unr-lcssa ]
  %epil.iter = phi i64 [ %epil.iter.next, %.epil.preheader ], [ 0, %.unr-lcssa ]
  tail call void @llvm.memcpy.p0.p0.i64(ptr align 1 %.0107128.us.epil, ptr align 1 %.0104129.us.epil, i64 %14, i1 false)
  %27 = getelementptr inbounds i8, ptr %.0104129.us.epil, i64 %15
  %28 = getelementptr inbounds i8, ptr %.0107128.us.epil, i64 %16
  %epil.iter.next = add i64 %epil.iter, 1
  %epil.iter.cmp.not = icmp eq i64 %epil.iter.next, %xtraiter
  br i1 %epil.iter.cmp.not, label %.epilog-lcssa, label %.epil.preheader, !llvm.loop !5

.epilog-lcssa:                                    ; preds = %.epil.preheader, %.unr-lcssa
  %29 = add i32 %.0103130.us, %4
  %30 = icmp ult i32 %29, %13
  br i1 %30, label %19, label %._crit_edge.us, !llvm.loop !7

.new:                                             ; preds = %19, %.new
  %.0104129.us = phi ptr [ %37, %.new ], [ %22, %19 ]
  %.0107128.us = phi ptr [ %38, %.new ], [ %26, %19 ]
  %niter = phi i64 [ %niter.next.3, %.new ], [ 0, %19 ]
  tail call void @llvm.memcpy.p0.p0.i64(ptr align 1 %.0107128.us, ptr align 1 %.0104129.us, i64 %14, i1 false)
  %31 = getelementptr inbounds i8, ptr %.0104129.us, i64 %15
  %32 = getelementptr inbounds i8, ptr %.0107128.us, i64 %16
  tail call void @llvm.memcpy.p0.p0.i64(ptr align 1 %32, ptr align 1 %31, i64 %14, i1 false)
  %33 = getelementptr inbounds i8, ptr %31, i64 %15
  %34 = getelementptr inbounds i8, ptr %32, i64 %16
  tail call void @llvm.memcpy.p0.p0.i64(ptr align 1 %34, ptr align 1 %33, i64 %14, i1 false)
  %35 = getelementptr inbounds i8, ptr %33, i64 %15
  %36 = getelementptr inbounds i8, ptr %34, i64 %16
  tail call void @llvm.memcpy.p0.p0.i64(ptr align 1 %36, ptr align 1 %35, i64 %14, i1 false)
  %37 = getelementptr inbounds i8, ptr %35, i64 %15
  %38 = getelementptr inbounds i8, ptr %36, i64 %16
  %niter.next.3 = add i64 %niter, 4
  %niter.ncmp.3 = icmp eq i64 %niter.next.3, %unroll_iter
  br i1 %niter.ncmp.3, label %.unr-lcssa, label %.new, !llvm.loop !9

._crit_edge.us:                                   ; preds = %.epilog-lcssa
  %39 = add i32 %.0131.us, %4
  %40 = icmp ult i32 %39, %11
  br i1 %40, label %.preheader126.us, label %.preheader125, !llvm.loop !10

.preheader125:                                    ; preds = %._crit_edge.us
  %.not148 = icmp eq i32 %12, %2
  br i1 %.not148, label %.preheader121, label %.preheader124.lr.ph

.preheader124.lr.ph:                              ; preds = %.preheader125
  br i1 %.not, label %.preheader119, label %.preheader124.us.preheader

.preheader124.us.preheader:                       ; preds = %.preheader124.lr.ph
  %umax164 = tail call i32 @llvm.umax.i32(i32 %4, i32 1)
  %wide.trip.count165 = zext i32 %umax164 to i64
  %ident.check = icmp ne i32 %1, 1
  br label %.preheader124.us

.preheader124.us:                                 ; preds = %.preheader124.us.preheader, %._crit_edge135.us
  %indvar = phi i64 [ 0, %.preheader124.us.preheader ], [ %indvar.next, %._crit_edge135.us ]
  %.0109136.us = phi i32 [ 0, %.preheader124.us.preheader ], [ %115, %._crit_edge135.us ]
  br label %.preheader123.us

41:                                               ; preds = %._crit_edge.us137
  %42 = add i32 %.0112134.us, %4
  %43 = icmp ult i32 %42, %11
  %indvar.next180 = add i64 %indvar179, 1
  br i1 %43, label %.preheader123.us, label %._crit_edge135.us, !llvm.loop !11

._crit_edge.us137:                                ; preds = %vec.epilog.scalar.ph.prol.loopexit, %vec.epilog.scalar.ph, %middle.block, %vec.epilog.middle.block, %.preheader122.us
  %indvars.iv.next162 = add nuw nsw i64 %indvars.iv161, 1
  %exitcond166.not = icmp eq i64 %indvars.iv.next162, %wide.trip.count165
  br i1 %exitcond166.not, label %41, label %.preheader122.us, !llvm.loop !12

vec.epilog.scalar.ph:                             ; preds = %vec.epilog.scalar.ph.prol.loopexit, %vec.epilog.scalar.ph
  %indvars.iv = phi i64 [ %indvars.iv.next.1, %vec.epilog.scalar.ph ], [ %indvars.iv.unr, %vec.epilog.scalar.ph.prol.loopexit ]
  %44 = trunc nuw i64 %indvars.iv to i32
  %45 = add i32 %75, %44
  %46 = add i32 %.0109136.us, %44
  %47 = mul i32 %46, %1
  %48 = add i32 %76, %47
  %49 = zext i32 %48 to i64
  %50 = getelementptr inbounds i8, ptr %3, i64 %49
  %51 = load i8, ptr %50, align 1, !tbaa !13
  %52 = zext i32 %45 to i64
  %53 = getelementptr inbounds i8, ptr %3, i64 %52
  %54 = load i8, ptr %53, align 1, !tbaa !13
  store i8 %54, ptr %50, align 1, !tbaa !13
  store i8 %51, ptr %53, align 1, !tbaa !13
  %55 = trunc i64 %indvars.iv to i32
  %56 = add i32 %55, 1
  %57 = add i32 %75, %56
  %58 = add i32 %.0109136.us, %56
  %59 = mul i32 %58, %1
  %60 = add i32 %76, %59
  %61 = zext i32 %60 to i64
  %62 = getelementptr inbounds i8, ptr %3, i64 %61
  %63 = load i8, ptr %62, align 1, !tbaa !13
  %64 = zext i32 %57 to i64
  %65 = getelementptr inbounds i8, ptr %3, i64 %64
  %66 = load i8, ptr %65, align 1, !tbaa !13
  store i8 %66, ptr %62, align 1, !tbaa !13
  store i8 %63, ptr %65, align 1, !tbaa !13
  %indvars.iv.next.1 = add nuw nsw i64 %indvars.iv, 2
  %exitcond160.not.1 = icmp eq i64 %indvars.iv.next.1, %indvars.iv161
  br i1 %exitcond160.not.1, label %._crit_edge.us137, label %vec.epilog.scalar.ph, !llvm.loop !16

.preheader122.us:                                 ; preds = %.preheader123.us, %._crit_edge.us137
  %indvars.iv161 = phi i64 [ 0, %.preheader123.us ], [ %indvars.iv.next162, %._crit_edge.us137 ]
  %67 = add nsw i64 %indvars.iv161, -1
  %68 = add i64 %71, %indvars.iv161
  %69 = trunc i64 %68 to i32
  %.not150 = icmp eq i64 %indvars.iv161, 0
  br i1 %.not150, label %._crit_edge.us137, label %iter.check

.preheader123.us:                                 ; preds = %.preheader124.us, %41
  %indvar179 = phi i64 [ 0, %.preheader124.us ], [ %indvar.next180, %41 ]
  %.0112134.us = phi i32 [ 0, %.preheader124.us ], [ %42, %41 ]
  %70 = add i64 %indvar, %indvar179
  %71 = mul i64 %70, %14
  br label %.preheader122.us

iter.check:                                       ; preds = %.preheader122.us
  %72 = trunc nuw i64 %indvars.iv161 to i32
  %73 = add i32 %.0109136.us, %72
  %74 = mul i32 %73, %1
  %75 = add i32 %74, %.0112134.us
  %76 = add i32 %.0112134.us, %72
  %min.iters.check = icmp ult i64 %indvars.iv161, 8
  br i1 %min.iters.check, label %vec.epilog.scalar.ph.preheader, label %vector.scevcheck

vector.scevcheck:                                 ; preds = %iter.check
  %77 = trunc i64 %67 to i32
  %78 = xor i32 %69, -1
  %79 = icmp ult i32 %78, %77
  %80 = icmp ugt i64 %67, 4294967295
  %81 = or i1 %79, %80
  %82 = or i1 %ident.check, %81
  br i1 %82, label %vec.epilog.scalar.ph.preheader, label %vector.main.loop.iter.check

vector.main.loop.iter.check:                      ; preds = %vector.scevcheck
  %min.iters.check181 = icmp ult i64 %indvars.iv161, 32
  br i1 %min.iters.check181, label %vec.epilog.ph, label %vector.ph

vector.ph:                                        ; preds = %vector.main.loop.iter.check
  %n.vec = and i64 %indvars.iv161, 8589934560
  br label %vector.body

vector.body:                                      ; preds = %vector.body, %vector.ph
  %index = phi i64 [ 0, %vector.ph ], [ %index.next, %vector.body ]
  %83 = trunc i64 %index to i32
  %84 = add i32 %75, %83
  %85 = add i32 %.0109136.us, %83
  %86 = add i32 %76, %85
  %87 = zext i32 %86 to i64
  %88 = getelementptr inbounds i8, ptr %3, i64 %87
  %89 = getelementptr inbounds i8, ptr %88, i64 16
  %wide.load = load <16 x i8>, ptr %88, align 1, !tbaa !13
  %wide.load182 = load <16 x i8>, ptr %89, align 1, !tbaa !13
  %90 = zext i32 %84 to i64
  %91 = getelementptr inbounds i8, ptr %3, i64 %90
  %92 = getelementptr inbounds i8, ptr %91, i64 16
  %wide.load183 = load <16 x i8>, ptr %91, align 1, !tbaa !13
  %wide.load184 = load <16 x i8>, ptr %92, align 1, !tbaa !13
  store <16 x i8> %wide.load183, ptr %88, align 1, !tbaa !13
  store <16 x i8> %wide.load184, ptr %89, align 1, !tbaa !13
  store <16 x i8> %wide.load, ptr %91, align 1, !tbaa !13
  store <16 x i8> %wide.load182, ptr %92, align 1, !tbaa !13
  %index.next = add nuw i64 %index, 32
  %93 = icmp eq i64 %index.next, %n.vec
  br i1 %93, label %middle.block, label %vector.body, !llvm.loop !18

middle.block:                                     ; preds = %vector.body
  %cmp.n = icmp eq i64 %indvars.iv161, %n.vec
  br i1 %cmp.n, label %._crit_edge.us137, label %vec.epilog.iter.check

vec.epilog.iter.check:                            ; preds = %middle.block
  %n.vec.remaining = and i64 %indvars.iv161, 24
  %min.epilog.iters.check = icmp eq i64 %n.vec.remaining, 0
  br i1 %min.epilog.iters.check, label %vec.epilog.scalar.ph.preheader, label %vec.epilog.ph

vec.epilog.scalar.ph.preheader:                   ; preds = %vec.epilog.middle.block, %vector.scevcheck, %iter.check, %vec.epilog.iter.check
  %indvars.iv.ph = phi i64 [ 0, %iter.check ], [ 0, %vector.scevcheck ], [ %n.vec, %vec.epilog.iter.check ], [ %n.vec186, %vec.epilog.middle.block ]
  %.neg = or disjoint i64 %indvars.iv.ph, 1
  %xtraiter264 = and i64 %indvars.iv161, 1
  %lcmp.mod265.not = icmp eq i64 %xtraiter264, 0
  br i1 %lcmp.mod265.not, label %vec.epilog.scalar.ph.prol.loopexit, label %vec.epilog.scalar.ph.prol

vec.epilog.scalar.ph.prol:                        ; preds = %vec.epilog.scalar.ph.preheader
  %94 = trunc nuw i64 %indvars.iv.ph to i32
  %95 = add i32 %75, %94
  %96 = add i32 %.0109136.us, %94
  %97 = mul i32 %96, %1
  %98 = add i32 %76, %97
  %99 = zext i32 %98 to i64
  %100 = getelementptr inbounds i8, ptr %3, i64 %99
  %101 = load i8, ptr %100, align 1, !tbaa !13
  %102 = zext i32 %95 to i64
  %103 = getelementptr inbounds i8, ptr %3, i64 %102
  %104 = load i8, ptr %103, align 1, !tbaa !13
  store i8 %104, ptr %100, align 1, !tbaa !13
  store i8 %101, ptr %103, align 1, !tbaa !13
  %indvars.iv.next.prol = or disjoint i64 %indvars.iv.ph, 1
  br label %vec.epilog.scalar.ph.prol.loopexit

vec.epilog.scalar.ph.prol.loopexit:               ; preds = %vec.epilog.scalar.ph.prol, %vec.epilog.scalar.ph.preheader
  %indvars.iv.unr = phi i64 [ %indvars.iv.ph, %vec.epilog.scalar.ph.preheader ], [ %indvars.iv.next.prol, %vec.epilog.scalar.ph.prol ]
  %105 = icmp eq i64 %indvars.iv161, %.neg
  br i1 %105, label %._crit_edge.us137, label %vec.epilog.scalar.ph

vec.epilog.ph:                                    ; preds = %vector.main.loop.iter.check, %vec.epilog.iter.check
  %vec.epilog.resume.val = phi i64 [ %n.vec, %vec.epilog.iter.check ], [ 0, %vector.main.loop.iter.check ]
  %n.vec186 = and i64 %indvars.iv161, 8589934584
  br label %vec.epilog.vector.body

vec.epilog.vector.body:                           ; preds = %vec.epilog.vector.body, %vec.epilog.ph
  %index187 = phi i64 [ %vec.epilog.resume.val, %vec.epilog.ph ], [ %index.next190, %vec.epilog.vector.body ]
  %106 = trunc i64 %index187 to i32
  %107 = add i32 %75, %106
  %108 = add i32 %.0109136.us, %106
  %109 = add i32 %76, %108
  %110 = zext i32 %109 to i64
  %111 = getelementptr inbounds i8, ptr %3, i64 %110
  %wide.load188 = load <8 x i8>, ptr %111, align 1, !tbaa !13
  %112 = zext i32 %107 to i64
  %113 = getelementptr inbounds i8, ptr %3, i64 %112
  %wide.load189 = load <8 x i8>, ptr %113, align 1, !tbaa !13
  store <8 x i8> %wide.load189, ptr %111, align 1, !tbaa !13
  store <8 x i8> %wide.load188, ptr %113, align 1, !tbaa !13
  %index.next190 = add nuw i64 %index187, 8
  %114 = icmp eq i64 %index.next190, %n.vec186
  br i1 %114, label %vec.epilog.middle.block, label %vec.epilog.vector.body, !llvm.loop !20

vec.epilog.middle.block:                          ; preds = %vec.epilog.vector.body
  %cmp.n191 = icmp eq i64 %indvars.iv161, %n.vec186
  br i1 %cmp.n191, label %._crit_edge.us137, label %vec.epilog.scalar.ph.preheader

._crit_edge135.us:                                ; preds = %41
  %115 = add i32 %.0109136.us, %4
  %116 = icmp ult i32 %115, %13
  %indvar.next = add i64 %indvar, 1
  br i1 %116, label %.preheader124.us, label %.preheader121, !llvm.loop !21

.preheader121:                                    ; preds = %._crit_edge135.us, %.preheader125
  %.not152 = icmp eq i32 %12, 0
  %or.cond = or i1 %.not, %.not152
  br i1 %or.cond, label %.preheader119, label %.preheader120.us.preheader

.preheader120.lr.ph:                              ; preds = %.preheader126.lr.ph
  %.not152.old = icmp eq i32 %12, 0
  br i1 %.not152.old, label %.preheader119, label %.preheader120.us.preheader

.preheader120.us.preheader:                       ; preds = %.preheader121, %.preheader120.lr.ph
  %117 = urem i64 %15, %14
  %118 = sub nuw nsw i64 %15, %117
  %119 = add nuw nsw i64 %118, 1
  %120 = add nuw nsw i64 %118, 1
  %umax195 = tail call i64 @llvm.umax.i64(i64 %120, i64 %15)
  %121 = sub nsw i64 %umax195, %118
  %min.iters.check197 = icmp ult i64 %121, 8
  %ident.check193 = icmp ne i32 %1, 1
  %umax194 = tail call i64 @llvm.umax.i64(i64 %119, i64 %15)
  %122 = xor i64 %118, -1
  %123 = add nsw i64 %umax194, %122
  %124 = trunc i64 %123 to i32
  %125 = icmp ugt i64 %123, 4294967295
  %126 = trunc i64 %123 to i32
  %min.iters.check200 = icmp ult i64 %121, 32
  %n.vec204 = and i64 %121, -32
  %cmp.n210 = icmp eq i64 %121, %n.vec204
  %ind.end220 = add nsw i64 %118, %n.vec204
  %n.vec.remaining215 = and i64 %121, 24
  %min.epilog.iters.check216 = icmp eq i64 %n.vec.remaining215, 0
  %n.vec219 = and i64 %121, -8
  %ind.end = add nsw i64 %118, %n.vec219
  %cmp.n227 = icmp eq i64 %121, %n.vec219
  br label %iter.check199

iter.check199:                                    ; preds = %.preheader120.us.preheader, %._crit_edge.us141
  %.0106139.us = phi i32 [ %178, %._crit_edge.us141 ], [ 0, %.preheader120.us.preheader ]
  %127 = mul i32 %.0106139.us, %2
  %128 = mul i32 %.0106139.us, %2
  br i1 %min.iters.check197, label %vec.epilog.scalar.ph212.preheader, label %vector.scevcheck192

vector.scevcheck192:                              ; preds = %iter.check199
  %129 = mul i32 %.0106139.us, %2
  %130 = urem i32 %2, %4
  %131 = sub nuw i32 %2, %130
  %132 = add i32 %.0106139.us, %131
  %133 = xor i32 %132, -1
  %134 = icmp ult i32 %133, %124
  %135 = or i1 %134, %125
  %136 = add i32 %131, %129
  %137 = xor i32 %136, -1
  %138 = icmp ult i32 %137, %126
  %139 = or i1 %ident.check193, %135
  %140 = or i1 %138, %139
  br i1 %140, label %vec.epilog.scalar.ph212.preheader, label %vector.memcheck

vector.memcheck:                                  ; preds = %vector.scevcheck192
  %141 = urem i32 %2, %4
  %142 = sub nuw i32 %2, %141
  %143 = add i32 %.0106139.us, %142
  %144 = zext i32 %143 to i64
  %145 = add i64 %9, %144
  %146 = add i32 %142, %127
  %147 = zext i32 %146 to i64
  %148 = add i64 %8, %147
  %149 = sub i64 %145, %148
  %diff.check = icmp ult i64 %149, 32
  br i1 %diff.check, label %vec.epilog.scalar.ph212.preheader, label %vector.main.loop.iter.check201

vector.main.loop.iter.check201:                   ; preds = %vector.memcheck
  br i1 %min.iters.check200, label %vec.epilog.ph213, label %vector.body205

vector.body205:                                   ; preds = %vector.main.loop.iter.check201, %vector.body205
  %index206 = phi i64 [ %index.next209, %vector.body205 ], [ 0, %vector.main.loop.iter.check201 ]
  %offset.idx = add i64 %118, %index206
  %150 = trunc i64 %offset.idx to i32
  %151 = add i32 %128, %150
  %152 = add i32 %.0106139.us, %150
  %153 = zext i32 %151 to i64
  %154 = getelementptr inbounds i8, ptr %0, i64 %153
  %155 = getelementptr inbounds i8, ptr %154, i64 16
  %wide.load207 = load <16 x i8>, ptr %154, align 1, !tbaa !13
  %wide.load208 = load <16 x i8>, ptr %155, align 1, !tbaa !13
  %156 = zext i32 %152 to i64
  %157 = getelementptr inbounds i8, ptr %3, i64 %156
  %158 = getelementptr inbounds i8, ptr %157, i64 16
  store <16 x i8> %wide.load207, ptr %157, align 1, !tbaa !13
  store <16 x i8> %wide.load208, ptr %158, align 1, !tbaa !13
  %index.next209 = add nuw i64 %index206, 32
  %159 = icmp eq i64 %index.next209, %n.vec204
  br i1 %159, label %middle.block196, label %vector.body205, !llvm.loop !22

middle.block196:                                  ; preds = %vector.body205
  br i1 %cmp.n210, label %._crit_edge.us141, label %vec.epilog.iter.check214

vec.epilog.iter.check214:                         ; preds = %middle.block196
  br i1 %min.epilog.iters.check216, label %vec.epilog.scalar.ph212.preheader, label %vec.epilog.ph213

vec.epilog.ph213:                                 ; preds = %vector.main.loop.iter.check201, %vec.epilog.iter.check214
  %vec.epilog.resume.val217 = phi i64 [ %n.vec204, %vec.epilog.iter.check214 ], [ 0, %vector.main.loop.iter.check201 ]
  br label %vec.epilog.vector.body222

vec.epilog.vector.body222:                        ; preds = %vec.epilog.vector.body222, %vec.epilog.ph213
  %index223 = phi i64 [ %vec.epilog.resume.val217, %vec.epilog.ph213 ], [ %index.next226, %vec.epilog.vector.body222 ]
  %offset.idx224 = add i64 %118, %index223
  %160 = trunc i64 %offset.idx224 to i32
  %161 = add i32 %128, %160
  %162 = add i32 %.0106139.us, %160
  %163 = zext i32 %161 to i64
  %164 = getelementptr inbounds i8, ptr %0, i64 %163
  %wide.load225 = load <8 x i8>, ptr %164, align 1, !tbaa !13
  %165 = zext i32 %162 to i64
  %166 = getelementptr inbounds i8, ptr %3, i64 %165
  store <8 x i8> %wide.load225, ptr %166, align 1, !tbaa !13
  %index.next226 = add nuw i64 %index223, 8
  %167 = icmp eq i64 %index.next226, %n.vec219
  br i1 %167, label %vec.epilog.middle.block211, label %vec.epilog.vector.body222, !llvm.loop !23

vec.epilog.middle.block211:                       ; preds = %vec.epilog.vector.body222
  br i1 %cmp.n227, label %._crit_edge.us141, label %vec.epilog.scalar.ph212.preheader

vec.epilog.scalar.ph212.preheader:                ; preds = %vec.epilog.middle.block211, %vector.memcheck, %vector.scevcheck192, %iter.check199, %vec.epilog.iter.check214
  %indvars.iv167.ph = phi i64 [ %118, %iter.check199 ], [ %118, %vector.memcheck ], [ %118, %vector.scevcheck192 ], [ %ind.end220, %vec.epilog.iter.check214 ], [ %ind.end, %vec.epilog.middle.block211 ]
  br label %vec.epilog.scalar.ph212

vec.epilog.scalar.ph212:                          ; preds = %vec.epilog.scalar.ph212.preheader, %vec.epilog.scalar.ph212
  %indvars.iv167 = phi i64 [ %indvars.iv.next168, %vec.epilog.scalar.ph212 ], [ %indvars.iv167.ph, %vec.epilog.scalar.ph212.preheader ]
  %168 = trunc nuw i64 %indvars.iv167 to i32
  %169 = add i32 %128, %168
  %170 = mul i32 %168, %1
  %171 = add i32 %170, %.0106139.us
  %172 = zext i32 %169 to i64
  %173 = getelementptr inbounds i8, ptr %0, i64 %172
  %174 = load i8, ptr %173, align 1, !tbaa !13
  %175 = zext i32 %171 to i64
  %176 = getelementptr inbounds i8, ptr %3, i64 %175
  store i8 %174, ptr %176, align 1, !tbaa !13
  %indvars.iv.next168 = add nuw i64 %indvars.iv167, 1
  %177 = icmp ult i64 %indvars.iv.next168, %15
  br i1 %177, label %vec.epilog.scalar.ph212, label %._crit_edge.us141, !llvm.loop !24

._crit_edge.us141:                                ; preds = %vec.epilog.scalar.ph212, %vec.epilog.middle.block211, %middle.block196
  %178 = add nuw i32 %.0106139.us, 1
  %179 = icmp ult i32 %178, %11
  br i1 %179, label %iter.check199, label %.preheader119, !llvm.loop !25

.preheader119:                                    ; preds = %._crit_edge.us141, %5, %.preheader124.lr.ph, %.preheader120.lr.ph, %.preheader121
  %.not153 = icmp eq i32 %10, 0
  %.not154 = icmp eq i32 %2, 0
  %or.cond178 = or i1 %.not153, %.not154
  br i1 %or.cond178, label %._crit_edge144, label %.preheader.us.preheader

.preheader.us.preheader:                          ; preds = %.preheader119
  %180 = add nsw i64 %15, -1
  %min.iters.check235 = icmp ult i32 %2, 8
  %ident.check229 = icmp ne i32 %1, 1
  %181 = icmp eq i32 %4, 1
  %182 = zext i1 %181 to i32
  %183 = trunc i64 %180 to i32
  %184 = icmp ugt i64 %180, 4294967295
  %185 = select i1 %181, i32 %2, i32 0
  %186 = trunc i64 %180 to i32
  %187 = icmp eq i32 %4, 1
  %188 = zext i1 %187 to i32
  %189 = select i1 %187, i32 %2, i32 0
  %min.iters.check238 = icmp ult i32 %2, 32
  %n.vec242 = and i64 %15, 4294967264
  %cmp.n248 = icmp eq i64 %n.vec242, %15
  %n.vec.remaining253 = and i64 %15, 24
  %min.epilog.iters.check254 = icmp eq i64 %n.vec.remaining253, 0
  %n.vec257 = and i64 %15, 4294967288
  %cmp.n263 = icmp eq i64 %n.vec257, %15
  %xtraiter266 = and i64 %15, 1
  %lcmp.mod267.not = icmp eq i64 %xtraiter266, 0
  %190 = add nsw i64 %15, -1
  br label %iter.check237

iter.check237:                                    ; preds = %.preheader.us.preheader, %._crit_edge.us146
  %indvar230 = phi i32 [ 0, %.preheader.us.preheader ], [ %indvar.next231, %._crit_edge.us146 ]
  %.0102143.us = phi i32 [ %11, %.preheader.us.preheader ], [ %257, %._crit_edge.us146 ]
  %191 = mul i32 %indvar230, %2
  %192 = mul i32 %.0102143.us, %2
  br i1 %min.iters.check235, label %vec.epilog.scalar.ph250.preheader, label %vector.scevcheck228

vector.scevcheck228:                              ; preds = %iter.check237
  %193 = mul i32 %indvar230, %2
  %194 = add i32 %indvar230, %182
  %195 = xor i32 %194, -1
  %196 = icmp ult i32 %195, %183
  %197 = or i1 %196, %184
  %198 = add i32 %185, %193
  %199 = xor i32 %198, -1
  %200 = icmp ult i32 %199, %186
  %201 = or i1 %ident.check229, %197
  %202 = or i1 %200, %201
  br i1 %202, label %vec.epilog.scalar.ph250.preheader, label %vector.memcheck232

vector.memcheck232:                               ; preds = %vector.scevcheck228
  %203 = add i32 %indvar230, %188
  %204 = zext i32 %203 to i64
  %205 = add i64 %7, %204
  %206 = add i32 %189, %191
  %207 = zext i32 %206 to i64
  %208 = add i64 %6, %207
  %209 = sub i64 %205, %208
  %diff.check233 = icmp ult i64 %209, 32
  br i1 %diff.check233, label %vec.epilog.scalar.ph250.preheader, label %vector.main.loop.iter.check239

vector.main.loop.iter.check239:                   ; preds = %vector.memcheck232
  br i1 %min.iters.check238, label %vec.epilog.ph251, label %vector.body243

vector.body243:                                   ; preds = %vector.main.loop.iter.check239, %vector.body243
  %index244 = phi i64 [ %index.next247, %vector.body243 ], [ 0, %vector.main.loop.iter.check239 ]
  %210 = trunc i64 %index244 to i32
  %211 = add i32 %192, %210
  %212 = add i32 %.0102143.us, %210
  %213 = zext i32 %211 to i64
  %214 = getelementptr inbounds i8, ptr %0, i64 %213
  %215 = getelementptr inbounds i8, ptr %214, i64 16
  %wide.load245 = load <16 x i8>, ptr %214, align 1, !tbaa !13
  %wide.load246 = load <16 x i8>, ptr %215, align 1, !tbaa !13
  %216 = zext i32 %212 to i64
  %217 = getelementptr inbounds i8, ptr %3, i64 %216
  %218 = getelementptr inbounds i8, ptr %217, i64 16
  store <16 x i8> %wide.load245, ptr %217, align 1, !tbaa !13
  store <16 x i8> %wide.load246, ptr %218, align 1, !tbaa !13
  %index.next247 = add nuw i64 %index244, 32
  %219 = icmp eq i64 %index.next247, %n.vec242
  br i1 %219, label %middle.block234, label %vector.body243, !llvm.loop !26

middle.block234:                                  ; preds = %vector.body243
  br i1 %cmp.n248, label %._crit_edge.us146, label %vec.epilog.iter.check252

vec.epilog.iter.check252:                         ; preds = %middle.block234
  br i1 %min.epilog.iters.check254, label %vec.epilog.scalar.ph250.preheader, label %vec.epilog.ph251

vec.epilog.ph251:                                 ; preds = %vector.main.loop.iter.check239, %vec.epilog.iter.check252
  %vec.epilog.resume.val255 = phi i64 [ %n.vec242, %vec.epilog.iter.check252 ], [ 0, %vector.main.loop.iter.check239 ]
  br label %vec.epilog.vector.body259

vec.epilog.vector.body259:                        ; preds = %vec.epilog.vector.body259, %vec.epilog.ph251
  %index260 = phi i64 [ %vec.epilog.resume.val255, %vec.epilog.ph251 ], [ %index.next262, %vec.epilog.vector.body259 ]
  %220 = trunc i64 %index260 to i32
  %221 = add i32 %192, %220
  %222 = add i32 %.0102143.us, %220
  %223 = zext i32 %221 to i64
  %224 = getelementptr inbounds i8, ptr %0, i64 %223
  %wide.load261 = load <8 x i8>, ptr %224, align 1, !tbaa !13
  %225 = zext i32 %222 to i64
  %226 = getelementptr inbounds i8, ptr %3, i64 %225
  store <8 x i8> %wide.load261, ptr %226, align 1, !tbaa !13
  %index.next262 = add nuw i64 %index260, 8
  %227 = icmp eq i64 %index.next262, %n.vec257
  br i1 %227, label %vec.epilog.middle.block249, label %vec.epilog.vector.body259, !llvm.loop !27

vec.epilog.middle.block249:                       ; preds = %vec.epilog.vector.body259
  br i1 %cmp.n263, label %._crit_edge.us146, label %vec.epilog.scalar.ph250.preheader

vec.epilog.scalar.ph250.preheader:                ; preds = %vec.epilog.middle.block249, %vector.memcheck232, %vector.scevcheck228, %iter.check237, %vec.epilog.iter.check252
  %indvars.iv169.ph = phi i64 [ 0, %iter.check237 ], [ 0, %vector.memcheck232 ], [ 0, %vector.scevcheck228 ], [ %n.vec242, %vec.epilog.iter.check252 ], [ %n.vec257, %vec.epilog.middle.block249 ]
  br i1 %lcmp.mod267.not, label %vec.epilog.scalar.ph250.prol.loopexit, label %vec.epilog.scalar.ph250.prol

vec.epilog.scalar.ph250.prol:                     ; preds = %vec.epilog.scalar.ph250.preheader
  %228 = trunc nuw i64 %indvars.iv169.ph to i32
  %229 = add i32 %192, %228
  %230 = mul i32 %228, %1
  %231 = add i32 %230, %.0102143.us
  %232 = zext i32 %229 to i64
  %233 = getelementptr inbounds i8, ptr %0, i64 %232
  %234 = load i8, ptr %233, align 1, !tbaa !13
  %235 = zext i32 %231 to i64
  %236 = getelementptr inbounds i8, ptr %3, i64 %235
  store i8 %234, ptr %236, align 1, !tbaa !13
  %indvars.iv.next170.prol = or disjoint i64 %indvars.iv169.ph, 1
  br label %vec.epilog.scalar.ph250.prol.loopexit

vec.epilog.scalar.ph250.prol.loopexit:            ; preds = %vec.epilog.scalar.ph250.prol, %vec.epilog.scalar.ph250.preheader
  %indvars.iv169.unr = phi i64 [ %indvars.iv169.ph, %vec.epilog.scalar.ph250.preheader ], [ %indvars.iv.next170.prol, %vec.epilog.scalar.ph250.prol ]
  %237 = icmp eq i64 %indvars.iv169.ph, %190
  br i1 %237, label %._crit_edge.us146, label %vec.epilog.scalar.ph250

vec.epilog.scalar.ph250:                          ; preds = %vec.epilog.scalar.ph250.prol.loopexit, %vec.epilog.scalar.ph250
  %indvars.iv169 = phi i64 [ %indvars.iv.next170.1, %vec.epilog.scalar.ph250 ], [ %indvars.iv169.unr, %vec.epilog.scalar.ph250.prol.loopexit ]
  %238 = trunc nuw i64 %indvars.iv169 to i32
  %239 = add i32 %192, %238
  %240 = mul i32 %238, %1
  %241 = add i32 %240, %.0102143.us
  %242 = zext i32 %239 to i64
  %243 = getelementptr inbounds i8, ptr %0, i64 %242
  %244 = load i8, ptr %243, align 1, !tbaa !13
  %245 = zext i32 %241 to i64
  %246 = getelementptr inbounds i8, ptr %3, i64 %245
  store i8 %244, ptr %246, align 1, !tbaa !13
  %247 = trunc i64 %indvars.iv169 to i32
  %248 = add i32 %247, 1
  %249 = add i32 %192, %248
  %250 = mul i32 %248, %1
  %251 = add i32 %250, %.0102143.us
  %252 = zext i32 %249 to i64
  %253 = getelementptr inbounds i8, ptr %0, i64 %252
  %254 = load i8, ptr %253, align 1, !tbaa !13
  %255 = zext i32 %251 to i64
  %256 = getelementptr inbounds i8, ptr %3, i64 %255
  store i8 %254, ptr %256, align 1, !tbaa !13
  %indvars.iv.next170.1 = add nuw nsw i64 %indvars.iv169, 2
  %exitcond172.not.1 = icmp eq i64 %indvars.iv.next170.1, %15
  br i1 %exitcond172.not.1, label %._crit_edge.us146, label %vec.epilog.scalar.ph250, !llvm.loop !28

._crit_edge.us146:                                ; preds = %vec.epilog.scalar.ph250.prol.loopexit, %vec.epilog.scalar.ph250, %vec.epilog.middle.block249, %middle.block234
  %257 = add i32 %.0102143.us, 1
  %258 = icmp ult i32 %257, %1
  %indvar.next231 = add i32 %indvar230, 1
  br i1 %258, label %iter.check237, label %._crit_edge144, !llvm.loop !29

._crit_edge144:                                   ; preds = %._crit_edge.us146, %.preheader119
  ret void
}

; Function Attrs: mustprogress nocallback nofree nounwind willreturn memory(argmem: readwrite)
declare void @llvm.memcpy.p0.p0.i64(ptr noalias nocapture writeonly, ptr noalias nocapture readonly, i64, i1 immarg) #1

; Function Attrs: nocallback nofree nosync nounwind speculatable willreturn memory(none)
declare i64 @llvm.umax.i64(i64, i64) #2

; Function Attrs: nocallback nofree nosync nounwind speculatable willreturn memory(none)
declare i32 @llvm.umax.i32(i32, i32) #2

attributes #0 = { nofree norecurse nosync nounwind memory(readwrite, inaccessiblemem: none) uwtable "min-legal-vector-width"="0" "no-trapping-math"="true" "stack-protector-buffer-size"="8" "target-cpu"="x86-64" "target-features"="+cmov,+cx8,+fxsr,+mmx,+sse,+sse2,+x87" "tune-cpu"="generic" }
attributes #1 = { mustprogress nocallback nofree nounwind willreturn memory(argmem: readwrite) }
attributes #2 = { nocallback nofree nosync nounwind speculatable willreturn memory(none) }

!llvm.module.flags = !{!0, !1, !2, !3}
!llvm.ident = !{!4}

!0 = !{i32 1, !"wchar_size", i32 4}
!1 = !{i32 8, !"PIC Level", i32 2}
!2 = !{i32 7, !"PIE Level", i32 2}
!3 = !{i32 7, !"uwtable", i32 2}
!4 = !{!"clang version 19.1.0 (git@github.com:llvm/llvm-project.git a4bf6cd7cfb1a1421ba92bca9d017b49936c55e4)"}
!5 = distinct !{!5, !6}
!6 = !{!"llvm.loop.unroll.disable"}
!7 = distinct !{!7, !8}
!8 = !{!"llvm.loop.mustprogress"}
!9 = distinct !{!9, !8}
!10 = distinct !{!10, !8}
!11 = distinct !{!11, !8}
!12 = distinct !{!12, !8}
!13 = !{!14, !14, i64 0}
!14 = !{!"omnipotent char", !15, i64 0}
!15 = !{!"Simple C/C++ TBAA"}
!16 = distinct !{!16, !8, !17}
!17 = !{!"llvm.loop.isvectorized", i32 1}
!18 = distinct !{!18, !8, !17, !19}
!19 = !{!"llvm.loop.unroll.runtime.disable"}
!20 = distinct !{!20, !8, !17, !19}
!21 = distinct !{!21, !8}
!22 = distinct !{!22, !8, !17, !19}
!23 = distinct !{!23, !8, !17, !19}
!24 = distinct !{!24, !8, !17}
!25 = distinct !{!25, !8}
!26 = distinct !{!26, !8, !17, !19}
!27 = distinct !{!27, !8, !17, !19}
!28 = distinct !{!28, !8, !17}
!29 = distinct !{!29, !8}


; Effective O3 passes: ADCEPass,CorrelatedValuePropagationPass,EarlyCSEPass,GVNPass,GlobalOptPass,IPSCCPPass,IndVarSimplifyPass,InferFunctionAttrsPass,InstCombinePass,InstSimplifyPass,JumpThreadingPass,LCSSAPass,LICMPass,LoopLoadEliminationPass,LoopRotatePass,LoopSimplifyCFGPass,LoopSimplifyPass,LoopUnrollPass,LoopVectorizePass,PostOrderFunctionAttrsPass,ReassociatePass,SROAPass,SimplifyCFGPass,TailCallElimPass