#define NULL ((void *)0)
typedef unsigned long size_t; // Customize by platform.
typedef long intptr_t;
typedef unsigned long uintptr_t;
typedef long scalar_t__; // Either arithmetic or pointer type.
/* By default, we understand bool (as a convenience). */
typedef int bool;
#define false 0
#define true 1

/* Forward declarations */

/* Type definitions */
struct mapred_token_store {
  int dummy;
};

/* Variables and functions */
int mapred_flatten_token_store(struct mapred_token_store *);
size_t mapred_forward_delim_len(char const *, size_t);
size_t mapred_forward_token_len(char const *, size_t);
int mapred_register_token(struct mapred_token_store *, char const *, size_t);
int mapred_tokenize(struct mapred_token_store *store, const char *data,
                    size_t size) {
  while (size) {
    size_t len;
    len = mapred_forward_delim_len(data, size);
    data += len;
    size -= len;
    len = mapred_forward_token_len(data, size);
    if (len) {
      int err;
      err = mapred_register_token(store, data, len);
      if (err)
        return err;
    }
    data += len;
    size -= len;
  }
  return mapred_flatten_token_store(store);
}


x86 assembly (clang, -O0):
<mapred_tokenize>:
push   %rbp
mov    %rsp,%rbp
sub    $0x30,%rsp
mov    %rdi,-0x10(%rbp)
mov    %rsi,-0x18(%rbp)
mov    %rdx,-0x20(%rbp)
cmpq   $0x0,-0x20(%rbp)
je     11f5 <mapred_tokenize+0xb5>
mov    -0x18(%rbp),%rdi
mov    -0x20(%rbp),%rsi
call   1040 <mapred_forward_delim_len@plt>
mov    %rax,-0x28(%rbp)
mov    -0x28(%rbp),%rax
add    -0x18(%rbp),%rax
mov    %rax,-0x18(%rbp)
mov    -0x28(%rbp),%rcx
mov    -0x20(%rbp),%rax
sub    %rcx,%rax
mov    %rax,-0x20(%rbp)
mov    -0x18(%rbp),%rdi
mov    -0x20(%rbp),%rsi
call   1050 <mapred_forward_token_len@plt>
mov    %rax,-0x28(%rbp)
cmpq   $0x0,-0x28(%rbp)
je     11d5 <mapred_tokenize+0x95>
mov    -0x10(%rbp),%rdi
mov    -0x18(%rbp),%rsi
mov    -0x28(%rbp),%rdx
call   1060 <mapred_register_token@plt>
mov    %eax,-0x2c(%rbp)
cmpl   $0x0,-0x2c(%rbp)
je     11d0 <mapred_tokenize+0x90>
mov    -0x2c(%rbp),%eax
mov    %eax,-0x4(%rbp)
jmp    1201 <mapred_tokenize+0xc1>
jmp    11d5 <mapred_tokenize+0x95>
mov    -0x28(%rbp),%rax
add    -0x18(%rbp),%rax
mov    %rax,-0x18(%rbp)
mov    -0x28(%rbp),%rcx
mov    -0x20(%rbp),%rax
sub    %rcx,%rax
mov    %rax,-0x20(%rbp)
jmp    1154 <mapred_tokenize+0x14>
mov    -0x10(%rbp),%rdi
call   1030 <mapred_flatten_token_store@plt>
mov    %eax,-0x4(%rbp)
mov    -0x4(%rbp),%eax
add    $0x30,%rsp
pop    %rbp
ret

x86 assembly (clang, -O2):
<mapred_tokenize>:
push   %r15
push   %r14
push   %r12
push   %rbx
push   %rax
mov    %rdi,%r14
test   %rdx,%rdx
je     11aa <mapred_tokenize+0x6a>
mov    %rdx,%r15
mov    %rsi,%rbx
jmp    1168 <mapred_tokenize+0x28>
nopl   0x0(%rax,%rax,1)
add    %r12,%rbx
sub    %r12,%r15
je     11aa <mapred_tokenize+0x6a>
mov    %rbx,%rdi
mov    %r15,%rsi
call   1040 <mapred_forward_delim_len@plt>
add    %rax,%rbx
sub    %rax,%r15
mov    %rbx,%rdi
mov    %r15,%rsi
call   1050 <mapred_forward_token_len@plt>
mov    %rax,%r12
test   %rax,%rax
je     1160 <mapred_tokenize+0x20>
mov    %r14,%rdi
mov    %rbx,%rsi
mov    %r12,%rdx
call   1060 <mapred_register_token@plt>
test   %eax,%eax
je     1160 <mapred_tokenize+0x20>
add    $0x8,%rsp
pop    %rbx
pop    %r12
pop    %r14
pop    %r15
ret
mov    %r14,%rdi
add    $0x8,%rsp
pop    %rbx
pop    %r12
pop    %r14
pop    %r15
jmp    1030 <mapred_flatten_token_store@plt>

LLVM IR (-O0):
%struct.mapred_token_store = type { i32 }
define i32 @mapred_tokenize(%struct.mapred_token_store* %0, i8* %1, i64 %2) {
%4 = alloca i32
%5 = alloca %struct.mapred_token_store*
%6 = alloca i8*
%7 = alloca i64
%8 = alloca i64
%9 = alloca i32
store %struct.mapred_token_store* %0, %struct.mapred_token_store** %5
store i8* %1, i8** %6
store i64 %2, i64* %7
br label %10
10: ; preds = %38, %3
%11 = load i64, i64* %7
%12 = icmp ne i64 %11, 0
br i1 %12, label %13, label %45
13: ; preds = %10
%14 = load i8*, i8** %6
%15 = load i64, i64* %7
%16 = call i64 @mapred_forward_delim_len(i8* %14, i64 %15)
store i64 %16, i64* %8
%17 = load i64, i64* %8
%18 = load i8*, i8** %6
%19 = getelementptr inbounds i8, i8* %18, i64 %17
store i8* %19, i8** %6
%20 = load i64, i64* %8
%21 = load i64, i64* %7
%22 = sub i64 %21, %20
store i64 %22, i64* %7
%23 = load i8*, i8** %6
%24 = load i64, i64* %7
%25 = call i64 @mapred_forward_token_len(i8* %23, i64 %24)
store i64 %25, i64* %8
%26 = load i64, i64* %8
%27 = icmp ne i64 %26, 0
br i1 %27, label %28, label %38
28: ; preds = %13
%29 = load %struct.mapred_token_store*, %struct.mapred_token_store** %5
%30 = load i8*, i8** %6
%31 = load i64, i64* %8
%32 = call i32 @mapred_register_token(%struct.mapred_token_store* %29, i8* %30, i64 %31)
store i32 %32, i32* %9
%33 = load i32, i32* %9
%34 = icmp ne i32 %33, 0
br i1 %34, label %35, label %37
35: ; preds = %28
%36 = load i32, i32* %9
store i32 %36, i32* %4
br label %48
37: ; preds = %28
br label %38
38: ; preds = %37, %13
%39 = load i64, i64* %8
%40 = load i8*, i8** %6
%41 = getelementptr inbounds i8, i8* %40, i64 %39
store i8* %41, i8** %6
%42 = load i64, i64* %8
%43 = load i64, i64* %7
%44 = sub i64 %43, %42
store i64 %44, i64* %7
br label %10
45: ; preds = %10
%46 = load %struct.mapred_token_store*, %struct.mapred_token_store** %5
%47 = call i32 @mapred_flatten_token_store(%struct.mapred_token_store* %46)
store i32 %47, i32* %4
br label %48
48: ; preds = %45, %35
%49 = load i32, i32* %4
ret i32 %49
}

LLVM IR (-O2):
%struct.mapred_token_store = type { i32 }
define i32 @mapred_tokenize(%struct.mapred_token_store* %0, i8* %1, i64 %2) {
%4 = icmp eq i64 %2, 0
br i1 %4, label %20, label %5
5: ; preds = %3, %16
%6 = phi i64 [ %18, %16 ], [ %2, %3 ]
%7 = phi i8* [ %17, %16 ], [ %1, %3 ]
%8 = tail call i64 @mapred_forward_delim_len(i8* %7, i64 %6)
%9 = getelementptr inbounds i8, i8* %7, i64 %8
%10 = sub i64 %6, %8
%11 = tail call i64 @mapred_forward_token_len(i8* %9, i64 %10)
%12 = icmp eq i64 %11, 0
br i1 %12, label %16, label %13
13: ; preds = %5
%14 = tail call i32 @mapred_register_token(%struct.mapred_token_store* %0, i8* %9, i64 %11)
%15 = icmp eq i32 %14, 0
br i1 %15, label %16, label %22
16: ; preds = %5, %13
%17 = getelementptr inbounds i8, i8* %9, i64 %11
%18 = sub i64 %10, %11
%19 = icmp eq i64 %18, 0
br i1 %19, label %20, label %5
20: ; preds = %16, %3
%21 = tail call i32 @mapred_flatten_token_store(%struct.mapred_token_store* %0)
br label %22
22: ; preds = %13, %20
%23 = phi i32 [ %21, %20 ], [ %14, %13 ]
ret i32 %23
}