int nextToken(char *token, int tokenLen, char *line, int lineLen, int index) {
  int tokenIsDone = 0;
  int i = 0;
  while (index < lineLen) {
    char c = line[index];
    if (c == '\0') {
      token[i] = '\0';
      return lineLen;
    }
    token[i] = c;
    if (c == ' ') {
      if (!tokenIsDone) {
        token[i] = '\0';
        tokenIsDone = 1;
        index++;
        break;
      }
    } else {
      token[i] = c;
      i++;
      if (i == tokenLen)
        tokenIsDone = 1;
    }
    index++;
  }
  if (!tokenIsDone)
    return -1;
  return index;
}


x86 assembly (clang, -O0):
<nextToken>:
push   %rbp
mov    %rsp,%rbp
mov    %rdi,-0x10(%rbp)
mov    %esi,-0x14(%rbp)
mov    %rdx,-0x20(%rbp)
mov    %ecx,-0x24(%rbp)
mov    %r8d,-0x28(%rbp)
movl   $0x0,-0x2c(%rbp)
movl   $0x0,-0x30(%rbp)
mov    -0x28(%rbp),%eax
cmp    -0x24(%rbp),%eax
jge    11ea <nextToken+0xea>
mov    -0x20(%rbp),%rax
movslq -0x28(%rbp),%rcx
mov    (%rax,%rcx,1),%al
mov    %al,-0x31(%rbp)
movsbl -0x31(%rbp),%eax
cmp    $0x0,%eax
jne    1162 <nextToken+0x62>
mov    -0x10(%rbp),%rax
movslq -0x30(%rbp),%rcx
movb   $0x0,(%rax,%rcx,1)
mov    -0x24(%rbp),%eax
mov    %eax,-0x4(%rbp)
jmp    1206 <nextToken+0x106>
mov    -0x31(%rbp),%dl
mov    -0x10(%rbp),%rax
movslq -0x30(%rbp),%rcx
mov    %dl,(%rax,%rcx,1)
movsbl -0x31(%rbp),%eax
cmp    $0x20,%eax
jne    11ad <nextToken+0xad>
cmpl   $0x0,-0x2c(%rbp)
jne    11a8 <nextToken+0xa8>
mov    -0x10(%rbp),%rax
movslq -0x30(%rbp),%rcx
movb   $0x0,(%rax,%rcx,1)
movl   $0x1,-0x2c(%rbp)
mov    -0x28(%rbp),%eax
add    $0x1,%eax
mov    %eax,-0x28(%rbp)
jmp    11ea <nextToken+0xea>
jmp    11dc <nextToken+0xdc>
mov    -0x31(%rbp),%dl
mov    -0x10(%rbp),%rax
movslq -0x30(%rbp),%rcx
mov    %dl,(%rax,%rcx,1)
mov    -0x30(%rbp),%eax
add    $0x1,%eax
mov    %eax,-0x30(%rbp)
mov    -0x30(%rbp),%eax
cmp    -0x14(%rbp),%eax
jne    11d7 <nextToken+0xd7>
movl   $0x1,-0x2c(%rbp)
jmp    11dc <nextToken+0xdc>
mov    -0x28(%rbp),%eax
add    $0x1,%eax
mov    %eax,-0x28(%rbp)
jmp    1124 <nextToken+0x24>
cmpl   $0x0,-0x2c(%rbp)
jne    1200 <nextToken+0x100>
movl   $0xffffffff,-0x4(%rbp)
jmp    1206 <nextToken+0x106>
mov    -0x28(%rbp),%eax
mov    %eax,-0x4(%rbp)
mov    -0x4(%rbp),%eax
pop    %rbp
ret

x86 assembly (clang, -O2):
<nextToken>:
push   %rbp
push   %rbx
cmp    %ecx,%r8d
jge    1182 <nextToken+0x82>
mov    %ecx,%eax
movslq %r8d,%rcx
add    $0x1,%r8d
add    %rcx,%rdx
mov    %eax,%r9d
neg    %r9d
xor    %r11d,%r11d
mov    $0x1,%r10d
xor    %ebp,%ebp
jmp    1154 <nextToken+0x54>
cs nopw 0x0(%rax,%rax,1)
add    $0x1,%r11d
cmp    %esi,%r11d
cmove  %r10d,%ebp
add    $0x1,%rdx
lea    (%r9,%r8,1),%ecx
add    $0x1,%ecx
mov    %r8d,%ebx
add    $0x1,%ebx
mov    %ebx,%r8d
cmp    $0x1,%ecx
je     117e <nextToken+0x7e>
movzbl (%rdx),%ecx
movslq %r11d,%rbx
test   %cl,%cl
je     1178 <nextToken+0x78>
mov    %cl,(%rdi,%rbx,1)
cmp    $0x20,%cl
jne    1130 <nextToken+0x30>
test   %ebp,%ebp
mov    $0x1,%ebp
jne    113b <nextToken+0x3b>
movb   $0x0,(%rdi,%rbx,1)
mov    %r8d,%eax
jmp    1187 <nextToken+0x87>
movb   $0x0,(%rdi,%rbx,1)
jmp    1187 <nextToken+0x87>
test   %ebp,%ebp
jne    1187 <nextToken+0x87>
mov    $0xffffffff,%eax
pop    %rbx
pop    %rbp
ret

LLVM IR (-O0):
define i32 @nextToken(i8* %0, i32 %1, i8* %2, i32 %3, i32 %4) {
%6 = alloca i32
%7 = alloca i8*
%8 = alloca i32
%9 = alloca i8*
%10 = alloca i32
%11 = alloca i32
%12 = alloca i32
%13 = alloca i32
%14 = alloca i8
store i8* %0, i8** %7
store i32 %1, i32* %8
store i8* %2, i8** %9
store i32 %3, i32* %10
store i32 %4, i32* %11
store i32 0, i32* %12
store i32 0, i32* %13
br label %15
15: ; preds = %67, %5
%16 = load i32, i32* %11
%17 = load i32, i32* %10
%18 = icmp slt i32 %16, %17
br i1 %18, label %19, label %70
19: ; preds = %15
%20 = load i8*, i8** %9
%21 = load i32, i32* %11
%22 = sext i32 %21 to i64
%23 = getelementptr inbounds i8, i8* %20, i64 %22
%24 = load i8, i8* %23
store i8 %24, i8* %14
%25 = load i8, i8* %14
%26 = sext i8 %25 to i32
%27 = icmp eq i32 %26, 0
br i1 %27, label %28, label %34
28: ; preds = %19
%29 = load i8*, i8** %7
%30 = load i32, i32* %13
%31 = sext i32 %30 to i64
%32 = getelementptr inbounds i8, i8* %29, i64 %31
store i8 0, i8* %32
%33 = load i32, i32* %10
store i32 %33, i32* %6
br label %76
34: ; preds = %19
%35 = load i8, i8* %14
%36 = load i8*, i8** %7
%37 = load i32, i32* %13
%38 = sext i32 %37 to i64
%39 = getelementptr inbounds i8, i8* %36, i64 %38
store i8 %35, i8* %39
%40 = load i8, i8* %14
%41 = sext i8 %40 to i32
%42 = icmp eq i32 %41, 32
br i1 %42, label %43, label %54
43: ; preds = %34
%44 = load i32, i32* %12
%45 = icmp ne i32 %44, 0
br i1 %45, label %53, label %46
46: ; preds = %43
%47 = load i8*, i8** %7
%48 = load i32, i32* %13
%49 = sext i32 %48 to i64
%50 = getelementptr inbounds i8, i8* %47, i64 %49
store i8 0, i8* %50
store i32 1, i32* %12
%51 = load i32, i32* %11
%52 = add nsw i32 %51, 1
store i32 %52, i32* %11
br label %70
53: ; preds = %43
br label %67
54: ; preds = %34
%55 = load i8, i8* %14
%56 = load i8*, i8** %7
%57 = load i32, i32* %13
%58 = sext i32 %57 to i64
%59 = getelementptr inbounds i8, i8* %56, i64 %58
store i8 %55, i8* %59
%60 = load i32, i32* %13
%61 = add nsw i32 %60, 1
store i32 %61, i32* %13
%62 = load i32, i32* %13
%63 = load i32, i32* %8
%64 = icmp eq i32 %62, %63
br i1 %64, label %65, label %66
65: ; preds = %54
store i32 1, i32* %12
br label %66
66: ; preds = %65, %54
br label %67
67: ; preds = %66, %53
%68 = load i32, i32* %11
%69 = add nsw i32 %68, 1
store i32 %69, i32* %11
br label %15
70: ; preds = %46, %15
%71 = load i32, i32* %12
%72 = icmp ne i32 %71, 0
br i1 %72, label %74, label %73
73: ; preds = %70
store i32 -1, i32* %6
br label %76
74: ; preds = %70
%75 = load i32, i32* %11
store i32 %75, i32* %6
br label %76
76: ; preds = %74, %73, %28
%77 = load i32, i32* %6
ret i32 %77
}

LLVM IR (-O2):
define i32 @nextToken(i8* nocapture writeonly %0, i32 %1, i8* nocapture %2, i32 %3, i32 %4) {
%6 = icmp slt i32 %4, %3
br i1 %6, label %7, label %39
7: ; preds = %5
%8 = sext i32 %4 to i64
br label %9
9: ; preds = %7, %31
%10 = phi i64 [ %8, %7 ], [ %34, %31 ]
%11 = phi i32 [ 0, %7 ], [ %33, %31 ]
%12 = phi i32 [ 0, %7 ], [ %32, %31 ]
%13 = getelementptr inbounds i8, i8* %2, i64 %10
%14 = load i8, i8* %13
%15 = icmp eq i8 %14, 0
%16 = sext i32 %11 to i64
%17 = getelementptr inbounds i8, i8* %0, i64 %16
br i1 %15, label %18, label %19
18: ; preds = %9
store i8 0, i8* %17
br label %40
19: ; preds = %9
store i8 %14, i8* %17
%20 = icmp eq i8 %14, 32
br i1 %20, label %21, label %27
21: ; preds = %19
%22 = icmp eq i32 %12, 0
br i1 %22, label %23, label %31
23: ; preds = %21
%24 = getelementptr inbounds i8, i8* %0, i64 %16
%25 = trunc i64 %10 to i32
store i8 0, i8* %24
%26 = add nsw i32 %25, 1
br label %40
27: ; preds = %19
%28 = add nsw i32 %11, 1
%29 = icmp eq i32 %28, %1
%30 = select i1 %29, i32 1, i32 %12
br label %31
31: ; preds = %21, %27
%32 = phi i32 [ 1, %21 ], [ %30, %27 ]
%33 = phi i32 [ %11, %21 ], [ %28, %27 ]
%34 = add nsw i64 %10, 1
%35 = trunc i64 %34 to i32
%36 = icmp eq i32 %35, %3
br i1 %36, label %37, label %9
37: ; preds = %31
%38 = icmp eq i32 %32, 0
br i1 %38, label %39, label %40
39: ; preds = %5, %37
br label %40
40: ; preds = %39, %37, %23, %18
%41 = phi i32 [ %3, %18 ], [ %26, %23 ], [ -1, %39 ], [ %3, %37 ]
ret i32 %41
}