void lentoks(char *str) {
  char *tok = malloc(80);
  int toklen = 0;
  int toknum = 0;
  char *next;
  next = str + 1;
  while (*str != '\0') {
    if (*str != ' ') {
      tok[toklen] = *str;
      toklen++;
      if ((*next == ' ') || (next == '\0')) {
        toknum++;
        tok[toklen] = '\0';
        printf("Token %d (%s) is %d long. \n", toknum, tok, toklen);
      }
      str++;
      next++;
    } else if (*str == ' ') {
      toklen = 0;
      str++;
      next++;
    }
  }
  free(tok);
}


x86 assembly (clang, -O0):
<lentoks>:
push   %rbp
mov    %rsp,%rbp
sub    $0x20,%rsp
mov    %rdi,-0x8(%rbp)
mov    $0x50,%edi
call   1050 <malloc@plt>
mov    %rax,-0x10(%rbp)
movl   $0x0,-0x14(%rbp)
movl   $0x0,-0x18(%rbp)
mov    -0x8(%rbp),%rax
add    $0x1,%rax
mov    %rax,-0x20(%rbp)
mov    -0x8(%rbp),%rax
movsbl (%rax),%eax
cmp    $0x0,%eax
je     123c <lentoks+0x10c>
mov    -0x8(%rbp),%rax
movsbl (%rax),%eax
cmp    $0x20,%eax
je     1203 <lentoks+0xd3>
mov    -0x8(%rbp),%rax
mov    (%rax),%dl
mov    -0x10(%rbp),%rax
movslq -0x14(%rbp),%rcx
mov    %dl,(%rax,%rcx,1)
mov    -0x14(%rbp),%eax
add    $0x1,%eax
mov    %eax,-0x14(%rbp)
mov    -0x20(%rbp),%rax
movsbl (%rax),%eax
cmp    $0x20,%eax
je     11b9 <lentoks+0x89>
cmpq   $0x0,-0x20(%rbp)
jne    11e6 <lentoks+0xb6>
mov    -0x18(%rbp),%eax
add    $0x1,%eax
mov    %eax,-0x18(%rbp)
mov    -0x10(%rbp),%rax
movslq -0x14(%rbp),%rcx
movb   $0x0,(%rax,%rcx,1)
mov    -0x18(%rbp),%esi
mov    -0x10(%rbp),%rdx
mov    -0x14(%rbp),%ecx
lea    0xe21(%rip),%rdi
mov    $0x0,%al
call   1040 <printf@plt>
mov    -0x8(%rbp),%rax
add    $0x1,%rax
mov    %rax,-0x8(%rbp)
mov    -0x20(%rbp),%rax
add    $0x1,%rax
mov    %rax,-0x20(%rbp)
jmp    1237 <lentoks+0x107>
mov    -0x8(%rbp),%rax
movsbl (%rax),%eax
cmp    $0x20,%eax
jne    1232 <lentoks+0x102>
movl   $0x0,-0x14(%rbp)
mov    -0x8(%rbp),%rax
add    $0x1,%rax
mov    %rax,-0x8(%rbp)
mov    -0x20(%rbp),%rax
add    $0x1,%rax
mov    %rax,-0x20(%rbp)
jmp    1237 <lentoks+0x107>
jmp    1164 <lentoks+0x34>
mov    -0x10(%rbp),%rdi
call   1030 <free@plt>
add    $0x20,%rsp
pop    %rbp
ret

x86 assembly (clang, -O2):
<lentoks>:
push   %rbp
push   %r15
push   %r14
push   %r12
push   %rbx
mov    %rdi,%rbx
mov    $0x50,%edi
call   1050 <malloc@plt>
mov    %rax,%r14
lea    0xeb1(%rip),%r15
xor    %ebp,%ebp
xor    %r12d,%r12d
cs nopw 0x0(%rax,%rax,1)
xchg   %ax,%ax
add    $0x1,%rbx
mov    %ebp,%eax
movzbl -0x1(%rbx),%ecx
xor    %ebp,%ebp
cmp    $0x20,%cl
je     1160 <lentoks+0x30>
test   %cl,%cl
je     11a2 <lentoks+0x72>
movslq %eax,%rbp
mov    %cl,(%r14,%rbp,1)
add    $0x1,%rbp
cmpb   $0x20,(%rbx)
jne    1160 <lentoks+0x30>
add    $0x1,%r12d
movb   $0x0,(%r14,%rbp,1)
mov    %r15,%rdi
mov    %r12d,%esi
mov    %r14,%rdx
mov    %ebp,%ecx
xor    %eax,%eax
call   1040 <printf@plt>
jmp    1160 <lentoks+0x30>
mov    %r14,%rdi
pop    %rbx
pop    %r12
pop    %r14
pop    %r15
pop    %rbp
jmp    1030 <free@plt>

LLVM IR (-O0):
@.str = [28 x i8] c"Token %d (%s) is %d long. \0A\00"
define void @lentoks(i8* %0) {
%2 = alloca i8*
%3 = alloca i8*
%4 = alloca i32
%5 = alloca i32
%6 = alloca i8*
store i8* %0, i8** %2
%7 = call i8* @malloc(i64 80)
store i8* %7, i8** %3
store i32 0, i32* %4
store i32 0, i32* %5
%8 = load i8*, i8** %2
%9 = getelementptr inbounds i8, i8* %8, i64 1
store i8* %9, i8** %6
br label %10
10: ; preds = %63, %1
%11 = load i8*, i8** %2
%12 = load i8, i8* %11
%13 = sext i8 %12 to i32
%14 = icmp ne i32 %13, 0
br i1 %14, label %15, label %64
15: ; preds = %10
%16 = load i8*, i8** %2
%17 = load i8, i8* %16
%18 = sext i8 %17 to i32
%19 = icmp ne i32 %18, 32
br i1 %19, label %20, label %52
20: ; preds = %15
%21 = load i8*, i8** %2
%22 = load i8, i8* %21
%23 = load i8*, i8** %3
%24 = load i32, i32* %4
%25 = sext i32 %24 to i64
%26 = getelementptr inbounds i8, i8* %23, i64 %25
store i8 %22, i8* %26
%27 = load i32, i32* %4
%28 = add nsw i32 %27, 1
store i32 %28, i32* %4
%29 = load i8*, i8** %6
%30 = load i8, i8* %29
%31 = sext i8 %30 to i32
%32 = icmp eq i32 %31, 32
br i1 %32, label %36, label %33
33: ; preds = %20
%34 = load i8*, i8** %6
%35 = icmp eq i8* %34, null
br i1 %35, label %36, label %47
36: ; preds = %33, %20
%37 = load i32, i32* %5
%38 = add nsw i32 %37, 1
store i32 %38, i32* %5
%39 = load i8*, i8** %3
%40 = load i32, i32* %4
%41 = sext i32 %40 to i64
%42 = getelementptr inbounds i8, i8* %39, i64 %41
store i8 0, i8* %42
%43 = load i32, i32* %5
%44 = load i8*, i8** %3
%45 = load i32, i32* %4
%46 = call i32 (i8*, ...) @printf(i8* getelementptr inbounds ([28 x i8], [28 x i8]* @.str, i64 0, i64 0), i32 %43, i8* %44, i32 %45)
br label %47
47: ; preds = %36, %33
%48 = load i8*, i8** %2
%49 = getelementptr inbounds i8, i8* %48, i32 1
store i8* %49, i8** %2
%50 = load i8*, i8** %6
%51 = getelementptr inbounds i8, i8* %50, i32 1
store i8* %51, i8** %6
br label %63
52: ; preds = %15
%53 = load i8*, i8** %2
%54 = load i8, i8* %53
%55 = sext i8 %54 to i32
%56 = icmp eq i32 %55, 32
br i1 %56, label %57, label %62
57: ; preds = %52
store i32 0, i32* %4
%58 = load i8*, i8** %2
%59 = getelementptr inbounds i8, i8* %58, i32 1
store i8* %59, i8** %2
%60 = load i8*, i8** %6
%61 = getelementptr inbounds i8, i8* %60, i32 1
store i8* %61, i8** %6
br label %62
62: ; preds = %57, %52
br label %63
63: ; preds = %62, %47
br label %10
64: ; preds = %10
%65 = load i8*, i8** %3
ret void
}

LLVM IR (-O2):
@.str = [28 x i8] c"Token %d (%s) is %d long. \0A\00"
define void @lentoks(i8* nocapture %0) {
%2 = tail call dereferenceable_or_null(80) i8* @malloc(i64 80)
br label %3
3: ; preds = %20, %1
%4 = phi i8* [ %10, %20 ], [ %0, %1 ]
%5 = phi i32 [ %17, %20 ], [ 0, %1 ]
%6 = phi i32 [ %21, %20 ], [ 0, %1 ]
br label %7
7: ; preds = %12, %3
%8 = phi i8* [ %4, %3 ], [ %10, %12 ]
%9 = phi i32 [ %5, %3 ], [ %13, %12 ]
%10 = getelementptr inbounds i8, i8* %8, i64 1
%11 = load i8, i8* %8
switch i8 %11, label %14 [
i8 0, label %25
i8 32, label %12
]
12: ; preds = %7, %14
%13 = phi i32 [ 0, %7 ], [ %17, %14 ]
br label %7
14: ; preds = %7
%15 = sext i32 %9 to i64
%16 = getelementptr inbounds i8, i8* %2, i64 %15
store i8 %11, i8* %16
%17 = add nsw i32 %9, 1
%18 = load i8, i8* %10
%19 = icmp eq i8 %18, 32
br i1 %19, label %20, label %12
20: ; preds = %14
%21 = add nuw nsw i32 %6, 1
%22 = sext i32 %17 to i64
%23 = getelementptr inbounds i8, i8* %2, i64 %22
store i8 0, i8* %23
%24 = tail call i32 (i8*, ...) @printf(i8* dereferenceable(1) getelementptr inbounds ([28 x i8], [28 x i8]* @.str, i64 0, i64 0), i32 %21, i8* %2, i32 %17)
br label %3
25: ; preds = %7
tail call void @free(i8* %2)
ret void
}