Нет, бездетность (или детность) сама по себе не раздражает. Но могут, к примеру, раздражать советы, которых не просят. А ещё бывает неприятно, когда кого-то с кем-то начинают сталкивать, противопоставлять кого-то кому-то. Стараюсь не общаться с теми, кто так делает. При этом, если человек детей не хочет, потому что не хочет (или хочет, но не сейчас, или хотел, но передумал, или хотел, но не получилось), не вижу тут ни малейшего повода для раздражения.