人移民家庭。米勒是犹太人。他的父亲伊萨德（Isadore）拥有一家400人的女装工厂，母亲奥嘉斯达（Augusta）是家庭主妇。除亚瑟·米勒外，还育有克密特（Kermit）以及乔恩（Joan）。全家居住在曼哈顿一幢可以俯瞰中央公园的阁楼中。但1929年大萧条使他家变得一贫如洗，于是搬家到布鲁克林区，当时米勒十几岁，每天早起，在上学前送面包挣钱补贴家用。从林肯高中毕业后，米勒在一家仓库做搬运工和文员以支付大学学费。1936年米勒发表第一部剧作《荣誉的真谛》（"Honors at Dawn"）在密西根大学公