沃伊特深深地爱着他的女儿，在2002年他们共同录制的一次访谈中，他向朱莉描述了她出生时的情景：“你不记得了，但当你从母亲的肚子里出来的时候，我把你抱起，你躺在我怀中，我看着你的脸。你的手指放在脸颊旁，看起来非常非常聪明，像我一个老朋友。我开始告诉你，我和你的妈妈是多么开心地迎接这个新生命，我们将要好好地照顾你，观察你生活中所有自我的倾向，并帮助你实现上帝赋予的美好天分。我说完这些，房间里的人开始哭，而我们没有哭，只是陶醉于彼此的凝望。”
妻儿搬去纽约后，他坦言非常想念他们：“朱莉就是个天生的开心果，詹姆斯也很懂事。即便没有和孩子们一起居住，我仍希望自己能够积极地参与他们的生活。”1982年，沃伊特让女儿得到了人生中第一个角色，扮演影片《寻找出口》（一译为《朴克误我卅年》）中的托什。这部由沃伊特主演及参与编剧的电影讲述了两个纽约赌徒的故事。这个家庭的成员几乎全部参演，沃伊特的前妻玛琪琳扮演“吉普车中的女人”，而他当时的女友史黛丝饰演剧中人物拉斯蒂。
沃伊特很希望孩子们能了解父亲每天在忙什么，于是他经常带他们观看他的新作。1979年，他们一同观看电影《冠军》，他在其中饰演一名独自抚养儿子的退役拳击手。“对他们来说有点难以接受，”沃伊特很快观察到，“他们都开始抽泣。影片结局的场景令人不安，我不得不抱住他们，向他们解释说：‘爸爸只是在演戏，爸爸没有死，还好好地在你们身边。’你得明白，我不是有意要违背做父亲的职责。但是对于现实我很理智，我知道玛琪琳也许会再婚，会有另一个男人走进她的生活。”
同样地，1983年，他带孩子们观看影片《五人之桌》时，詹姆斯和朱莉似乎很难将电影与现实分开。他回忆道，“这部描写离异家庭中儿童的电影深深地打动了他们，让他们知道从某种意义上讲这部电影代表了我渴望与他们更加亲密的心声。”
在纽约杨克斯长大的沃伊特同父亲艾尔默、母亲芭芭拉以及兄弟巴里和詹姆斯•韦斯利组成亲密的家庭。（詹姆斯后来改名为奇普•泰勒并且成为了一名传奇性的作曲家，谱写了诸如《狂野宝贝》、《晨曦中的天使》等经典作品）沃伊特热衷于让自己成为完美的居家男人，但却因某些原因而未能做到。在和玛琪琳离婚一年前，他接受采访时承认：“我喜欢小孩子在房间里跑来跑去，跳到父母□□和他们一同睡觉，这样的场景很温馨。但是，对于‘丈夫’这个词的涵义，我总是无法很好地把握。”
在2004年的一次采访当中，奇普•泰勒称沃伊特从来没有真正地从家庭的决裂中恢复：“沃伊特与一个很可爱的女人（玛琪琳）结婚了。我不明白为什么这段婚姻走不下去，但他爱上了另一个女人，然后跟她走了。可他并不开心，也许当他回首过去时，自己的行为给他带来巨大的愧疚感。他尽全力地想要做个好父亲，可惜他似乎并不适合这个角色。”
