U najranijoj dobi bila je izložena seksualnim eskapadama svoje majke
Ashley Judd objavila je knjigu o svom životu pod nazivom “All That Is Bitter and Sweet”, a u njoj je otkrila kako je tijekom života bila seksualno zlostavljana tri puta. Zlostavljao ju je stariji čovjek dok je bila dijete, silovana je kao tinejdžerica, a bila je i žrtva seksualnog nasilja od strane rođaka čijeg se imena prisjetila tek nakon psihoterapije. Otkrila je i kako je bila usamljena dok su njezina majka Naomi i sestra Wynonna putovale Amerikom.
Do svoje osamnaeste godine prošla je kroz trinaest škola pa se osjećala nepoželjno i nevoljeno. Njezina roditelji razveli su se kada je imala samo četiri godine, a već u dobi od sedam počela je biti depresivna.
Ubrzo je po prvi put postala žrtva zlostavljanja, a kada je za isto ispričala svojim bližnjima, nitko joj nije vjerovao. Njezina majka Naomi imala je nasline partnere pa odrastanje s njom nije bilo baš najbolje za mladu Ashley.
U najranijoj dobi bila je izložena seksualnim eskapadama svoje majke, kao i njezinim fizičkim obračunila sa tim muškarcima. Naomi je imala i pištoj pa se Ashley s oružjem igrala od malih dan, a okušala se i u ruskom ruletu.
Ubrzo je otputovala u Japan, a dok je kao manekenka nosila revije, poslodavac ju je s još jednim muškarcem pokušao prisiliti na oralni seks. Jednom je prilikom pristala na vožnju po gradu u automobilu Francuza, koji ju je u istom i silovao.
U knjizi je napisala i kako ju je sestra Wynonna motivirala da se prijavi na rehabilitaciju zbog prejedanja. Tamo se suočila sa svim bolnim sjećanjima iz života.
