童年时代的伊能静命运悲惨，母亲之前已经生了三个女儿。作为军人的父亲，男权主义非常严重，一心只想要个男孩子。然而，当她呱呱坠地时，父亲再次失望了。不久，父亲便和母亲离了婚。
因为父母离异后，母亲改嫁一个日本人叫伊能祥光，所以她后来改名伊能静江。她童年生活极为漂泊：她在台湾同养母生活到6岁时，母亲为加强她的英语，送她去香港投靠伊能静的姐姐，并在一所基督教教会学校读小学。
由于生活的窘迫，那时她的健康状况很不好，皮肤差，还有哮喘。12岁时，她又随母去日本，在那里读了初中和高中。当时她被日本女生欺负、殴打，处境很是可怜。
为赚钱养家，她16岁时返台并进入了演艺圈。而为报答继父的养育之恩，她延用日本名，并简化为伊能静。
可以说，童年时期，伊能静从没有真正感受过父母之爱，尤其是父爱。她长大后，回忆自己特别害怕一个人过生日。因为小时候父母从不跟自己过生日，她认为自己的童年是被忽略掉的。
