Ήταν γιος του δικηγόρου Γεωργίου Χατζιδάκι και της Αλίκη Αρβανιτίδου. Μετά τον χωρισμό των γονιών του, το 1932, ο Μάνος Χατζιδάκις με τη μητέρα του και την αδελφή του εγκαθίστανται οριστικά στην Αθήνα.
Εν τω μεταξύ, από τα τέσσερά του χρόνια έχει αρχίσει μαθήματα πιάνου με δασκάλα την Αλτουνιάν, γνωστή μουσικό της Ξάνθης, αρμενικής καταγωγής. Παράλληλα διδασκόταν βιολί και ακορντεόν.
Παγοπώλης και φορτοεκφορτωτής
