Như tiêu đề của phim, Người cha tồi xoay quanh người cha Yoo Ji Chul (do Jang Hyuk thủ vai) – một cựu vô địch quyền anh đã giải nghệ và là một thám tử trong đội phòng chống tội phạm nghiêm trọng.
Trong một lần tham gia phá án vụ cờ bạc bất hợp pháp, Ji Chul bị nghi ngờ có hành vi quấy rối tình dục và hành hung nhân chứng, nên đã bị sa thải.
Từng là thám tử, cũng từng là một tay đấm quyền anh bất khả chiến bại trong quá khứ, tuy nhiên, trong mắt vợ con, Ji Chul lại là một người bất tài vô dụng. Anh không đủ năng lực trả tiền thuê nhà và không thể mua cho con gái một chiếc túi mà cô bé thích.
Biến cố lớn xảy đến khi con gái Yoo Ji Chul là Yoo Young Sun (do Shin Eun Soo thủ vai) bất ngờ bị bắt cóc, và anh cần một khoản tiền lớn để cứu cô bé. Để có tiền, Ji Chul buộc phải trở lại sàn đấu.