Joseph Chi Chiong Chavez sinh năm 1953 tại Nam Mỹ. Cha của anh hành nghề bác sĩ tại Ecuador trong khi mẹ là người Peru gốc Trung Quốc. Chi bỏ học đại học vào năm thứ ba để trở thành một tay đua xe hơi nghiệp dư tại Hồng Kông và làm quen với một nhóm lái xe biểu diễn. Năm 1978, trong một chuyến thăm bạn bè trên một phim trường, anh tình nguyện tham gia vào một cảnh quay có xe ô tô va vào tường kính, đánh dấu sự khởi đầu của anh trong lĩnh vực điện ảnh. Chi bắt đầu làm việc như một diễn viên đóng thế và vào đầu những năm 1980, anh được thăng cấp lên vị trí biên đạo hành động.