Ο Stephen Pan γεννήθηκε σε μια οικογένεια που φημίζεται στην Κίνα για καλλιτεχνικό ταλέντο. Σε ηλικία πέντε ετών, ο παππούς του, Bo Yin Pan, του έδωσε το πρώτο του μάθημα στο σχέδιο και τη ζωγραφική.
Αν και ο Παν είχε μια στενή σχέση με τις επίσημες κινεζικές παραδόσεις τέχνης, ερωτεύτηκε τους πίνακες της Αναγέννησης και των Γάλλων ιμπρεσιονιστών. Thirtδη σε ηλικία δεκατριών ετών, είχε μια ατομική έκθεση τέχνης και είχε κερδίσει την πρώτη θέση στα βραβεία National Art Excellence στην Κίνα για τους όμορφους ελαιογραφίες του.
Ο Παν άρχισε να διδάσκει στη Σαγκάη της Κίνας σε ηλικία 20 ετών. Για να συνεχίσει την καριέρα του ως καλλιτέχνης, ο θείος του υποστήριξε τη μετανάστευσή του στις Ηνωμένες Πολιτείες. Στον Stephen Pan προσφέρθηκε μια θέση διδασκαλίας στο Academy of Art College στο Σαν Φρανσίσκο το 1997.