在佛罗里达长大的米勒很早就对市场产生了兴趣。他说，六十年代末还在上高中时，他就将做棒球比赛裁判挣到的钱投资了RCA等股票，从股票上赚到的钱足够他买一辆破旧的福特车。七十年代中期，他在陆军服役时在德国呆过，当时他曾到慕尼黑一家经纪公司买过英特尔 (Intel Corp.)的股票。