2010年蘋果發布iPad平板電腦時，有記者問賈伯斯，為什麼蘋果先做iPhone，再做iPad。賈伯斯說：「實際上我們是從平板電腦開始的。我當時想要一塊可以當作顯示裝置的玻璃，同時也可以支援多點觸碰。我把想法告訴我們的硬體工程師。六個月後，他們拿回來一塊神奇玻璃。於是，我把一塊玻璃送給我們卓越的UI設計師。設計師就從這塊玻璃，創造出了慣性平滑捲動之類全新的用戶體驗。我當時想：『我的天，我們可以把平板電腦的想法扔到一邊，先用這塊玻璃做一台手機。』於是，我們就開始研製手機。」

賈伯斯輕描淡寫地描述了整個過程。但事實上，賈伯斯從很早以前，就開始關注手機和平板電腦，並靜靜地等待機會。直到工程師們創造出了神奇的多點觸碰玻璃，賈伯斯才相繼拋出震撼世界的iPhone和iPad。

1980年代，蘋果還在賣Apple II的時候，就試驗過帶觸控板，與簡單的辦公功能的電話機（不是手機），這可以說是最早的蘋果電話。1983年，蘋果甚至還請工業設計公司Frog Design設計過一個名為害羞鬼（Bashful）的平板電腦原型。

後來，史考利曾傾注了大量心血的牛頓PDA專案，可以說是iPhone和iPad的先驅。只不是史考利推PDA時，電腦和行動通訊終端還未能很好地整合，生不逢時的牛頓PDA甚至還比不過隨後出現的Palm PDA和黑莓手機。

回歸蘋果後，賈伯斯雖然終止了牛頓PDA的研發，但一款創造性的袖珍電腦或智慧手機的想法始終盤旋在他的腦海裡。

2001年，微軟開始大肆炒作平板電腦（Tablet PC）的概念。幾乎所有主流PC廠商都參與了進來。2003年，在一次採訪中賈伯斯預言：「微軟的平板電腦會以失敗告終。」結果真如賈伯斯所料，幾年時間裡，一大堆有鍵盤、沒鍵盤的平板電腦走馬燈一樣逐個登場，卻沒有一款能真正稱霸市場。

十幾年前，蘋果剛開始借Macintosh炒作GUI時，最後在GUI領域取得壟斷地位的是微軟。這一次，在平板電腦的角逐中，命運完全顛倒。微軟眼睜睜看著自己炒作的平板概念先是被人們漸漸淡忘，十年後卻又突然借蘋果的iPad大放異彩。2001年時的賈伯斯當然看到了平板電腦所代表的未來，但就是按兵不動，因為賈伯斯相信，有時候，時機遠比眼光更重要。

iPod發布不久，賈伯斯預感到，iPod將在短時間內改變世界音樂產業的局面。也許，一款可以打電話的iPod，也可以用類似的方法改變行動通訊產業。被這一想法鼓舞的賈伯斯親自動手，在紙上畫了幾張iPod版手機的草圖，還替這個專案取了一個神秘代號「紫色1號」（Purple 1）。不過，連賈伯斯自己也覺得，這個紫色1號與其他手機相比，沒有太多革命之處，那幾張草圖也就僅僅停留在了紙上。

2005年，蘋果嘗試著與摩托羅拉合作，在摩托羅拉手機裡嵌入iTunes音樂功能。這一合作引得市場上謠言四起，人們猜測，蘋果很快就要殺入手機市場。

事實上，和摩托羅拉的合作只是蘋果在行動領域試水溫。摩托羅拉的iTunes手機並不成功。但通過類似的合作，蘋果開始秘密接觸手機製造商和行動業者。與此同時，賈伯斯也確定了對未來手機和平板電腦的定義——用多點觸碰的玻璃帶來超一流的用戶體驗，同時，配備豐富的網上功能，讓手機和平板電腦成為真正的智慧通訊載體。

正如賈伯斯所說，蘋果首先把研發重點放在了手機上。之所以把平板電腦的計畫置後，一個重要的原因是當時的電池技術還沒有達到平板電腦的耗電要求。2005年2月，蘋果秘密開始了代號為「紫色2號」（Purple 2）的專案，獨立研發自己的手機。2005年9月，專案已經召集了二百多名工程師，以高度機密的方式運作。蘋果和行動業者的談判也在同一時期展開。