雖然經過了十幾年的研究，開發了許多種工具包，但是幾乎所有的AR系統仍然處于實驗室內使用，研究者已經開始考慮AR在實驗中面臨的一些基本問題。

AR開發難點分析主要有以下幾個方面：

• 景物的生成與顯示

由于頭戴式顯示器上的攝像機的攝像角度與眼睛的位置存在偏差，因此虛擬物體的定位在真實視場中的定位和顯示角度也會存在偏差且很難調整。

• 定位錯誤

定位錯誤不可避免，電子羅盤也會因為附近的磁場干擾出現誤差。由于現有許多戶外的系統中的校正算法需要大量的輸入和繁瑣的校正步驟，因此不適合商業化應用。

• 通訊設備

在絕大多數分布式AR應用中，系統能力都要受制于數據傳送的速度，因此在大型協作AR系統中，還有賴于通過動態興趣度管理算法和動作預測算法來降低所需傳輸的數據量。

• 計算能力

在戶外AR系統中，必須盡量減少客戶端配置，數據處理常由便攜式計算機，甚至是靠掌上電腦來處理，因此，如何達到實時性和提高渲染效果是必須面對的一個問題，這也是目前AR研究的熱點之一。

• 很多功能只能用APP來實現

AR系統如果需要體驗更多的內容和代碼就必須下載應用程序，而開發App只是一種的一個部分。對于應用開發者來說，營銷和提高下載量依然是最大的挑戰。

• 用戶交互

AR設備正逐步引入手勢、語言、眼球追蹤、動作追蹤及其他新功能，用于增強3D領域的信息互動;AR設備將適用于多種環境狀況，用戶在真實環境中的合成觸覺輸入技術仍然有待提高。

• 3D功能

傳感、追蹤、定位、制模、顯示都屬于3D領域;與AR顯示設備相比較，臺式電腦的處理能力更強，能夠提供上述3D功能;未來，追蹤、處理、顯示技術將得到進一步發展，保證虛擬環境與真實環境能夠與用戶的移動同步;3D音頻、圖表、圖像、視頻將進一步精確整合。