一項由 Purdue University 進行的研究發現，ChatGPT 回答軟件工程問題的準確率不高，超過半數的回答是錯誤的。儘管回答內容綜合全面，但由於其錯綜複雜的回答語言，用戶很難正確辨別錯誤信息。研究結果表明，ChatGPT 在回答軟件工程問題方面的可靠性不如傳統的資源 Stack Overflow。因此，使用 ChatGPT 來獲取軟件工程方面的幫助時，建議仍然傾向於使用 Stack Overflow 等傳統資源。