坎貝爾·布朗(Campbell Brown)曾擔任知名電視記者及 Facebook 首位且唯一的專職新聞主管,現關注 AI 如何重塑資訊消費,並擔憂歷史重演。她創立的公司 Forum AI 近期與 TechCrunch 的 Tim Fernholz 在舊金山 StrictlyVC 活動中討論,該公司評估基礎模型在「高風險主題」(如地緣政治、心理健康、金融、招聘)上的表現,這些領域答案模糊且複雜。布朗招募了尼爾·費格森、法裡德·扎卡利亞、前國務卿東尼·布林肯、前眾議院議長凱文·麥卡錫及前奧巴馬政府網路安全負責人安妮·紐伯格爾等頂尖專家,構建基準並訓練 AI 評審員。目標是讓 AI 評審與人類專家在約 90% 的共識上保持一致,Forum AI 已達成此標準。
布朗於 17 個月前於紐約創立 Forum AI,起因是她在 Meta 工作時目睹 ChatGPT 公開發布,意識到其將成為資訊流動的漏斗且品質不佳,這令她對子女未來感到存在主義危機。她指出基礎模型公司過度專注於程式設計與數學,而忽略難以處理但至關重要的新聞與資訊準確性。初期評估發現 Gemini 曾引用中國共產黨網站內容講述與中國無關的故事,且幾乎所有模型均存在左傾政治偏見,此外還有遺漏背景、視角及稻草人論證等隱性失敗。布朗強調最佳化錯誤目標對社會有害,她希望 AI 能打破此迴圈,提供真實、誠實且真實的資訊。
布朗認為企業可能是理想的盟友,因為涉及信貸、貸款、保險及招聘的企業重視責任,希望最佳化結果正確性。Forum AI 以此為商業基礎,但將合規興趣轉化為穩定收入仍具挑戰,因市場多滿足於 checkbox 審計與標準化基準,布朗認為這不足夠。當紐約市透過首項招聘偏見法要求 AI 審計時,州審計長發現超過一半存在未檢測到的違規。真正的評估需要領域專家處理已知情境及可能引發麻煩的邊緣案例,這需要時間,通用專家無法勝任。布朗指出,Big Tech 領導者宣稱技術將改變世界,但普通使用者在使用聊天機器人時仍獲得大量錯誤答案,Forum AI