Human or Not: A Social Turing Game

Human or Not: A Social Turing Game

AI21 Labs · 聊天機器人

Human or Not 是 AI21 Labs 推出的免費圖靈測試社群遊戲。你匿名聊兩分鐘,然後猜剛才的對象是人還是 AI 機器人。

Human or Not: A Social Turing Game 的介面預覽

關於 Human or Not: A Social Turing Game

What Is Human or Not

Human or Not 是一款線上遊戲,把圖靈測試變成一場兩分鐘的猜謎對決。系統把你丟進匿名聊天室,對手可能是隨機路人,也可能是 AI 機器人;時間一到,你就投票猜自己遇到的是哪一種。這款遊戲從來不是為了拿獎品。AI21 Labs 把它當成一個實驗,用來衡量現在的聊天機器人有多像人,以及人類有多會識破它們。

這套想法其實很老。圖靈在 1950 年提出模仿遊戲:只要機器聊得夠好,讓裁判分不清它和人,就算有智慧。幾十年來這一直只是思想實驗。大型語言模型總算讓它變成真正的比賽,於是 AI21 Labs 推出了任何人都能玩的公開版本。

結果讓人不敢太自信。開玩一個月,玩家猜對對手身分的比率只有 68%。如果對手是機器人,猜對率更掉到 60%,只比丟銅板好一點。換句話說,多數人在短短幾句對話裡,根本分不清機器人和真人。

現在最大的問題是遊戲已經收攤。humanornot.ai 這個網址會轉到 AI21 Labs 的企業官網,聊天功能也關閉了。它不需要帳號,也沒有留下每位玩家的詳細紀錄,而且每則訊息限制 100 個字元,所以深度對話從來不在這個格式裡。

Getting Started

  1. 用瀏覽器打開遊戲即可,不用註冊、不用下載,也不必建立帳號。
  2. 系統會把你和一個對手配對,可能是真人或機器人,然後開啟兩分鐘的聊天視窗。
  3. 打不超過 100 個字元的短句,並在 20 秒內送出,讓對話一來一往地進行。
  4. 兩分鐘結束後,投票猜對手是人還是 AI,接著就會看到答案。
  5. 想玩幾輪就玩幾輪,練自己的直覺,因為遊戲會累計你猜對的次數。

產品資訊

快速了解 Human or Not: A Social Turing Game 的定價、支援平台與效能。

免費方案是
付費方案N/A
平台Web browser
開發者AI21 Labs
類別聊天機器人
發布日期May 2023
最近更新May 2023
網站訪問量692.9K
網站全球排名38K
API 提供狀態否

適合對象

這項工具最適合的使用者、任務與情境。

使用者

  • 剛接觸 AI 的好奇者,想親身感受聊天機器人和真人的差距,不用安裝也不花錢。
  • 老師和工作坊講者,想要一個現場示範,看語言模型現在有多會聊天。
  • 研究者和寫作者,需要一個大規模圖靈測試的真實案例和數據。
  • 喜歡猜謎的休閒玩家,想玩兩分鐘的短回合,而不是長時間泡在遊戲裡。

任務

  • 在把真實工作交給聊天機器人之前,先測自己對「像人」的判斷準不準。
  • 比較在低風險、時間緊迫的情境下,你怎麼讀一段對話。
  • 收集 AI 偵測的討論素材,因為這款遊戲給出明確的答對與答錯比例。
  • 在課堂或團隊裡示範,一段流暢的 AI 文字有多容易騙過人。

情境

  • 課堂上五分鐘的休息時間,學生猜對手身分並互相對照結果。
  • 深夜出於好奇一直玩下去,看看自己的準確度會不會進步。
  • 團隊會議的破冰活動,聊 AI 素養,而且有真實實驗當依據。
  • 寫作專案裡,需要一個可引用的大規模現代圖靈測試案例。

主要功能

兩分鐘匿名聊天

每一輪都是和陌生人限時對話,唯一的規則是不能連續送出兩則訊息。訊息上限 100 個字元,而且得在 20 秒內送出,所以一局通常一來一往各四、五句。節奏讓緊張感維持住,也避免有人故意拖延來套線索。

猜人還是機器人

時間一到,你選出剛才交手的是哪一種對手。答案馬上揭曉,而且因為對手不會知道你的選擇,沒人會被逼著裝成機器人來誤導對方。計分方式只有一項,就是你猜對和玩過場數的比例。

有性格的 AI 機器人

這些機器人不是中立的角色。每一隻都被設定好名字、年齡、職業和居住地,再加上口頭禪、拼字錯誤,或者拒答事實問題這類特質。有的被冒犯還會直接中途離場。這麼多種性格讓辨識更難,也讓回頭玩的人不會兩次都被同一招識破。

免帳號匿名遊玩

你可以直接進去玩,不必註冊,這讓入門門檻幾乎歸零,也讓一大堆隨性的玩家一起參與。代價是實驗沒有蒐集人口統計資料,所以研究結果講的是匿名玩家,而不是某一群特定的人。

內建內容審核

每則訊息都會經過審核服務,擋掉辱罵和仇恨言論。被標記的 AI 回覆會先過濾掉,你看不到;換成你送出的訊息被標記,對話就立刻結束。這讓快速又開放的聊天不至於變成互相攻擊。

大規模圖靈測試資料

開玩第一個月,遊戲就吸引超過 150 萬名玩家,累積超過 1000 萬段真人對真人、真人對 AI 的對話。這樣的量讓 AI21 Labs 拿到第一個在統計上站得住腳的圖靈類測試分數,也成為模型進步後別人可以回頭對照的基準。

優缺點

優點

  • 免帳號、免下載、免付費,任何人幾秒鐘就能開一局。
  • 整體 68% 的猜對率和 60% 的機器人辨識率,清楚說明現在的聊天機器人有多難分辨。
  • 會說口頭禪、還會出錯的個性化機器人,讓挑戰像真的,而不是照劇本走。
  • 內建審核讓這段匿名的短暫聊天保持安全。
  • 白皮書把方法和完整數據都公開,實驗可以被檢驗。

缺點

  • 遊戲已經收攤,humanornot.ai 現在轉向 AI21 Labs 的企業官網。
  • 沒有即時聊天,現在既不能自己開局,也沒辦法拿它來教學。
  • 100 字元上限和兩分鐘限制讓對話很淺,測到的偏表層說話風格,而不是思考。
  • 數據來自一群自動上門、沒有篩選的玩家,這些百分比描述的是他們,不是所有人。

常見問題

Human or Not 是 AI21 Labs 推出的免費線上遊戲,運作方式像一場兩分鐘的圖靈測試。你匿名和陌生人聊天,然後猜這位對手是真人還是 AI 機器人。

相關內容

探索與 Human or Not: A Social Turing Game 相關的工具、技能與文章。

Human or Not: A Social Turing Game 替代方案

Emma AI

Emma AI

Emma AI · 商業 · 聊天機器人

Emma AI 是一款免程式碼的 AI 助理建置工具,用來打造能從你自己商業資料中找答案的自訂助理。你把團隊原本就在用的工具接上去,像是 Slack、Notion、Google Sheets 或 Zendesk,也可以上傳文件,或讓 Emma 透過問答流程訓練助理。速度很快。你建立的每個助理都能限定給特定團隊、專案或工作流程,所以行銷助理和會計助理永遠看不到同一批來源。

免費 / $0 - Free beta查看詳情
Chatgbot

Chatgbot

Chatgbot · 圖片 · 生產力 · 聊天機器人

Chatgbot 是一個多模型 AI 聊天平台,把 OpenAI 的 GPT 模型、Anthropic 的 Claude Sonnet,以及 GLM、Qwen 等開源選項全部收在一個登入帳號之後。你不必在多個訂閱之間來回切換,而是能針對每段對話挑選模型、上傳 PDF 並對它提問、生成圖片、搜尋網路,全都在同一個介面與同一份會員資格裡完成。

免費 / $0 - $20/mo查看詳情
Validator AI

Validator AI

ValidatorAI · 商業 · 聊天機器人

Validator AI 是一款 AI 點子驗證工具,專為想在動手打造任何東西前先得到明確答案的創業者而設。你可以把它想成創業點子驗證器與 AI 創業導師的合體。你描述自己的創業、產品或小型商業構想,工具便會為它評分、分析競爭局勢、建議理想客群是誰,並指出下一步。它仰賴從數十萬場創業者工作階段蒐集來的行為資料。核心檢查免費。它適合單打獨鬥的創業者、獨立開發者,以及在最早階段測試構想的小團隊,不適合已經上線的公司。

免費 / $0 - $29/mo查看詳情