極客號（Daydx.com）11月17日 消息:在本周三，一款名為”tldraw”的協(xié)作白板應用發(fā)布了一項名為”Make It Real”的功能原型，引起了開發(fā)者社區(qū)的熱議。該功能利用OpenAI的GPT-4V API，將用戶繪制的矢量圖轉(zhuǎn)化為可運行的Tailwind CSS和Javascript web代碼，從而復制用戶界面或創(chuàng)建類似Breakout的簡單游戲。

體驗網(wǎng)址：https://makereal.tldraw.com/

操作演示：https://twitter.com/tldraw/status/1724892287304646868?s=20

設計師Kevin Cannon在一個熱門的X線程中發(fā)帖稱:“我覺得我需要躺下來休息?！彼故玖送ㄟ^”Make It Real”創(chuàng)建的可旋轉(zhuǎn)屏幕上物體的滑塊、更改物體顏色的界面以及一個可玩的井字棋游戲。隨后，其他設計師也紛紛展示了通過繪制克隆Breakout、制作工作中的刻度鐘、畫蛇游戲、制作Pong游戲等的演示。

用戶可以在網(wǎng)上體驗”Make It Real”的實時演示，但需要提供來自OpenAI的API密鑰，這存在一定的安全風險。文章警告，如果他人截取了API密鑰，可能會在用戶名下產(chǎn)生大量費用。技術能力強的用戶可以在本地運行代碼，但仍需要OpenAI API訪問權限。

“tldraw”是一款由Steve Ruiz在倫敦開發(fā)的開源協(xié)作白板工具，提供基本的無限畫布，支持繪圖、文本和媒體，無需登錄。該項目于2021年推出，獲得270萬美元的種子資金，并得到GitHub贊助支持。Ruiz最近將GPT-4V API的設計原型“draw-a-ui”整合到tldraw中，從而實現(xiàn)了AI驅(qū)動的功能。

GPT-4V是OpenAI大型語言模型的一個版本，可以解釋視覺圖像并將其用作提示。根據(jù)AI專家Simon Willison在X上的解釋，Make It Real通過“生成繪制組件的base64編碼的PNG圖像，然后將其傳遞給GPT-4Vision”，使用系統(tǒng)提示和指令將圖像轉(zhuǎn)化為使用Tailwind的文件。

隨著更多人嘗試GPT-4V并將其與其他框架結(jié)合使用，我們有望在未來幾周看到更多OpenAI視覺解析技術的新穎應用。本文還提到，開發(fā)者利用GPT-4V API創(chuàng)建了一個由假的AI生成的David Attenborough聲音實時敘述視頻的實例。

“Make It Real”為未來軟件開發(fā)或至少界面設計提供了一種可能的新模式，其中創(chuàng)建可運行的原型就像制作視覺模型一樣簡單，由AI模型完成。開發(fā)者Michael Dubakov在展示他自己的Make It Real創(chuàng)作時寫道:“好吧，@tldraw官方瘋狂了。有趣的是在5年后我們會走向何方…我已經(jīng)跟不上創(chuàng)新的步伐了。”

https://x.com/tldraw/status/1724892287304646868?s=20