TaoAI·发现最好的AI工具
4
免费

Sketch2Code

Sketch2Code 是微软推出的实验性方案,用视觉识别与布局推断把照片里的手绘界面草图转换成 HTML 代码。属于 AI 编程工具·AI代码生成分类。

AI编程草图转代码前端
访问官网 →

Sketch2Code 是什么

Sketch2Code 是微软推出的一个基于网页的实验性方案,任务很单一:把照片里手绘的界面草图变成可用的 HTML 标记代码。按微软官方博客的说法,出发点相当具体——界面设计往往从白板上的草图开始,草稿拍成照片之后,还要有人把它手工翻译成能在浏览器里跑的 HTML 线框,这道翻译工序既费时又拖慢迭代;如果白板一改、浏览器里就跟着变,一次评审下来就能得到设计与开发都认可的原型,Sketch2Code 想解决的正是这一步。

该项目由微软与 Kabel、Spike Techniques 合作开发,代码与方案开发过程在官方的开源仓库中公开。微软把它归类为「用 AI 增强人的创造力」的一个小例子。

Sketch2Code 的主要功能

  • 草图元素识别:用户上传界面草图后,自定义视觉模型判断画面里出现了哪些常见 HTML 元素,并标出它们各自的位置。官方说明这个模型是用大量手绘稿图像训练出来的,标注对象包括文本框、按钮、图片等。
  • 手写文字识别:用计算机视觉服务读取被识别元素内部的文字内容。
  • 布局推断:布局算法依据各元素边框的空间信息,生成一个能容纳全部组件的网格结构。
  • 代码生成:HTML 生成引擎把上面的识别结果与布局信息合成 HTML 标记代码。
  • 过程留档:官方方案使用 Blob 存储保存原图、预测结果与布局分组信息,并用无服务器函数作为协调整个生成流程的后端入口。

如何使用 Sketch2Code

  1. 准备一张手绘界面草图的照片:官方强调输入就是照片,所以尽量拍正、拍清楚。
  2. 在 Sketch2Code 的网页入口上传这张图片,剩下的判断交给后台流程。
  3. 自定义视觉模型先圈出画面里的 HTML 元素并给出位置,手写识别服务接着读出元素内的文字。
  4. 布局算法把元素框转换成网格结构,最后由生成引擎输出 HTML 代码。
  5. 在页面上查看生成的 HTML 结果并按需取用。想了解内部实现或想自己搭一套的,可以按官方博客给出的组件说明去读公开的源码与方案文档。

Sketch2Code 的应用场景

  • 设计评审:把白板草图直接转成能打开的线框,让设计与开发在同一个原型上讨论,而不是靠口头描述。
  • 早期原型:在没写真实业务代码之前,先拿一份 HTML 骨架验证布局是否成立。
  • 技术教学:用它讲清楚「视觉识别 + 文字识别 + 布局推断 + 代码生成」如何串成一条完整流水线。
  • 方案借鉴:团队想自建草图转代码流程时,可以参考它对视觉模型、存储与函数计算的组合方式。
  • 素材数字化:把纸面上的旧稿快速转成可继续编辑的页面,省掉重画一遍的工夫。

Sketch2Code 常见问题

Sketch2Code 是免费的吗?

Sketch2Code 目前可免费使用,无需付费即可体验核心功能。具体额度与限制请以官网说明为准。

Sketch2Code 适合哪些场景?

Sketch2Code 属于AI编程工具类工具,主要覆盖 AI编程、草图转代码、前端 等使用场景。是否适合你的需求,可结合这些能力点与自己的工作流对照判断。

有哪些和 Sketch2Code 类似的工具?

与本页收录的同类工具相比,豆包、通义千问、Cursor 等定位相近。可以对照各自的定价模式、能力侧重和使用场景再做选择。

信息最后更新于 2026-10-14。如信息有误,欢迎联系我们更正。

本页由 TaoAI 编辑部 整理维护 · 收录于 2025-01-01 · 最后更新 2026-10-14

信息来源:工具官网与公开资料,核对与引用规则见 来源与引用规范;工具信息可能随官方调整而变化,请以官网最新说明为准。纠错请联系我们。