Sketch2Code由微软AILab于2018年推出旨在帮助开发人员轻松地将手绘草图转化成HTML代码的开源项目。使用Sketch2Code开发人员可以绘制线框草图并将其导出为源代码。Sketch2Code使用人工智能和自动化从线框草图中开发代码支持基本的网页视觉元素包括标签、文本字段、文本段落、图像和按钮等。
2018年发布时该项服务背后的模型已经用数百万张图像进行了训练可以对各种类型的物体进行物体检测。有了这些信息该工具可以生成设计中不同元素的HTML代码片段然后可以根据识别的元素的位置推断设计的布局并相应地生成最终的HTML代码。
而在GPT4的演示中也有一段将草图转换成网页的Demo演示很可能微软已经将该技术与OpenAI合作并进行了迭代而最新训练的图像数据也可能远超2018年。
