图像分割

图像分割将图像中的每个像素分配给一个类别，生成一个地图，其中每个区域都标有其所代表的内容：人、天空、汽车、建筑物、树木、道路等。这种像素级的理解使工具能够以不同的方式处理图像的不同部分，根据内容而不是位置选择性地应用操作。主要有三种类型：语义分割（标记像素类别）、实例分割（区分同一类型的各个对象）和全景分割（两者结合）。\n\n自动驾驶车辆系统使用图像分割来实时了解其环境。该系统将每一帧视频分割为路面、车道标记、车辆、行人、交通标志和障碍物。每个分割区域都会触发不同的驾驶决策。虽然这是一种远离照片编辑的安全关键应用程序，但底层技术是相同的 - 并且一个领域的进步是另一个领域的进步。\n\n对于照片编辑，分段可以实现传统工具无法实现的内容感知操作。编辑者可以选择所有天空像素来替换天空，而不影响建筑物。肖像修饰师可以仅对面部区域应用皮肤平滑，同时保持头发和衣服的锐利。景观编辑器可以增加树叶的饱和度，同时保持其他元素不变。所有这些操作都需要该工具知道每个像素代表什么。\n\n神奇的 Magic Eraser 图像分割作为其编辑管道的基础。当用户刷过某个对象以将其删除时，即使画笔笔触不精确，分割也会识别出完整的对象边界。背景 EBackground Eraser 站用于识别主体并将其与背景分开。 AI Enhance 使用 seAI Enhance 对不同的图像区域应用不同的增强策略。分割模型以毫秒为单位处理图像，在用户与编辑工具交互时实现实时反馈，其准确性直接决定了后续流程中每个操作的精度，这使其可以说是整个产品架构中最关键的人工智能组件。