KITTI-360 标注工具:一个强大的街景数据标注框架

RayRay
KITTI-360标注工具数据集计算机视觉WebGLGithub开源项目

KITTI-360标注工具简介

KITTI-360标注工具是由自主视觉组(Autonomous Vision Group)开发的一个强大的数据标注框架,专门用于标注大规模的街景数据集。该工具采用Python(cherrypy + jinja2 + sqlite3)作为后端,JavaScript + WebGL作为前端,为研究人员提供了一个高效、灵活的标注平台。

KITTI-360标注工具界面

KITTI-360标注工具最初是为了标注KITTI-360数据集而设计的。KITTI-360是一个大规模的街景数据集,包含了丰富的传感器数据和全面的2D/3D标注信息。该数据集记录了德国卡尔斯鲁厄市郊的多个区域,包含超过32万张图像和10万次激光扫描,行驶距离达73.7公里。标注内容涵盖了静态和动态的3D场景元素,并将这些信息转换到图像域,为2D图像和3D点云提供了密集的语义和实例标注。

主要特点

  1. 多模态数据支持:可以同时处理图像、点云等多种数据类型。

  2. 灵活的标注模式:支持只读、正常和练习三种标注模式,满足不同场景需求。

  3. 用户友好的界面:直观的WebGL可视化界面,方便标注人员操作。

  4. 自动保存功能:定期自动保存标注结果,防止数据丢失。

  5. 多用户协作:支持多用户同时在线标注,提高工作效率。

  6. 可扩展性强:基于开源技术栈开发,易于二次开发和功能扩展。

系统依赖

KITTI-360标注工具主要依赖以下几个Python库:

  • jinja2:用于生成HTML模板
  • cherrypy:轻量级Web框架
  • sqlite3:嵌入式数据库

此外,系统还需要安装sqlite3及其开发库。详细的安装命令如下:

sudo apt install python-pip pip install jinja2 pip install cherrypy sudo apt install sqlite3 libsqlite3-dev

快速启动

要快速体验KITTI-360标注工具,可以按照以下步骤操作:

  1. 下载演示数据:

    ./download_demo_data.sh
  2. 启动Web服务器:

    ./run_demo.sh
  3. 在浏览器中访问 http://127.0.0.1:8080 即可打开标注界面。

详细配置步骤

为了更好地使用KITTI-360标注工具,需要进行一些详细的配置:

1. 数据准备

将需要标注的数据放置在 public/data/ 目录下,或者创建一个符号链接指向数据所在位置。

2. 用户任务配置

用户和任务数据存储在 db_import/ 目录中。主要包含两个配置文件:

  • users.txt:每行包含一个用户的信息,格式为 Email Name UserId Password IsAdmin
  • taskLists.txt:每行包含一个用户-任务信息,格式为 TaskId UserId Editable

其中 Editable 参数表示用户对该任务的权限:

  • 0: 只读(仅可查看标注)
  • 1: 正常(可查看、标注和提交结果)
  • 2: 练习(可查看和标注,但不能提交结果)

3. 数据库设置

配置好用户和任务文件后,运行以下命令初始化数据库:

python create_db.py

4. 服务器配置

server.conf 文件中设置主机和端口信息,例如:

[global]
server.socket_host = "127.0.0.1" 
server.socket_port = 8080        

5. 启动服务器

运行以下命令启动标注服务器:

python labelApp.py

6. 访问Web界面

在浏览器中输入 http://host:port 即可访问标注界面。

7. 获取标注结果

标注结果以XML格式保存在 public/results/ 目录下。项目还提供了解析XML文件的工具函数,可在这里找到。

项目结构

KITTI-360标注工具的目录结构如下:

.(ROOT)
|
+-- assets
|   |
|   +-- css
|   |
|   +-- javascripts: JavaScript源代码
|
+-- db: 生成的数据库(通过运行create_db.py)
|
+-- db_import
|    |
|    +-- 用户-任务配置文件
|
+-- public
|    |
|    +-- backup: 标注过程中自动保存的备份XML文件
|    |
|    +-- data: 待标注数据
|    |
|    +-- resource: 图标等资源文件
|    |
|    +-- results: 最终的XML标注文件
|    |
|    +-- mapping.txt: 标签合并文件
|    |
|    +-- colorList.txt: 标签颜色映射文件
|
+-- views: HTML页面

常见问题及解决方案

在使用KITTI-360标注工具时,可能会遇到一些常见问题。以下是一个典型问题及其解决方案:

Q: 遇到 "socket.error: (98, 'Address already in use')" 错误怎么办?

A: 这个错误通常是因为之前的服务器进程未正确关闭导致的。解决步骤如下:

  1. 在命令行中运行 ps aux | grep python 找出相关进程。
  2. 找到用户名为 annot 的进程ID(PID)。
  3. 执行 sudo kill -9 PID 终止该进程。
  4. 重新启动服务器。

KITTI-360数据集的重要性

KITTI-360标注工具的开发离不开KITTI-360数据集的支持。该数据集在城市场景理解研究中具有重要意义:

  1. 大规模和高质量:包含超过32万张图像和10万次激光扫描,为深度学习模型提供了丰富的训练数据。

  2. 多模态数据:集成了图像、激光雷达、GPS/IMU等多种传感器数据,有助于多模态感知算法的研发。

  3. 精确标注:提供了密集的2D/3D语义和实例标注,为场景理解任务提供了高质量的ground truth。

  4. 长序列数据:73.7公里的行驶距离确保了数据的连续性,有利于研究时序相关的任务。

  5. 丰富的场景:涵盖了城市、郊区等多种环境,提高了模型的泛化能力。

  6. 标准化评测:为2D/3D语义分割、实例分割、目标检测等任务提供了统一的评测基准。

在研究中使用KITTI-360标注工具

如果您在研究中使用了KITTI-360标注工具,建议在论文中引用以下文献:

@article{Liao2021ARXIV, title = {{KITTI}-360: A Novel Dataset and Benchmarks for Urban Scene Understanding in 2D and 3D}, author = {Yiyi Liao and Jun Xie and Andreas Geiger}, journal = {arXiv.org}, volume = {2109.13410}, year = {2021}, }

开源协议

KITTI-360标注工具采用MIT开源协议发布。这意味着您可以自由地使用、修改和分发该软件,但需要在软件的所有副本中包含原始的版权和许可声明。详细的许可条款可以在项目的LICENSE文件中查看。

总结

KITTI-360标注工具为大规模街景数据的标注提供了一个强大而灵活的解决方案。它不仅支持多种数据类型和标注模式,还具有用户友好的界面和多用户协作功能。结合KITTI-360数据集,这个工具为城市场景理解研究提供了宝贵的资源。无论是数据科学家、计算机视觉研究人员,还是自动驾驶领域的工程师,都可以从这个工具中受益,加速他们的研究和开发进程。

随着城市智能化和自动驾驶技术的快速发展,高质量的标注数据将变得越来越重要。KITTI-360标注工具的开源不仅为研究社区提供了一个有力的工具,也为未来更多创新性的标注方法和工具的开发铺平了道路。我们期待看到更多基于这个工具的研究成果,推动城市场景理解技术的进步。

编辑推荐精选

QoderWork

QoderWork

阿里Qoder团队推出的桌面端AI智能体

QoderWork 是阿里推出的本地优先桌面 AI 智能体,适配 macOS14+/Windows10+,以自然语言交互实现文件管理、数据分析、AI 视觉生成、浏览器自动化等办公任务,自主拆解执行复杂工作流,数据本地运行零上传,技能市场可无限扩展,是高效的 Agentic 生产力办公助手。

音述AI

音述AI

全球首个AI音乐社区

音述AI是全球首个AI音乐社区,致力让每个人都能用音乐表达自我。音述AI提供零门槛AI创作工具,独创GETI法则帮助用户精准定义音乐风格,AI润色功能支持自动优化作品质感。音述AI支持交流讨论、二次创作与价值变现。针对中文用户的语言习惯与文化背景进行专门优化,支持国风融合、C-pop等本土音乐标签,让技术更好地承载人文表达。

lynote.ai

lynote.ai

一站式搞定所有学习需求

不再被海量信息淹没,开始真正理解知识。Lynote 可摘要 YouTube 视频、PDF、文章等内容。即时创建笔记,检测 AI 内容并下载资料,将您的学习效率提升 10 倍。

AniShort

AniShort

为AI短剧协作而生

专为AI短剧协作而生的AniShort正式发布,深度重构AI短剧全流程生产模式,整合创意策划、制作执行、实时协作、在线审片、资产复用等全链路功能,独创无限画布、双轨并行工业化工作流与Ani智能体助手,集成多款主流AI大模型,破解素材零散、版本混乱、沟通低效等行业痛点,助力3人团队效率提升800%,打造标准化、可追溯的AI短剧量产体系,是AI短剧团队协同创作、提升制作效率的核心工具。

seedancetwo2.0

seedancetwo2.0

能听懂你表达的视频模型

Seedance two是基于seedance2.0的中国大模型,支持图像、视频、音频、文本四种模态输入,表达方式更丰富,生成也更可控。

nano-banana纳米香蕉中文站

nano-banana纳米香蕉中文站

国内直接访问,限时3折

输入简单文字,生成想要的图片,纳米香蕉中文站基于 Google 模型的 AI 图片生成网站,支持文字生图、图生图。官网价格限时3折活动

扣子-AI办公

扣子-AI办公

职场AI,就用扣子

AI办公助手,复杂任务高效处理。办公效率低?扣子空间AI助手支持播客生成、PPT制作、网页开发及报告写作,覆盖科研、商业、舆情等领域的专家Agent 7x24小时响应,生活工作无缝切换,提升50%效率!

堆友

堆友

多风格AI绘画神器

堆友平台由阿里巴巴设计团队创建,作为一款AI驱动的设计工具,专为设计师提供一站式增长服务。功能覆盖海量3D素材、AI绘画、实时渲染以及专业抠图,显著提升设计品质和效率。平台不仅提供工具,还是一个促进创意交流和个人发展的空间,界面友好,适合所有级别的设计师和创意工作者。

图像生成AI工具AI反应堆AI工具箱AI绘画GOAI艺术字堆友相机AI图像热门
码上飞

码上飞

零代码AI应用开发平台

零代码AI应用开发平台,用户只需一句话简单描述需求,AI能自动生成小程序、APP或H5网页应用,无需编写代码。

Vora

Vora

免费创建高清无水印Sora视频

Vora是一个免费创建高清无水印Sora视频的AI工具

下拉加载更多