Объятное лицо усиливает платформу Lerobot с данными обучения машины для самостоятельного вождения

В прошлом году Hugging Face, известная платформа для разработки ИИ, представила LeRobot — комплексный набор открытых моделей ИИ, наборов данных и инструментов, направленных на улучшение реальных приложений робототехники. На этой неделе они сделали значительный шаг вперед, заключив партнерство со стартапом в области ИИ Yaak для обогащения LeRobot. Вместе они представили набор данных Learning to Drive (L2D), огромный тренировочный набор, специально разработанный для автономной навигации в различных условиях, таких как оживленные городские улицы.

Набор данных L2D огромен, его объем превышает петабайт, и он наполнен данными, собранными с датчиков, установленных на автомобилях, используемых в немецких автошколах. Этот набор данных охватывает широкий спектр водительского опыта, включая всё — от навигации по строительным зонам до движения по автомагистралям, записанного с помощью камер, GPS и датчиков динамики автомобиля. Эта уникальная коллекция предлагает реальную перспективу как от инструкторов, так и от учеников за рулем.

Хотя существуют и другие открытые тренировочные наборы данных для автономного вождения, такие как от Waymo компании Alphabet и Comma AI, они часто сосредоточены на конкретных задачах планирования, таких как обнаружение и отслеживание объектов. Эти задачи требуют тщательной аннотации, что может быть узким местом для масштабирования, по словам создателей L2D. В отличие от них, L2D создан для упрощения "сквозного" обучения, позволяя моделям ИИ предсказывать действия непосредственно из необработанных данных датчиков, например, определять, когда пешеход может выйти на дорогу, на основе видеозаписей с камеры.

Сооснователь Yaak Харсимрат Сандхавалия и Реми Каден из команды Hugging Face по ИИ для робототехники выразили свой энтузиазм в блоге, заявив: «Сообщество ИИ теперь может создавать сквозные модели автономного вождения. L2D стремится стать крупнейшим открытым набором данных для автономного вождения, который предоставляет сообществу ИИ уникальные и разнообразные «эпизоды» для обучения сквозному пространственному интеллекту».

Hugging Face и Yaak готовятся к реальным испытаниям этим летом. Они планируют тестировать модели, обученные на L2D и LeRobot, в реальных условиях вождения, конечно, с водителем безопасности на борту. Они приглашают сообщество ИИ внести свой вклад, предоставляя модели и предлагая конкретные задачи, такие как навигация по сложным кольцевым развязкам или освоение парковки в ограниченном пространстве, для оценки во время этих тестов.