Если данные есть у вас
Оцифруйте своё и поставьте карточку: запись сна, продажи, разговор, видео с разметкой. Покупатель берёт набор или арендует его. Так личные данные становятся продуктом, а не лежат в архиве.
Массового рынка таких сетов ещё нет. Я уверен, что распространение ИИ его создаст. Кто положит данные сейчас — продажи, разговор, видео с разметкой — встретит спрос не с пустой полки. Не упустите этот заход.
Если данные есть у вас
Оцифруйте своё и поставьте карточку: запись сна, продажи, разговор, видео с разметкой. Покупатель берёт набор или арендует его. Так личные данные становятся продуктом, а не лежат в архиве.
Если данные нужны вам
Медцентр, который исследует сон, не обязан собирать запись сам. Готовый сет можно купить или арендовать. Если его нет — заказ уходит поставщику: объём, домен, разметка, срок.
Полоса — доля карточек в задаче. Справа — готовые карточки продавцов и открытые источники, плюс путь данных до выдачи.
Готовые карточки
● Продавцы 7● Открытые 115
Открытые файлы не копируются: лицензия читается у источника.
Текст и NLP
180 тысяч коротких отзывов на русском с меткой тональности. Удобно для классификатора и дообучения.
Речь и аудио
Полевые и студийные записи русской речи для распознавания: 180 часов, расшифровка, без контактов дикторов в образце.
Текст и NLP
Обезличенные переписки поддержки: намерение клиента и ответ оператора. Для классификации и дообучения.
Компьютерное зрение
Фотографии всходов с разметкой рядков и пропусков. Для детекции в агрономии, без лиц в кадре.
Временные ряды
Почасовое потребление по обезличенным районам за три года. Для прогноза временных рядов.
Текст и NLP
Небольшой свободный список слов с ударением. Можно забрать без оплаты, чтобы проверить сценарий.
Карточки-указатели: файлы не копируются. Лицензия читается с Hugging Face, неизвестные и закрытые пропускаются.
Компьютерное зрение
Открытый датасет «MathNet» от ShadenA. Лицензия CC BY 4.0. Файлы остаются у источника.
Таблицы
Открытый датасет «Wikipedia» от wikimedia. Лицензия CC BY-SA 3.0. Файлы остаются у источника.
Речь и аудио
Открытый датасет «Yodas granary» от espnet. Лицензия CC BY 3.0. Файлы остаются у источника.
Временные ряды
Открытый датасет «HPLT2.0 cleaned» от HPLT. Лицензия CC0. Файлы остаются у источника.
Текст и NLP
Открытый датасет «Wiki lingua» от GEM. Лицензия CC BY-NC-SA 3.0. Файлы остаются у источника.
Текст и NLP
Открытый датасет «C4» от allenai. Лицензия ODC-BY. Файлы остаются у источника.
Чеклист качества датасета: дубли, утечка в тест, разметка, лицензия и карточка. Что смотреть до обучения, чтобы метрики не врали.
Что такое датасет, из чего он состоит, какие бывают виды и форматы, чем хороший датасет отличается от плохого и где его взять. Простое объяснение с примерами.
40 источников датасетов для нейросетей: агрегаторы, открытые данные РФ, русские корпуса, речь, изображения, медицина. Как купить или собрать свой.