Каталог / Текст и NLP

Карточка-указательПДн: не обнаружены

Mc4

Открытый датасет «Mc4» от legacy-datasets. Лицензия ODC-BY. Файлы остаются у источника.

A colossal, cleaned version of Common Crawl's web crawl corpus. Based on Common Crawl dataset: "https://commoncrawl.org". This is the processed version of Google's mC4 dataset by AllenAI. Карточка открытого датасета. Файлы на площадку не копируются. Автор: legacy-datasets. Лицензия: ODC-BY.

Состав

Тип
Текст
Форматы
ZIP
Строки
—
Часы
—
Объём
—
ПДн в карточке
ПДн нет
Язык
ru
География
русский

Образец

Текстового образца нет. Для открытого набора файл лежит у источника.

Автор: legacy-datasets. Источник: https://huggingface.co/datasets/legacy-datasets/mc4. Лицензия: ODC-BY (https://huggingface.co/datasets/legacy-datasets/mc4).

Площадка является информационным посредником (ст. 1253.1 ГК РФ). Ответственность за законность данных несёт продавец. Сообщить о нарушении

Похожие

Текст и NLP

C4

Открытый датасет «C4» от allenai. Лицензия ODC-BY. Файлы остаются у источника.

ТекстODC-BY
У источникаОткрытые данные

Текст и NLP

Wiki lingua

Открытый датасет «Wiki lingua» от GEM. Лицензия CC BY-NC-SA 3.0. Файлы остаются у источника.

ТекстCC BY-NC-SA 3.0Некоммерческое
У источникаОткрытые данные

Текст и NLP

Wikipedia

Открытый датасет «Wikipedia» от legacy-datasets. Лицензия CC BY-SA 3.0. Файлы остаются у источника.

ТекстCC BY-SA 3.0
У источникаОткрытые данные

Текст и NLP

Belebele

Открытый датасет «Belebele» от facebook. Лицензия CC BY-SA 4.0. Файлы остаются у источника.

ТекстCC BY-SA 4.0
У источникаОткрытые данные