corpus-data

Open repos and models their makers tagged corpus-data, most starred first. The same for everyone.

Language and translationRepo

MNBVC

MNBVC(Massive Never-ending BT Vast Chinese corpus)超大规模中文语料集。对标chatGPT训练的40T数据。MNBVC数据集不但包括主流文化,也包括各个小众文化甚至火星文的数据。MNBVC数据集包括新闻、作文、小说、书籍、杂志、论文、台词、帖子、wiki、古诗、歌词、商品介绍、笑话、糗事、聊天记录等一切形式的纯文本中文数据。

  • 4.3k
  • MIT
  • 4 wk ago
esbatmopTake it
Search GitHub and Hugging Face for corpus-data

Get , open it once and sign in. Then come back here and press the button again.