Taxminan 14 milliard elektron pochta xabarlari bor (garchi ularning yarmi spam bo'lsa ham), har bir mashhur platformalarda 50 milliondan ortiq ijtimoiy media xabarlari va har soatda chorak million blog xabarlari. To'g'ri qancha matn nashr etilishini taxmin qilish qiyin, va bu nashr etilgan matnning ta'rifiga bog'liq, ammo Common Crawl loyihasi deyarli butun Internetni har yili arxivlaydi; 2023 yilgi arxiv 400 terabayt atrofida, bu eng katta, shuning uchun biz har soatda nashr etilgan 50 gigabaytdan kam matn borligini taxmin qilishimiz mumkin.
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence