jump.bg блокират цели държави - проверете си трафика
- Автор Sky
- Начална дата
FalcoSoft ITS
Well-Known Member
деликатно предложение за преминаване към VPS 
Test
Well-Known Member
Ако някъде на сървъра има сайт с голяма база данни, ИИ-тата няма начин да не я налазят да се обучават. Тогава трябва да се блокират държави, но не е нужно да се прави на ниво сървър. При споделен хостинг може да се блокират държавите на ниво акаунт, без да се засягат на другите хора услугите, които не са интересни за ИИ.
deepdoff
Active Member
Ако всеки сайт има правилна конфигурации и AI са длъжни да спазват манифеста от robots.txt и ако там си забранил обучение да те прескачат. Поне при мен е така на VPS сайтове с трафик от 800 хиляди до милион на ден 95% от AI след като забраних обучението с:
Явно трябва да си пипнат инфраструктурата и нещата които са от комунизма.
спряха да ме спамят. Ама не е сигурно разбира се но все пак това са правилата.
Явно трябва да си пипнат инфраструктурата и нещата които са от комунизма.
FalcoSoft ITS
Well-Known Member
не си разбрал... има ddos атака, а не ботове
Повечето не ги е еня за robots.txt
Фейкват браузър и те спамят от домашни проксита или хакнати IoT (телевизори, тостери и каквото се сетиш).
deepdoff
Active Member
Да за това има и cloudflare - Bot Fight Mode, WAF Custom Rules, Rate Limiting, AI Crawl Control, Managed WAF Rules, Turnstile и още купища. Един адекватен човек ако иска да има адекватен сайт които да му генерира приходи и да изглежда сериозен не може да разчита на ще си инсталирам WP и споделения хостинг и всичко ми е розово. Ти ако не си направиш нещата и не се интересуваш няма кои. Да приемем че човек е тотално неграмотен и нищо не разбира за това плаща на сулю си пулю да му направели сайт. И тези сулю и пулю като се правят на специалисти поне да се погрижат да му направят надеждно каквото се ичисква от сайта + cloudflare дори и безплатния му вариант има достатъчно защита. Просто всеки иска без да прави нищо всичко да работи и после мрънка. Ама в този живот няма нищо на готово някои още не са го разбрали и търсят проблема винаги другаде но не и при тях самите.
LightSpeed
Member
Какво ви пречат ботовете? Нека си четат и учат.
Оптимизирайте ситемите да държат на "бой", добавете още малко ресурси и всичко е ОК.
Реално е така. Ако ресурсите са кеширани правилно в повечето случаи този тип заявки няма да стигнат до бекенда.
deepdoff
Active Member
Аз не говоря за теб и твоята услуга. Коментирам темата и това за което говорим, че всеки неглижира всичко и очаква друг да се грижи за сайтовете му даром.@deepdoff Искаш да кажеш, че не мога да заобиколя "защитите"? Я питай Siteground. Даже може да се сетят за мен.
Иначе ето статистика как товариха всеки ден с по над милион и как ги свих 10-12 пъти.
Повечето бяха от OpenAI 60%
Тези хора вместо да ровят из robots.txt могат да се прехвърлят на подходяща услуга.
Какво правиш ако клиента иска OpenAI да има достъп? В днешно време много голяма част от трафика идва от ИИ търсачките.
FalcoSoft ITS
Well-Known Member
и аз бях направил една грешка при направата на моите сървъри , всички сървъри чрез агентите се пингваха взаимно един други през 5 секунди , така трафика ставаше над милион дневни без да се отразява на сървърите защото не минаваха през CloudFlare да ги засече. Съвсем случайно открих бтази грешка и я поправих. Трафика намаля с 90%Аз не говоря за теб и твоята услуга. Коментирам темата и това за което говорим, че всеки неглижира всичко и очаква друг да се грижи за сайтовете му даром.
Иначе ето статистика как товариха всеки ден с по над милион и как ги свих 10-12 пъти.
Повечето бяха от OpenAI 60%
deepdoff
Active Member
Специално този не иска AI да му се обучава на сайтовете. За това ги ограничих, иначе клиента има 14 големи магазина на сървър като:
2 x E5-2670, 2 x 8 core, 2 x 16 threads, 32 threads total
128 GB RAM
2 x 1 TB SATA Hardware RAID 1
2 x 2 TB SATA Hardware RAID 1
И това което показах е само на един от тях. Като ги събереш 14 по този-трафик си е натоварване което е излишно.
Всичко е според това какво трябва да се направи и какво се иска.