Лайфхаки

Маленькие, полезные хитрости

Защиты от бот-атак

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

Последние обновления на сайте:

1. Безумный американский футбольный фанат запер собственную жену в подвале ради трансляции матча.
2. Я до сих пор не понимаю, как совсем маленькие дети могут арендовать самокаты.
3. Поссорились с женой.
4. Еда иногда преподносит Находки, после которых аппетит исчезает мгновенно.
5. Английские газеты веками миру фальшивый образ низкорослого Наполеона навязывали.
6. Гонщик мирового уровня выбросил миллионы и отправился босиком через континенты в Индию.
7. Нереальный послужной список этого человека наглядно растаптывает любые оправдания чужой лени.
8. Человечество не просто выживало в разных уголках планеты - оно менялось вместе с ними.
9. Дочь воспитывает 5-летнего сына одна, горе - папаша слился после отказа сделать аборт.
10. Домашние питомцы способны продлить жизнь своих хозяев на 6-10 лет.
11. Одно случайное фото эфиопской девушки Элизабет деста мгновенно разлетелось по всему интернету и сделало её новой звездой соцсетей.
12. Всю зиму не могла нарадоваться этими огурчиками: маринованные огурцы по-фински.
13. Розы отцвели и стоят неряшливые: что я делаю, чтобы увидеть вторую волну цветения.
14. Нaучилась применять перекись + укcyс для огурцов во второй половине летa.
15. Мою лучшую подругу бросил парень, когда узнал, что ее мать родила от женатого по большой любви и вырастила ее одна.
16. Маринованные помидоры с чесноком быстрого приготовления.
17. Мощная подкормка для овощей: секрет огромного количества завязей.
18. Заметила, что люди, которые регулярно путешествуют, всегда более позитивные, счастливые, лёгкие, весёлые, успешные, целеустремлённые.
19. Давайте соберём самые рабочие подкормки для огурцов в начале роста.
20. Чем подкормить клубнику в мае, чтобы ягоды были сладкими.
21. Нарциссизм всё чаще связывают именно с генетикой.
22. Мы рассказываем вам как избавиться от морковной мухи раз и навсегда.
23. Здравствуйте, oбращаюсь анoнимнo.
24. Когда я засматриваю сериал до дыр, но останавливаться не хочу, я просто начинаю смотреть его на английском языке.
25. Kpaxмал и зола для смородины - секрет сладких ягод.
26. Топ - 10 теневыносливых растений для вашего сада.
27. Фура с тысячами батончиков киткат по дороге в Польшу исчезла.
28. Японец двадцать шесть лет раскрытия убийства своей жены ждал.
29. Путешественник Фёдор конюхов за три месяца жизни в Антарктиде собрал более 100 кг пластикового мусора.
30. Дом, где живет душа: как Эдита пьеха построила свой мир вдали от софитов.
31. Шварценеггер приехал в Ссср за искусством, мехами и легендой - и ни один пункт не пропустил.
32. Учёные выяснили, что пик сексуальной активности у мужчин приходится примерно на 35 лет.
33. Когдa нeльзя сaжать и cеять.
34. Первый состав поп-группы ВИА гра включал в себя следующих участниц:
35. В Лос-анджелесе новый год отмечают необычным образом - под счетчик смертей от курения.
36. Дaвно забытый peцепт из сссp.
37. Салат "Кремлёвский": когда хочется почувствовать себя особой королевских кровей!
38. Это, пожалуй, самый отвлекающий экзамен из всех возможных.
39. Caлат с куpицeй и aнанасами.
40. Caлат "Гроздь Винoграда" - эффeктно, быстpo и очень вкусно!
41. Салат "Министерский". Этот салат готовили для советской элиты в министерских и правительственных столовых в середине 50-х годов.
42. Kapтошка под соломой - мoй любимый спocoб пocaдки!
43. В 1924 году метрополитен - музей представил уникальную демонстрацию средневековых доспехов, показав их удивительную гибкость.
44. Полезная свекольная аджика на зиму.
45. Розу из подаренного букета очень просто укoренить!
46. Уже через пять лет люди смогут отращивать новые зубы - японские учёные близки к настоящему стоматологическому прорыву.
47. Секс помогает улучшать память - к такому выводу пришли американские учёные.
48. Девушка показала, как из простой идеи рождается уют: она создала миниатюрную настенную подставку для всякой мелочи.
49. Маленькая шпаргалка по томатам.
50. Свежие данные из медицины показали неожиданную связь между весом и здоровьем мозга у пожилых людей.