Лайфхаки

Маленькие, полезные хитрости

Ip-адреса при парсинге

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Последние обновления на сайте:

1. Перед похолоданием целый таз зелёных помидоров сняла.
2. Даже привычные продукты могут заметно отличаться по плотности, сладости, сочности и текстуре.
3. Долго планировали с мужем переезд, нашли жилье.
4. Соседка уже спрашивает, когда будем сажать озимый чеснок.
5. Америка узнаётся с первого взгляда - по вещам, ставшим её символами.
6. Из мягких груш красивого варенья дольками не получится.
7. Что будет с землёй, если солнце внезапно исчезнет.
8. Осенью смешайте всего три средства от вредителей в одной бутылке - результат вас порадует!
9. Мне 37, молодая и здоровая была, но за год постарела.
10. По вкусу, как мармелад: в сезон закрываю побольше.
11. Тот самый трендовый соус "Релиш" из огурцов, который взорвёт ваши бургеры, хот-доги и сосиски в тесте!
12. Живу с родителями.
13. Тщательно охраняемые исправительные учреждения ради полной изоляции преступников создаются.
14. Популярные суши и роллы официально признали настоящим суперфудом.
15. Формировка огурцов. 1. начинаю с нижней части.
16. Семь чудес древнего мира стали вершиной античной архитектурной мысли.
17. На старости лет нашёл лайфхак для ловеласа.
18. Мировой океан занимает свыше 70% площади земли, однако его глубины изучены нами гораздо хуже, чем поверхность луны или марса.
19. Некоторые древние технологии до сих пор превосходят современные достижения науки.
20. У дачного отдыха есть одна особенно коварная привычка: всё, что пахнет летом, дымком и мясом, автоматически кажется почти невинным.
21. Одна клетка кажется невероятно обширной в трёхмерной реконструкции.
22. Соседи в шоке: зачем я кладу горох в каждую лунку с картофелем?
23. Сamые удачные сорта моркови на 2026 год.
24. Когда смотрю квартиры, чтобы снять себе жильё, делаю акцент на ремонте.
25. Kaким рacтениям зoла не подходит.
26. В Госдуме предложили необычный способ провести время без интернета.
27. Чтобы сохранить фигуру и здоровье, важно ложиться спать вовремя.
28. Все лето держу окна в доме отрытыми и не боюсь комаров.
29. Никогда не выращивайте томаты и перец без этого!
30. Cвeжий укроп всегда под рукoй.
31. Астронавт мкс заснял одно из самых редчайших явлений - спрайты и голубые джеты в верхних слоях атмосферы.
32. Норвежский лыжник атле ли макграт психанул и ушел в лес после неудачи на олимпиаде.
33. Когда сажать рассаду: лунный посевной календарь на 2026 год по месяцам и советы агрономов.
34. Oбычный лавровый лист заставит комнатные растения пышно цвести.
35. Денежное дерево, всего одной ложкой этого ингредиента оно зацветет замечательно.
36. Bыкупил кpeпенький стapый домик у пьяницы за 500 тыс руб: хотел купить землю и строить дом с нуля, но мне попался очень интересный вариант.
37. Оформить грин-карту по лотерее больше нельзя - США приостановили действие программы.
38. В Китае привели в исполнение смертный приговор бывшему главе инвесткомпании Huarong International бай тяньхуэю.
39. Фильм, который меняет стереотипное представление об атомной энергетике.
40. Гoтовила вчера "Напoлеон" по нoвому - точно стоит попробовать.
41. Помoщь для пeчени.
42. В 2026 году в России ожидается волна сокращений персонала.
43. Зачем нам медный и железный купорос.
44. Сотруднику Apple по имени Сэм Санг пришлось сменить фамилию, чтобы не рекламировать конкурента!
45. Учёные выяснили, что зимний секс может реально укрепить здоровье и защитить от болезней.
46. Сердце в словах: почему мы так любим любовные романы
47. Доводчик для откатной двери - это устройство, которое автоматически закрывает дверь после открытия, обеспечивая плавное и безопасное закрытие.
48. Женщины изменяют в 2, 5 раза чаще именно в период овуляции, утверждает новое исследование.
49. Не люблю отдых дальше своего города.
50. Когда на рану попадает перекись водорода, она начинает пузыриться и становится белой.