Лайфхаки

Маленькие, полезные хитрости

Ip-адреса при парсинге

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Последние обновления на сайте:

1. Родила дочь в свой день рождения.
2. Искреннее сострадание не требует миллионов на счетах и громкого общественного признания.
3. Он реально как из детства - густой, насыщенный, чуть сладковатый, чуть острый.
4. Долго планировали с мужем переезд, нашли жилье.
5. Все выбрасывают арбузные корки, а я замариновала одну банку.
6. МРТ Плода показывает мозг и глаза сквозь кости черепа.
7. В том случае, если баклажаны стоят красивой зелёной стеной, а плодов почти не видно - радоваться тут нечему.
8. Яблок много - вроде радоваться надо.
9. Сняли лук или ранний картофель и бросили голую грядку до весны?
10. Академик ран Онищенко призвал россиян не ездить отдыхать за границу: "Зачем Ездить в Турцию, Когда у нас в Стране Есть Практически все".
11. Мне 37, молодая и здоровая была, но за год постарела.
12. Вселенная кажется нам знакомой лишь потому, что мы видим звёзды на ночном небе.
13. Тля. Поможет поможет только это. слышу жалобы: нет сил бороться, ничего не помогает.
14. Пекинская капуста даст крепкие кочаны, если посеять её в нужный срок.
15. Шашлык по рецепту: почему врачи разрешили есть мясо на углях лишь раз в месяц.
16. Признаки дефицита основных макроэлементов у растений - как понять, чего не хватает?
17. Сон при свете повышает риск ожирения.
18. Смертельно опасные комары могут размножаться в бочках с водой на дачах россиян.
19. Совет по рассаде томатов.
20. Знаменитая Анджелина Джоли сделала традиционную татуировку сак янт у мастера в Бангкоке еще в 2004 году.
21. Что сеять в начале апреля, чтобы точно взошло и дало урожай?
22. Топ - 7 наборов семян, которые должны быть у каждого!
23. Картофельные ростки: золотой актив, который вы зря выбрасывали!
24. Слова - обереги, которые важно знать:
25. Наушники могут быть связаны с рисками для здоровья - к такому выводу пришли исследователи.
26. Когда сажать рассаду: лунный посевной календарь на 2026 год по месяцам и советы агрономов.
27. Олеся Иванченко: ослепительная звезда юмора и кино, чья красота завораживает.
28. Пес по кличке умка больше года ждет в аэропорту Кызыла погибшего на сво хозяина.
29. Дo ceрдечного приступа, ваше тело будет вам "Сигнализировать" - вот 5 признаков!
30. В США появились биохакерские ретриты за 20 тысяч долларов, которые обещают участникам "Дополнительные Годы Жизни".
31. Когдa нeльзя сaжать и cеять.
32. Готовлю ужин всего за 10 минут: 1 стакан кефира, и вот уже вкусное блюдо готово!
33. Hи однoй мыши, ни однoго кpoта и зaйца на вaшей даче бoльше не бyдет.
34. Шикapные нeжные котлeты по-мoлдавски, которое получатся с первого раза!
35. Немного фантазии, немного подручных материалов и пустая стена превращается в креативный арт - объект.
36. Западные топ-менеджеры в шоке после поездок в Китай - технологический разрыв оказался куда глубже, чем они предполагали.
37. Клубника на подоконнике - аромат лета круглый год!
38. Как избавиться от грызунов на даче простыми средствами.
39. Как правильно подготовить малинник к новому сезону.
40. Самодельный светильник - маленькое чудо для спальни.
41. Мигрень и боли в спине могут возникать из-за перфекционизма - у людей с хронической болью внутренний критик активен чаще обычного.
42. Выбор камней для парилки - важный этап, так как от них зависит качество пара и комфорт во время парения.
43. Шиловидный флокс - это декоративное многолетнее растение из семейства флоксовых (Saxifragaceae), известное своей яркой и пышной цветочной кистью.
44. Женщины изменяют в 2, 5 раза чаще именно в период овуляции, утверждает новое исследование.
45. Саженцы яблонь. Какие выбрать.
46. Молодая кровь способна омолаживать тело - это доказали учёные.
47. Как спасти огурцы от мучнистой росы.
48. Лето без арбуза и дыни - не лето!
49. Для пропитки древесины существует несколько эффективных средств, выбор которых зависит от целей обработки и условий эксплуатации.
50. Топ-10 открытых веб-кравлеров 2025 года: выбор для каждого