Лайфхаки

Маленькие, полезные хитрости

Ip-адреса при парсинге

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Последние обновления на сайте:

1. Три растения для спальни работают по-разному, и только одно подтверждено наукой.
2. Эмиграция за чужой счет стала легальным способом сорвать огромный куш за границей.
3. Он реально как из детства - густой, насыщенный, чуть сладковатый, чуть острый.
4. Джем из кабачка и кураги сварила.
5. Долго планировали с мужем переезд, нашли жилье.
6. Соседка уже спрашивает, когда будем сажать озимый чеснок.
7. Карты способны рассказать о нашей планете гораздо больше, чем толстые учебники.
8. Грядку под озимый чеснок готовлю не в ДЕНЬ посадки.
9. Выкопать свёклу - половина дела.
10. Твоё тело работает 24 часа в сутки без твоего участия.
11. Насколько огромны самые большие объекты в природе и космосе.
12. Вселенная скрывает миллиарды планет, многие из которых совсем не похожи на нашу землю.
13. Осенью смешайте всего три средства от вредителей в одной бутылке - результат вас порадует!
14. Всю зиму не могла нарадоваться этими огурчиками: маринованные огурцы по-фински.
15. Переехали за город, как давно мечтали.
16. Некоторые места на земле настолько удалённые и безжалостные, что потеряться там - значит начать настоящую борьбу за выживание.
17. Официальная мировая история находится намного ближе к нам, чем кажется.
18. Великая история древнего Рима до сих пор скрывает множество удивительных тайн.
19. Некоторые населенные пункты на земле постоянно живут в условиях экстремального мороза.
20. Выпускники по всей России массово заявляют о жестких ошибках в ЕГЭ.
21. Эти города не просто "Потерялись" - некоторые из них исчезли всего за одну ночь.
22. Пoлив клyбники нашатырным спиртoм от вредителей и болезней.
23. Так томаты в теплицу не просто так высаживают.
24. Какие аптечные недорогие препараты подойдут для подкормки молодой рассады перца и томатов на подоконнике?
25. Сamые удачные сорта моркови на 2026 год.
26. Луис гибсон создала сотни узнаваемых лиц с помощью карандаша.
27. Топ - 7 наборов семян, которые должны быть у каждого!
28. Как посадить перец, чтобы он взошёл за 2-3 дня и дал ранний урожай.
29. Пятьcot лет тому нaзад.
30. Маленькому панчу в зоопарке придётся расстаться с игрушечной мамой.
31. В Мавритании ходит один из самых впечатляющих поездов на планете.
32. Художник цифрового коллажа Угур галленкуш создаёт выразительные работы о глобальной несправедливости.
33. Денежное дерево, всего одной ложкой этого ингредиента оно зацветет замечательно.
34. Когда внешний мир исчезает, полёт превращается в абсолютное доверие приборам и технологиям.
35. В России вновь заговорили о возможном переходе на шестидневную рабочую неделю.
36. Рецепт плюшек: Ингредиенты для опары:
37. Салат "Кремлёвский": когда хочется почувствовать себя особой королевских кровей!
38. 2397 золотистых ретриверов заполнили парк в Буэнос-айресе, чтобы побить мировой рекорд.
39. На новый год обязательно буду готовить, потому что этот бюджетный малыш разлетается с тарелки быстрее всех сложных блюд!
40. Oна есть у кaждого в саду … вeдьмина трава.
41. Минфин России предложил разбавлять бензин спиртом, чтобы увеличить объёмы топлива на рынке.
42. Маринованные помидоры. Предлагаю рецепт помидорчиков.
43. Врачи предупреждают: заправлять постель сразу после пробуждения может быть опасно для здоровья.
44. Это закуска на любом застолье на ура уходит!
45. Разбираемся как бороться с червяками на малине.
46. В России отложили введение нового утильсбора для автомобилей.
47. В России начались испытания новой вакцины против аллергии.
48. Девушка взялась за проект своими руками и в итоге собрала настенные часы.
49. Осень - лучшее время, чтобы дать газону "Второе Дыхание".
50. Это не просто блюдце для мелочей - это маленькое произведение ручного труда.