Лайфхаки

Маленькие, полезные хитрости

Ip-адреса при парсинге

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Последние обновления на сайте:

1. В этих местах одна ошибка может превратить путешествие в борьбу за жизнь.
2. В разных странах существуют негласные запреты, которые туристам лучше знать заранее.
3. Поссорились с женой.
4. Свёкла наполовину торчит из земли - это ещё не значит, что она срочно просится в погреб.
5. Срезала старую ветку смородины, а внутри вместо нормальной светлой сердцевины оказалась чёрная пустота.
6. Розы отцвели и стоят неряшливые: что я делаю, чтобы увидеть вторую волну цветения.
7. Мы привыкли считать сахар обычной и безобидной частью ежедневного рациона.
8. Огурцы стали плодоносить гораздо лучше, когда я научилась их прищипывать.
9. Про проветривание теплицы.
10. Летняя аномальная жара заставила россиян массово отказаться от интимной жизни.
11. Экзамен по философии сдавала.
12. Древний Египет - это не только золото и пирамиды, но и пугающая изнанка.
13. История доказывает, что многие теории заговора со временем становятся фактами.
14. У релокантов смогут арестовывать имущество за различные правонарушения против национальных интересов.
15. Для сохранения здоровья листьев огурцов и предотвращения их желтения, вот несколько проверенных рецептов:
16. При знакомстве с новыми людьми всегда стараюсь мягко обкатать какие-то жесткие для него темы.
17. Сон при свете повышает риск ожирения.
18. Цветы для ленивого сада: посадил и забыл на все лето.
19. В популярных духах обнаружили потенциально опасные вещества.
20. История любви из разных миров покорила интернет.
21. Турецкий огуречный салат.
22. Ростки картофеля: ценный ресурс, который вы зря выбрасываете!
23. Всегда в путешествиях.
24. У китайцев принято чавкать.
25. Выйдя из тюрьмы, девушка первым делом понесла букет на могилу мужа.
26. Исследование рост половой дисфункции среди молодого поколения показало.
27. Легенды мирового рока украсили фасады домов в елизаветино.
28. Никогда не выращивайте томаты и перец без этого!
29. Один из первых фильмов молодой Анджелины Джоли, ей здесь всего 20 лет.
30. Художник цифрового коллажа Угур галленкуш создаёт выразительные работы о глобальной несправедливости.
31. Работа в ночное время риск инфаркта и сердечно-сосудистых проблем повышает.
32. Как заставить замиокулькас активно выпускать новые побеги.
33. Некоторые сельские общины южной Кореи нашли необычный способ сохранить маленькие школы, несмотря на снижение рождаемости.
34. Ha 2-й день ещё вкycнее.
35. Bpaчи пpeдупреждают: злоупoтребление мaндаринами пepeд прaздниками опacно для здоровья желудка.
36. Молодая британка, которая вела активный зож, пережила редкий и пугающий инцидент - её сердце остановилось прямо на рабочем месте.
37. Не пробовали посадить лук китайским способом?
38. Врачи предупреждают: заправлять постель сразу после пробуждения может быть опасно для здоровья.
39. В 2026 году в России ожидается волна сокращений персонала.
40. Какао - настоящее спасение для тех, кто работает на удалёнке или в офисе.
41. Клубника на подоконнике - аромат лета круглый год!
42. В России начались испытания новой вакцины против аллергии.
43. Сердце в словах: почему мы так любим любовные романы
44. Секрет крупного озимого чеснока - простая подкормка при посадке!
45. Девушка показала, как из простой идеи рождается уют: она создала миниатюрную настенную подставку для всякой мелочи.
46. Мигрень и боли в спине могут возникать из-за перфекционизма - у людей с хронической болью внутренний критик активен чаще обычного.
47. Американские учёные провели исследование и пришли к интересному выводу: мужчины достигают психологической зрелости только после 40 лет.
48. Кто сказал, что шестиугольники только у пчёл?
49. Калина - это популярная ягода, которая широко используется в народной медицине и кулинарии благодаря своим полезным свойствам.
50. Витамин D способен замедлять старение организма в три раза - к такому выводу пришли учёные из проекта Vital после анализа данных 25 тысяч человек.