Скрапинг
1 июня 2018
Термин Big data («большие данные») и разговоры об их анализе сегодня на слуху. Анализ огромных массивов разноплановой информации полезен для самых различных целей. Но прежде чем что-то анализировать, это «что-то» необходимо собрать. А утечками (даже такими легальными, как это было в случае Facebook) пользоваться нельзя. Далеко не все заказчики готовы закрывать глаза на сомнительные источники информации.
В случае данных, размещенных в Интернете, на помощь приходит cкрапинг (от англ. scraping – «выскабливание», он же – краулинг, от англ. crawling – «переползание») – процесс поиска и скачивания данных с веб-страниц с помощью специальных роботов – скраперов/краулеров, которые имитируют поведение человека.
Современные сайты, как правило, не являются статическими – внешний вид страниц сайта зависит от операционной системы, которую использует пользователь, браузера, прав доступа к информации, ограничений законодательства, используемых плагинов и так далее. Поэтому просто зайти на некий ресурс и скачать с него всю информацию нельзя – на стороне пользователя после загрузки ресурсов сайта должны отработать скрипты, скачиваемые вместе с другими ресурсами и приводящие скачанную информацию в удобный для просмотра и использования вид.
Нужно имитировать пользователя, заходящего на некий сайт. Более того – пользователя, работающего на этом сайте. Зачем это нужно? А как иначе получить доступ к сайтам, скажем, требующим ввода пароля или «капчи»?
Практически так же действуют боты-пауки поисковых систем. Отличие – в их законопослушности. Так, сайты используют файлы robots.txt, содержимое которых показывает поисковому роботу, что определенные разделы сайта непубличны, т. е. их не нужно индексировать и отображать в результатах поиска. Но это – лишь правила вежливости, не более. Незаконопослушным скраперам никто не мешает игнорировать robots.txt и добывать любую информацию, в том числе приватную. Если же учесть, что подавляющее большинство использует пароли типа 12345678, то задача не выглядит невыполнимой.
Нашим девизом стала знаменитая фраза капитана Джека Воробья: «Бери всё и не отдавай ничего».
Где это может использоваться? Например, конкуренты очень хотят получить контент чужого интернет-магазина, и не только получить, но еще и отслеживать изменения позиций и цен. Что это дает? Узнали о новых скидках – мгновенно ввели свои или провели акции.
— Извините, но воровать контент не хорошо!..
— Иди, я тебя расцелую, мой золотой.
http://setmefirst.ru/blog/web_scraping_chto_eto_takoe_i_s_chem_ego_edyat
Какие термины еще нужно знать, если мы говорим о сборе данных? В первую очередь – парсер, программа или набор программ, ответственных за первичный разбор данных.
— Сколько длится парсинг одного сайта?
— А сколько стоит одна таблетка? Смотря какие размеры имеет сайт, как долго сервер отвечает на запросы. На нашей практике некоторые сайты полностью парсились почти за неделю. Конкретно сайт «Строительные Советы» парсился 44 минуты 10 секунд, было получено 1550 записей при 1897 запросах.
И самое важное:
Напоследок, хотелось бы сказать пару слов о парсинге вообще и при помощи Тора в частности. Добывать себе данные — это стильно, модно и в принципе интересно, можно получить датасеты, которых еще никто никогда не обрабатывал, сделать что-то новое, посмотреть, наконец, на все мемы мира сразу. Однако не стоит забывать, что ограничения, введенные сервером, в том числе баны, появились не просто так, а в целях защиты сайта от недоброжелательных ковровых бомбардировок запросами и DDoS-атак. К чужому труду стоит относиться с уважением, и даже если у сервера никакой защиты нет, — это еще не повод неограниченно забрасывать его реквестами, особенно если это может привести к его отключению — уголовное наказание никто не отменял.
Антивирусная правДА! рекомендует
Защититься от подобных сборщиков данных можно, хотя это и непросто. Скажем, можно при каждом обновлении переименовывать классы и переменные в файлах сайта. Можно отслеживать рост числа запросов определенного типа и блокировать их.
- Защитите сайт от атак типа SQL injection.
- Не формируйте имена папок и пути к ним так, чтобы механизм их генерации был предсказуем. Например, наличие путей типа /topic/11, /topic/12 и т. д. явно будет говорить о том, что можно выбрать данные, обратившись по ссылкам с аналогичными именами.
- Формируйте вид страниц динамически, но не увлекайтесь этим – поисковые роботы могут не найти информацию, которую вы, наоборот, стремитесь распространить.
- Не разрешайте большое количество поисковых запросов с одной страницы, ограничивайте количество и продолжительность сессий с одного IP-адреса или домена.
- Для доступа к данным используйте надежные пароли и «капчу».
- Не забывайте проверять логи сайта на предмет следов взлома.
- Ограничьте список IP популярных прокси-сервисов, через которые к вам могут проникать «пользователи».
- Если вы выявили подозрительного «пользователя», не сообщайте ему от этом – не стоит показывать, где именно он допустил прокол.
- Оформите правила использования ресурсов сайта и не забывайте привлекать хороших юристов.
Не стоит думать, что если вы выполнили все требования, то вы в полной безопасности. Вполне возможно, что ОНИ выдумали что-то новенькое. Вашей команде следует постоянно анализировать поведение ваших пользователей и посетителей. К сожалению, данная процедура потребует затрат времени и финансовых ресурсов, но это жизненно необходимо для любого проекта.
Нам важно ваше мнение
Чтобы оставить комментарий, нужно зайти через свой аккаунт на сайте «Доктор Веб». Если аккаунта еще нет, его можно создать.
Комментарии пользователей
Денисенко Павел Андреевич
17:19:27 2018-08-03
Пaвeл
15:25:19 2018-07-21
Давно собираюсь побывать на Байкале, ни разу не был, может быть даже в следующем году. Как соберусь, обращусь к Вам за советом, спасибо!
Любитель пляжного футбола
14:50:48 2018-07-21
А рассказ получился весьма подробным, просто нашло вдохновение, тут, как говорится, надо ловить момент, за один вечер не успел дописать, заканчивал на следующий день, после работы, уже в состоянии усталости, лишь бы дописать, поэтому и слог не тот. Бывало, письма пишешь родственникам, развиваешь одну мысль, тут ещё что-то вспомнишь, тут ещё несколько подтемок появится, и дальше в геометрической прогрессии. :) Тут уж главное - вовремя остановиться, иначе так можно писать до бесконечности. Ну и, поскольку прозы в моём рассказе было до неприличия много, разбавил её немного стихами, давно их не сочинял. Если вдруг соберётесь на Байкал, то обращайтесь, могу дать полезные советы и ссылки на не менее полезные сайты. Ну а сам, скорее всего, вернусь туда в следующем году, там ещё немало осталось красивых мест.
Пaвeл
10:28:19 2018-07-20
Уверен, что вы вполне могли бы побороться за главный приз в конкурсе «С мечтой (п)о России»!
Любитель пляжного футбола
00:02:18 2018-07-20
Ну, в принципе, на этом всё, старался быть кратким, но не особо получалось, ещё немного, и уже можно было рассказ писать. :) Просто вчера нашло вдохновение, сегодня дописывал уже не в том состоянии. Простите за возможные ошибки и опечатки, нет сил всё это ещё перечитывать для проверки. Понравилось на Байкале очень, если я планировал поехать в следующем году в Карелию и на Соловки, а год спустя в Крым, я на юге уж лет 30 не был, то потом уже по прибытию в Иркутск подумывал через год снова поехать на Байкал, вместо Крыма, а после возвращения с пика Черского мне и вовсе захотелось вернуться сюда уже в следующем году, посетить много новых мест, причём сделать поход более экстремальным, поехав сюда осенью, очень красивые виды в горах, когда вечнозелёные сосны контрастируют с другими одевшими свой осенний наряд деревьями. Правда, уже и довольно прохладно будет, зима здесь приходит раньше. Пока размышляю, сейчас уже надо будет подавать заявку на отпуск на следующий год. Не знаю, может, после прочтения стоит удалить всю эту писанину, всё-таки это не по теме выпуска. :) Уж слишком подробно получилось.
Кончаю, страшно перечесть,
В сей край вас, чудный, приглашаю,
Советов дать могу - не счесть,
А коль ко мне вопросы есть,
На них уж завтра отвечаю.
Тревожить боле вас не смея,
Иду в объятия Морфея. :)))
Любитель пляжного футбола
00:01:48 2018-07-20
Мне стало понятно, что к водопадам я не успею, да ещё и немало времени отнимала фотоохота, решил ограничиться просто восхождением. На перевале встретил два выводка куропаток, которых ранее никогда не видел, меня они тоже особо не боялись, снимал их на видео метров с пяти, видимо, их люди здесь не обижают. Наиболее сложно и опасно на Жандармском перевале, что непосредственно у пика Черского, это даже не тропа между двумя пропастями, там на гребне лежат скользкие плиты, причём ещё под углом градусов 20, хорошо хоть, что там протянут стальной трос, иначе запросто можно сорваться. Часам к десяти я был уже на вершине, оттуда открывается просто изумительный вид, вокруг одни горы, если нет дымки, то вдали можно даже увидеть Байкал, я впервые был по-настоящему в горах, в горной местности, это не то что ты на берегу идёшь по КБЖД, а сбоку горы, нет, ты именно в горах, и они повсюду, просто красота, хотелось просто оставаться на вершине и любоваться окружающим видом. Здесь на Байкале словно времена года сместились, в середине лета на склоне пика ещё лежал снег, немного, но всё же, в городе только начала отцветать сирень, а в Байкальске скоро будет фестиваль клубники… Потом я спустился к озеру Сердце, что у подножья пика, поднялся ещё на один перевал, и было пора возвращаться. И хотя обратная дорога всё идёт вниз, но простой её не назовёшь, спуск крутой, камни, корни, особо не расслабишься, в час делаешь, наверное, три километра, уже потом, выйдя к речке, можно понемногу набирать скорость, дорога становится более-менее нормальной. Одна неприятная история со мной приключилась, не хотел я поначалу рассказывать, но всё же поделюсь, так шагал я по тайге 22 км практически без отдыха, останавливаясь лишь затем, чтобы воды зачерпнуть из речки, собирался успеть на поезд, что прибывал на станцию в 21:16, уже в городе задержался на три минуты, увидел голубых сорок, обитает там такой вид, такие же сороки, как наши, только белый цвет заменён грязно-голубым, пришёл заранее на вокзал в 21:06, смотрю, поезд отходит, оказалось, это и был мой поезд, я неправильно запомнил время его отхода, причём эта информация была у меня в записной книжке, только стоило это проверить, вот ирония судьбы, шагал 5 часов подряд по тайге, чтобы опоздать на 3 минуты. Следующий поезд был только через четыре часа, в час ночи, так что только к 4 утра я был в гостинице. Как-то не повезло мне тут с поездами, лет 30 на них не ездил, и тут оба раза неудачно. :) Дятел, что сказать, сам виноват.
Ну, оставался последний день моего пребывания на Байкале, в 6:30 подъём, особо не выспавшись поехал в Листвянку, в прошлый раз нормально погулять там мне помешал дождь, в Листвянке есть смотровая площадка, называется камень Черского (к слову, в северной части Байкала есть ещё и гора Черского, повыше пика Черского, просто использовали разные слова: камень, пик, гора, чтобы не было путаницы), 2 км по несложному серпантину, и ты на вершине. Прогулялся по порту Байкал (это посёлок так называется на другом берегу Ангары, где начинается КБЖД), там тоже есть смотровая площадка; прошёлся по самой Листвянке. В принципе, в Листвянке нет ничего особо интересного, но побывать здесь тоже стоит; туристов здесь всегда много, просто от Иркутска это ближайший населённый пункт на берегу Байкала, ехать туда чуть более часа.
Любитель пляжного футбола
23:56:50 2018-07-19
На следующий день съездил в Листвянку, но сказать, что не повезло с погодой, это ещё ничего не сказать. С самого утра и на весь день тупо зарядил дождь, то сильный, то слабый, но не прекращающийся ни на минуту, густой туман, видимость зачастую менее 100 м. Что было делать, посетил музей, посвящённый озеру Байкал, прошёлся по дендрарию, что рядом с музеем, и потихоньку на автостанцию. Такой же монотонный дождь лил и в Иркутске, день был попросту испорчен.
На следующий день отправился на экскурсию на паровозе по КБЖД, думал, будет интересно прокатиться по заброшенной железной дороге. Романтика! Но, к удивлению своему, всю дорогу скучал, едва не засыпая, ведь все виды для меня были знакомы, только неделю назад проишачил здесь сотню километров, всё-таки пассивный отдых не для меня, я не из тех, кто готов днями греться на пляже где-нибудь на Лазурном берегу, я бы там уже захирел на второй день. По КБЖД намного интереснее пройти пешком, только желательно выделить на это дней 4-5, чтобы это сделать не спеша, так и не устанешь особо (у меня же было не так много времени). Всё-таки поездка на экскурсионном поезде – это несколько не то, если только у тебя не так много времени. Надо пройти эту дорогу самому, прочувствовать её своими ногами, перенестись как бы на век назад, увидеть своими собственными глазами, какой титанический труд был вложен в строительство этой уникальной дороги.
Изюминкой и венцом моего непростого путешествие стал 22-километровый поход по тайге и восхождение на пик Черского, пока мой первый двухтысячник. Как знать, может, и далеко не последний. :) Ещё в процессе подготовки к путешествию эту идею пройти вглубь материка по тайге к пику Черского я посчитал бредом и сразу её отмёл (как, впрочем, и ряд других, которые впоследствии успешно реализовал:))). Но потом вернулся к ней, слишком уж была заманчивой, и, как оказалось, никакой это был не бред, достаточно лишь тщательно разработать маршрут. :) Отправился я туда на два дня, думал добраться к 6 вечера и успеть совершить восхождение, но пришёл только к 7, остановился на ночлег на метеостанции, по пути просто потратил немало времени на фотографирование и наблюдение за таёжными птицами. Впервые увидел кедровку, а их там очень много, легко узнаёшь по характерному крику, снял на видео щура, которого также видел впервые, сидел на вершине дерева и пел. На маршруте видел более десятка бурундуков, это вообще была моя мечта их увидеть, а их там видимо-невидимо, больше всё же невидимо, я обратил внимание на особый свист, похожий на птичий, а птиц-то не видно, потом догадался, что так свистят бурундуки. Так этот свист раздавался чуть ли не на каждом шагу, так много их там было, также удалось их снять на видео. Некоторые подбегали даже на пару метров, не специально ко мне, просто корм искали на земле, особо не боялись, просто уже более-менее привыкли к людям, туристы по этому маршруту просто косяком ходят. Так остановился переночевать на метеостанции, поставил палатку, правда, особо выспаться не удалось, туристов там было много, и были они довольно шумные. В следующий раз лучше останавливаться не на территории метеостанции. Встал я рано, ещё до 6 утра был на маршруте, собирался подняться на пик Черского и спуститься к водопадам, а потом отправиться обратно в город. Сразу скажу, к водопадам пойти не удалось, вышел я на маршрут неотдохнувшим, ещё немного замерзал в палатке, и хотя на тот случай, если будет холодно, подготовил куртку, но спросонья не вспомнил про неё и лежал скрючившись в неудобной позе, так что мышцы не отдохнули. Если накануне я просто летел в подъём, обгоняя других, а дорога там непростая, уже от самого Байкала всё время подъём, правда, подъём пологий и особо неощутим, тропа едёт вдоль горной речки, время от времени переходя то на один, то на другой её берег (мостов 14 я насчитал), чистейшая вода, которую можно сразу пить, зачерпнув из речки (в Европейской части России об этом даже и не помечтаешь), то где-то за 4-5 км до метеостанции становится весьма крутым, а на пути изобилие крупных камней и корней деревьев, но подъём мне дался сравнительно легко, я не чувствовал усталости, то на следующий день сразу начинал уставать, и подъёмы давались мне очень тяжело, днём на подъёме к перевалу меня запросто обгоняли другие, словно слабака какого-то, хотя ещё вчера было наоборот, обидно было, просто не отдохнул как следует ночью.
Любитель пляжного футбола
23:55:31 2018-07-19
Эта прогулка, несмотря на все мои опасения из-за столь утомительного предыдущего дня, далась мне очень легко, после 50-километрового перехода мои ноги было уже сложно чем-либо удивить, усталости я не чувствовал, так, лёгкая прогулка в парке, шёл я не спеша, наслаждаясь окружающими видами, попутно изучая местных пернатых, к слову, я любитель птиц, и мне очень хотелось увидеть тех птиц, что обитают в Сибири. Тропа в начале маршрута (от Листвянки) довольно крутая, в принципе, для меня дело это привычное, преодолел подъём на одном дыхании, далее тропа серпантином с высоты 400 м над уровнем озера спускается к Байкалу, по дороге уже вдоль берега встретился предупреждающий знак «Опасная тропа», там приходилось на всякий случай хвататься за скалы, тропа была довольно узкой и проходила над обрывом, как, впрочем, и почти всю дорогу. В остальных же местах и то надо было быть осторожным: обычная ширина тропы составляла немногим менее метра, засмотришься по сторонам, секундное помутнение сознания, неосторожный шаг в сторону – и ты катишься вниз с обрыва, если в самом начале не успеешь за что-либо зацепиться, прежде чем падение превратится уже в неконтролируемое, а внизу в 10-15 м воды Байкала. Или острые камни, если не повезёт. Далеко не все туристы, кто приезжает на Байкал, возвращаются к себе домой, даже здесь, на этом маршруте, погибло немало людей, даже, казалось, в полне безобидных местах. Когда я спускался по серпантину к Байкалу по гребню сопки, то тропа там была шириной полтора метра, а слева и справа уклон под 40-45 градусов, где росли сосны, достаточно редко, но конца склона видно не было. Я тогда ещё подумал, что тут тоже можно скатиться при желании, и узнал у хозяйки гостиницы, где я всё время проживал, что её знакомый, не новичок в походном деле, как-то тут потерял равновесие, катился вниз по склону, так и не смог при этом зацепиться за какое-нибудь дерево, всё себе ободрал, и упал в Байкал. Я и не думал, что в конце склона там уже озеро, его не было видно за деревьями. Ему повезло, он остался в живых. Другому туристу, иностранцу, повезло меньше: он скатился по склону и упал на прибрежные скалы. В походе по КБЖД я встречал немало табличек, что «здесь трагически погиб такой-то…», но полагаю, это были больше скалолазы, хотя и на спуске к воде можно сорваться, спуски там довольно опасны. А здесь, вроде на обычной тропе, тебя всюду подстерегает опасность, надо быть просто осторожным. Горы, они красивы, там здорово, но они жестоки и не прощают беспечность. Хозяйка квартиры, где я проживал, мне рассказывала, что когда студенты (20 человек из США) ездили на экскурсию на Ольхон, один американец, когда делал селфи, сорвался со скалы, студентка-американка, проживающая с нами, была в тот момент рядом, туристы тогда разделились на группы, фотографировались в разных местах, она была очевидцем того, как это произошло… Страшно, конечно, погибнуть так в чужой стране, вдали от своей родины…
Пока это было для меня самое экстремальное путешествие, сам-то я по натуре не экстремал, да, было опасно, но это была контролируемая опасность, надо быть просто осторожным. Я, например, не боюсь высоты, могу стоять у обрыва, когда в 30 см от ноги открывается пропасть, но, естественно, учитываешь, не сыпучий ли грунт, не скользкий ли, не сдунет ли тебя ветер, есть определённая грань, за которую не следует переступать, иначе…
Дошёл в тот день к вечеру до Больших Котов, поднялся там на скалу Гребешок, что в центре посёлка, крутой 10-минутный подъём, на вершине смотровая площадка, с которой открывается обалденный вид на посёлок и озеро. Переночевав в гостинице, ранним утром отправился к весьма живописному мысу Скрипер, что находится в 4 км от посёлка (назван так по американской золотодобывающей машине, которая издавала нехилый такой скрип при работе), подъём крутой, но несложный, на вершине также есть смотровая площадка. Виды там такие, что долго не хотелось уходить, просто хотелось сидеть и созерцать окружающую тебя красоту. Дальше через перевал тропа идёт дальше вдоль берега, и сколько там ещё увлекательного впереди, но мне было пора возвращаться, в 6 вечера у меня был теплоход до Иркутска (билет на него также нужно приобретать заранее, иначе придётся добираться пешком, автомобильной дороги до посёлка нет).
Любитель пляжного футбола
23:51:11 2018-07-19
Погостив на Ольхоне, вернулся в Иркутск, в ту же гостиницу, где и проживал до конца отпуска. На следующий день отправился в 3-дневный поход по КБЖД, уникальное инженерное сооружение, что называли «золотой пряжкой стального пояса «России» (так много денег ушло на прокладку железнодорожного полотна вдоль Байкала), построили в 1902-1905 гг., 39 туннелей общей протяжённостью немногим более 9000 м, каменные виадуки, мосты через многочисленные речки, множество подпорных и улавливающих стенок, защищающих от обвалов, после строительства Иркутской ГЭС с 1956 г. 89-километровый участок железной дороги стал тупиковым, теперь по нему ходят только экскурсионные поезда да электричка «матаня» несколько раз в неделю. В первый день прошёл только 23 км, пока добрался из Иркутска до Листвянки, ждал парома до 11 часов, поэтому времени было не так много, во второй день прошёл 37 км, усталость совсем не чувствуешь (если первые два дня после прилёта в Иркутск было довольно тяжело, с непривычки, так-то я вынослив, хожу очень быстро, но не каждый ведь день проходишь большие расстояния, да ещё жара стояла да и акклиматизация сказывалась, то потом превращаешься в машину, готовую без устали шагать по многу километров ежедневно), получаешь массу впечатлений, шагал бы и дальше, но заканчивался световой день, нужно было искать ночлег, а с этим там проблемы, не везде есть лесок и нормальный спуск к воде, а спуски там крутые, грунт сыпучий, надо быть очень осторожным. Единственное, неудобно шагать по шпалам, они неприспособленны для нормальной ходьбы, естественно, и не были для этого изначально предназначены :), а после 137-го км вместо деревянных шпал (километраж здесь принято было вести от Иркутска) появились бетонные шпалы с гравием между ними, очень неприятный участок, оббиваешь ноги, обязательно нужно позаботиться о крепкой обуви. В третий день прошёл порядка 50 км, хотя планировал 40, мне надо было успеть к 6-часовой вечерней электричке, поэтому для контроля скорости у каждого километрового столба ставил таймер обратного отсчёта на 12 минут, успеть-то я успел, но, как говорят американцы, «Shit happens», шёл я с опережением графика, посетил смотровую площадку в Култуке, с которой видно весь город и окрестности, сходил на Шаманский мыс, прихожу на промежуточную станцию, с которой собирался отправиться на электричке в Иркутск, спрашиваю у железнодорожников, где она останавливается, мне говорят где, иду туда, по дороге ещё раз об этом осведомляюсь у других, мне подтверждают, стою у скамейки, расслабившись жду, вот он конец похода, сейчас поеду домой, а электрички всё нет, за товарными поездами ничего не видно, моста там, разумеется, тоже нет, тут вижу за товарником, что убегает моя электричка, мелькают лишь токоприводящие ромбики. «Oh shit!» - Я ведь пять минут назад был в правильном месте, и чего у них спрашивал, куда она прибывает, оставался бы лучше там, вот так, небольшая потеря концентрации – и всё, надо было немного пройти за товарный поезд, чтобы обозревать всю станцию и видеть прибывающие поезда. Я был просто в шоке, случилось то, чего я больше всего опасался, а электричка была последней в этот день, мне нужно было идти на основную станцию Слюдянка-1, чтобы сесть на поезд, по железной дороге это было 5 км, но дальше пулемётчики на вышках, думаю, были бы против такого моего вояжа, поэтому отправился по дороге автомобильной, подобный маршрут я не просчитывал, поскольку не планировал идти таким образом, а дорога извивалась серпантином все 10 км, на середине которого меня застал тропический ливень, который преследовал меня до самого Иркутска, точного расстояния я не знал, неопределённость и дождь – сочетание малоприятное, к 9 вечера приплёлся я на вокзал, к тому же выбрав к нему не самую короткую дорогу, и как раз вовремя: подъехал поезд, два часа в нём, наверное, были самыми ужасными в моей поездке, ноги гудели, мокрый, если бы я запланировал пройти эти 50 км за день, то было бы ничего, я бы распределил силы, но когда ты морально уже завершил путешествие, готовишься сесть в электричку, а тут после того как ты прошёл 40 км, и тебе вдруг нужно ещё шагать под проливным дождём сколько ещё непонятно, это просто ужасно, эти незапланированные 10 км меня просто доканали. Вернулся к полуночи в гостиницу, провозился до 2 ночи, собирая и просушивая вещи да готовя еду на следующий день, а в 6 утра подъём, 24-километровая прогулка по ББТ (Большая Байкальская тропа вдоль берега Байкала) до Больших Котов.
Любитель пляжного футбола
23:50:28 2018-07-19
Часть 1
Это были незабываемые 22 дня, обычно я езжу на 15 дней, но тут посчитал, что этого будет явно недостаточно для такой далёкой поездки, т.к. я являюсь донором, то добавил себе дополнительные дни к отпуску. Прилетел в Иркутск рано утром, закупил продуктов, приготовил пюре и гулял 4 дня по городу. Город очень красивый, сохранился ряд церквей 18 в., очень много старинных зданий 19 - нач. 20 в., причём ни один дом не похож на другой, каждый дом по своему уникален, не просто типичная застройка, особенно много их на ул. К.Маркса, её можно вообще сравнить с Невским проспектом, также немало их на ул. Ленина, Свердлова, Урицкого, также на примыкающих к ним улицам, несколько в стороне немало старых деревянных домов (необычны такие названия для старого сибирского города, надеюсь, вернут улицам прежние названия, как в своё время это было сделано в Великом Новгороде). Погулял по набережной, посетил краеведческий музей (отдел истории и географии), съездил в музей деревянного зодчества «Тальцы» (40 км от города), где под открытым небом расположены старинные деревянные дома и церкви, около 40 памятников архитектуры, попавших в зону затопления при строительстве Иркутской ГЭС. Часто туристы проезжают мимо Иркутска, едут сразу на Байкал, но на осмотр города нужно оставить несколько дней, оно стоит этого. К слову, в городе я снимал комнату, забронировал на букинге, было удобно, плита, холодильник, микроволновка, можно было приготовить себе еду, в кафе я не хожу (исключение сделал только тут, чтобы отведать позы – национальное бурятское блюдо, надо будет приготовить его самому), хозяйка оказалась гидом-экскурсоводом, да и я перед поездкой много читал о географии, истории города, Байкале, было очень интересно с ней беседовать, да и она сама бывала во многих местах Иркутской области. У неё же проживала студентка из США, оказывается, там тоже изучают русский язык, приехала в составе группы на лето в Иркутск, каждый день у них занятия в университете на русском языке, периодически их возят на разные экскурсии, здорово было попрактиковаться в английском языке, давно уже на нём не говорил, узнал наконец-то у носителя языка ответ на давно интересующий меня вопрос, все ли 12 времён употребляют они в своей повседневной речи. Как и думал, нет. :)
Затем отправился на Ольхон, ехать туда на автобусе почти 6 часов (билеты желательно покупать заранее на сайте автовокзала, маршрут популярный), не считая дороги, провёл там 4 полноценных дня, как я писал ранее, я планировал объехать чуть ли не весь остров на велосипеде, но это оказалось мне не по силам, поскольку дороги на острове просто жуть, отбил себе всю пятую точку, особенна ужасна так называемая гребёнка, когда идут волны на дороге, и расстояние между гребнями где-то 15 см, можете вспомнить фильм Л. Гайдая «Напарник» (который, кстати, родился в Иркутске, там у цирка ему поставлен замечательный памятник, изображающий сцену из фильма «Кавказская пленница»), сцену, когда Федя съезжает вниз по перилам, по той их части, где Шурик оторвал деревянную доску. Так, наверное, и я выглядел со стороны, тряска просто невозможная. Между прочим, я слышал о таких туристах, которые проезжали за один день до северной оконечности острова и обратно, а это ни много ни мало более 80 км, видимо, попа уже привыкла к такому обращению, я же на велосипеде езжу редко, и по таким дорогам ещё никогда не ездил, и так за раз проехал более 20 км, столько я ещё никогда не проезжал, была бы хорошая дорога, то не проблема проехать все 80 км, где были нормальные участки, я легко въезжал на горку, но эти ямы, корни, песок местами, это что-то ужасное. Туристов на острове немало, слышал английскую, немецкую речь, ну и без китайцев никуда, это ещё был не пик сезона, в июле-августе туристов там в разы больше, поэтому я решил поехать туда пораньше. Покатался на теплоходе, там есть экскурсия на весь день к острову Огой и к шаманскому источнику, вечерняя 2-часовая экскурсия вдоль берега. Даже если на берегу жара, то когда ты на воде, то надо теплее одеваться, очень холодный ветер, на мне было аж 4 комплекта одежды. Взял также две автобусные экскурсии, на север и юг острова, каждая длится почти весь день, и не пожалел, хотя изначально категорически не собирался записываться на них, но оно того стоит, с велосипедом у меня не вышло, а на микроавтобусе – местные УАЗики, «буханки», как их здесь называют, обладают отличной проходимостью – посетили практически все места, которые я собирался увидеть, там потрясающе красиво, такие виды открываются, даже не могу сказать, где красивее, на севере или юге, хотя картина там существенно отличается, это надо самому прочувствовать, увидеть своими глазами… Если когда-нибудь будете на Ольхоне, то возьмите обе экскурсии, и желательно в первой половине лета, потом будет слишком много туристов, что и нормальный снимок сделать не получится.
Любитель пляжного футбола
22:25:36 2018-06-04
a13x
19:02:32 2018-06-04
Пaвeл
20:46:22 2018-06-03
Пaвeл
20:41:53 2018-06-03
Alexander
17:14:05 2018-06-03
В этот день очередной недели
Решил я парсинг провести.
Чтоб Биг Дата не старела,
Надо новости пастить.
Скрапингом пройдусь я нежно,
По Инета адресам,
Прошерстив сайты надежно,
Стану снова "сам с усам".
Краулинг ужом проникнет
В потайные закутки.
Все он слижет, не пропустит
Связи, пиксели, скрипты.
Вот Биг Дата свежей даты,
Кому надо - поделюсь!
Налетай ко мне, ребята,
Все серьезно, не смеюсь.
Тут пароли, логи, неймы,
Кто - куда - зачем ходил,
Тут обнова всей недели,
Сутки целые удил.
Любитель пляжного футбола
19:55:39 2018-06-02
Раньше я тоже увлекался астрономией, изучал по книгам, что у нас были дома, серьёзные книги, мой дядя той наукой увлекался. Но мои знания астрономии остались где-то на уровне 70-х годов XX в., когда и были написаны те книги. :) Новые книги я не читал, как-то потом перестал интересоваться, в принципе, у меня есть базовые основополагающие знания, думаю, не так-то и много нового с тех пор появилось. Земля, как и раньше, вокруг Солнца вращается. :) Разве что зачем-то кол-во планет сократили, чукчи. :) По мне это то же самое, что милицию у нас в полицию переименовали. Один пшик.
@Шалтай_Александр_Болтай, спасибо за поздравления! Вернусь, обязательно расскажу поподробнее, только пройду акклиматизацию. Поеду на три недели, так у меня отпуск 2 недели, но я донор, кровь сдаю, так что прибавил себе к отпуску выходные. Нагрузки будут серьёзные. Включил в план несколько безумных идей, которые мне поначалу показались полным бредом, :) но потом я пришёл к выводу, что они вполне реализуемы, нужно лишь разработать маршрут. Кстати, я уже более 20 лет не был на юге, меня всё на север тянет или в места, где природа посуровее. :)
Будет потрясающе интересно, мне уже сейчас, хотя я ещё там никогда не бывал, хочется ещё когда-нибудь туда снова приехать, потому что хотя я уезжаю туда на 3 недели, но и этого не хватит, чтобы всё увидеть, что я хотел, нужно ещё столько же времени, чтобы помимо всего прочего исследовать и восточный берег Байкала. Пока готовлюсь в физическом плане, постараюсь вернуться и не пойти на ужин хозяину. :)
ArtemiyKurs
19:04:46 2018-06-02
zsergey
08:40:45 2018-06-02
Шалтай Александр Болтай
23:09:48 2018-06-01
Десятки оценили выпуск, сотни прочитали, а тысячи даже не открывали ... Да, такова жизнь.
Шалтай Александр Болтай
22:45:12 2018-06-01
...Но всем предлагаю: «Всегда Dr.Web!...
Шалтай Александр Болтай
22:39:25 2018-06-01
Шалтай Александр Болтай
22:35:17 2018-06-01
Шалтай Александр Болтай
22:33:41 2018-06-01
"Я Астрономию бы выучил только за то ..." Какой русский не любит астрономию?
tigra
22:21:42 2018-06-01
tigra
22:17:03 2018-06-01
tigra
22:13:32 2018-06-01
Шалтай Александр Болтай
22:13:20 2018-06-01
Шалтай Александр Болтай
22:09:05 2018-06-01
А мне нравиться, очень красивый ник.
tigra
22:07:42 2018-06-01
Шалтай Александр Болтай
22:06:22 2018-06-01
Шалтай Александр Болтай
22:03:09 2018-06-01
tigra
22:01:33 2018-06-01
tigra
21:59:51 2018-06-01
Шалтай Александр Болтай
21:58:26 2018-06-01
Шалтай Александр Болтай
21:55:12 2018-06-01
Шалтай Александр Болтай
21:52:36 2018-06-01
Например, недавно китайцы взломали сайт Пентагона, каждый попробовал по паролю.
tigra
21:50:00 2018-06-01
В...а
21:47:44 2018-06-01
tigra
21:46:48 2018-06-01
Шалтай Александр Болтай
21:45:49 2018-06-01
Поздравляю всех с Днем защиты детей!
kozinka.ru
21:44:24 2018-06-01
vla_va
21:37:27 2018-06-01
tigra
21:25:05 2018-06-01
Dvakota
21:14:29 2018-06-01
Александр
21:11:33 2018-06-01
НинаК
21:09:57 2018-06-01
Любитель пляжного футбола
20:45:10 2018-06-01
Littlefish
20:39:34 2018-06-01
anatol
20:37:16 2018-06-01
Littlefish
20:33:31 2018-06-01