Парсер - гэта адказ на правільна пастаўленае пытанне

Парсінга атрымаў добрую практыку, стаў складнікам элементам пошуку, назапасіў вопыт бяспечнага выкарыстання рэгулярных выразаў і стаў прычынай новых ідэй. Проста аналізаваць кантэнт сайтаў ўжо не так актуальна, як раней. Напрыклад, ад пошукавай выдачы карыстальнік чакае большага, чым проста пераліку сайтаў, дзе сустракаецца жаданае ключавое слова.

Пошукавыя машыны ўжо навучыліся не толькі спрагаць ключавыя словы, але і здабылі ўяўленні аб кантэксце ў натуральным сэнсе, а не ў сэнсе зместу вэб-старонкі. Якасць пошукавай выдачы набыло рэальную практычную каштоўнасць.

Формулы пошуку і логіка разбору

Рэгулярныя выразы – гэта дзіўныя і нязвыклыя формы запісу таго, што патрабуецца знайсці і разабраць па палічках. Памылка ў рэгулярным выразе абыходзіцца вельмі дорага. Але рэгуляркі хутка заваявалі давер распрацоўшчыкаў, якія навучыліся карыстацца імі бяспечна і практычна. Пры гэтым пазіцыі звычайных радковых аперацый ніколькі не пахіснуліся.

Парсінга стаў звыклым і запатрабаваным. Парсер сайтаў – гэта любы збор і аналіз інфармацыі. Гэта можа быць іншы прадукт або алгарытм, напісаны ўласнымі сіламі, для канкрэтнай вобласці прымянення. Гэта запатрабаванае рашэнне для аналізу цэн на аналагічныя тавары ў канкурэнтаў. Гэта збор інфармацыі па новым праграмным прадуктам. Гэта аналіз дынамікі курсаў біржы і многія іншыя задачы.

Парсер сайтаў – гэта імкненне адлюстроўваць на сваім вэб-рэсурсе тое, да чаго прывык наведвальнік. Аналіз і пошук ключавых момантаў, якія робяць канкурэнтаў паспяховымі, і прымяненне гэтай інфармацыі для дасягнення сваіх мэтаў.

Патокі інфармацыі і аб'ём цікавасці наведвальнікаў

Інфармацыя, як лавіна – расце ў аб'ёме па ходзе руху, а ў кантэксце змяняецца бесперапынна. Але застаецца даступнай і тая інфармацыя, якая ўжо састарэла. Інтэрнэт набыў памяць, то ёсць пошукавыя выдачы памятаюць мінулае ані не горш, чым знаходзяць цяперашні.

Рэсурсы інтэрнэту старэюць, але не знікаюць. Агульная інфармацыйная карціна складваецца, як скальныя пароды, пластамі. Пры гэтым няма ніякай гарантыі, што ў пэўнай кропцы інтэрнэту дзясятак новых рэсурсаў сумніўнага ўтрымання закрыў сабой сапраўды састарэлы кантэнт.

Гісторыя ІТ-тэхналогій ведае мноства падзей, якія былі неапраўдана забытыя, і для адраджэння цікавасці да іх спатрэбілася час. Сёння парсер – гэта не проста разбор палётаў, гэта і ацэнка сітуацыі, і вызначэнне кропак актуальнасці ў агульным патоку інфармацыі.

Аб'ём цікавасці наведвальнікаў да той ці іншай тэме – выдатная ідэя для разбору інтарэсаў. Абагульняючы дынаміку руху наведвальніка па ўласным рэсурсу або прапаноўваючы наведвальніку пытанне, прапанова, спасылку або іншы варыянт прыцягнення ўвагі для вызначэння верагоднай рэакцыі, распрацоўшчык пераходзіць на іншы ўзровень працы. Парсер – гэта ўжо не разбор кантэнту, а даследаванне свежай рэакцыі на канкрэтныя ініцыятывы.

Калі раней парсінга проста шерстил аб'ёмы інфармацыі, то сёння ён прапануе пытанні і даследуе адказы на іх.

Кропкі актуальнасці ў патоку інфармацыі

ААП, аблокі, штучны інтэлект, абарона ад DDoS-нападаў, але дзе гарантыя, што менавіта гэта актуальна і запатрабавана. Усё пералічанае і многае іншае і так вядома, у той ці іншай меры выкарыстоўваецца, і парсінга па такіх фразах не адкрые нічога новага.

Але ААП у прыватнасці гэта не проста JavaScript або PHP. І ў тым, і ў іншым мове ёсць сур'ёзныя адрозненні, якія істотныя, выдатна дапаўняюць адзін аднаго і не супярэчаць ў выкарыстанні. PHP-парсер можа перадаваць дадзеныя ў JavaScript браўзэра і атрымліваць назад рэакцыю наведвальніка.

Наведвальнік – гэта чалавек, і гэты чалавек нясе ў сабе фактар актуальнасці, яго дзеянні ў любым выпадку выказваюць яго зацікаўленасць у вырашэнні канкрэтнай праблемы, пошуку інфармацыі па канкрэтнай задачы.

Сучасны парсер – гэта не рэгулярны выраз, гэта – спосаб выкарыстоўваць наведвальніка (чалавека) для дасягнення канкрэтнай мэты. Хай шукае чалавек, а не машына. Навошта марнаваць сілы і прыдумляць мудренные механізмы разбору, калі натуральны інтэлект сам па сабе хоча дапамагчы следству і дазнанні.

Вызначэнне пункту актуальнасці ў чалавека атрымаецца значна лепш, чым у любога самага хуткага, але штучна-разумнага кампутара. Да рэальна разумных машын прагрэс яшчэ не дайшоў, дык чаму б не выкарыстоўваць натуральныя магчымасці чалавека?

Аракулы і Oracle

Медыумы ў жыцці і праграмаванні сустракаюцца па гэты дзень: містыка вечная і запатрабаваная. Oracle рэальна існуе: прайшоўшыцяжкі і значны шлях, Oracle стварыў плеяду выдатных праграмных прадуктаў, выканаў вялікі аб'ём якаснай працы. Гэта выдатна, але ў пачатку вылічальнай эры ідэі, да якіх прыйшоў Oracle сёння, ужо былі, але іх незаслужана забыліся.

Сёння таксама ёсць ідэі. І на гэты раз аўтарытэт лідэра можа іх таксама зачыніць.

Сёння парсер – гэта аб'ектыўны інструмент аналізу сітуацыі, і не варта апеляваць да чыста праграмнага рашэння. Распрацоўшчык павінен праявіць інтуіцыю перш, чым пакладзе ў аснову алгарытму пошук патрэбнага рашэння.

Разбіраць гіпертэксту або натуральны тэкст сёння можа нават школьнік, нават не напісаўшы ні адной радкі кода. Але гэта будзе статычны варыянт разбору. Гэта будуць алгарытмы учорашняга дня.

Сёння парсер – гэта ідэя даследаванні ідэй, а не статычнага інфармацыйнага баласта. Інфармацыі заўсёды акіян, але мэта карабля - даставіць груз і пасажыраў, а не плаваць па хвалях прагрэсу і інфармацыйных з'яў.

У вольны ад асноўнай працы час можна збудаваць парсер "ВКонтакте" і знаходзіць задавальненне ад пошуку якіх-небудзь рашэнняў. Але там не тое грамадства, яно не дапаможа знайсці рашэнне, як стварыць ўскоснае спадчыну ў рэалізацыі ААП на мове PHP і вызначыць канцэпцыю існавання сістэм аб'ектаў на серверы ў моманты адсутнасці наведвальніка, ініцыяваць яе стварэнне.

А гэта, між іншым, вельмі актуальна, хоць і далёка не ўсім зразумела.

Не ўсе актуальна, што зразумела

Інтэлект у сваім развіцці заўсёды праходзіць тры стадыі і тармозіць на чацвёртай. Першыя тры:

• сітуацыя – сітуацыйны інтэлект;
• рэпрадукцыя – репродуцирующий інтэлект;
• контекстуальный інтэлект – рашэнне рэальных задач.

Чацвёртая стадыя натуральнага інтэлекту – уменне прымяняць актыўныя веды на новых тэрыторыях. Там, дзе не ступала нага чалавека і прагрэсу. Гэта цяжка, але магчыма. Тэорыя рашэння вынаходніцкіх задач больш за трыццаць гадоў таму, паказала рэальнасць і практычнасць трансфармацыі ведаў з адной вобласці ў іншую.

Гэта было тады рэальна значная падзея і, верагодна, гэта добрая нагода сёння ўспомніць пра гэта.