TwebBrowser и прочее. Подключаться к браузерам
ВладОшин © (29.06.20 12:07)
Накопилось много всяких парсеров, которые работают с IHtmlDocument2
Который получается либо из компонента TwebBrowser, либо через запуск самого браузера , через класс TInternetExplorer (SHDocVw), и соединение с ним.
Очень удобно парсить DOM через классы в unit MSHTML
Но вот всё больше сайтов начинают оказывать IE. Просто ничего, пустой экран белый или предупреждение - только Хром/FF нужен.
Вопрос.
Как бы что-то такое поставить/скачать, что бы было также просто достучаться до модели DOM загруженной странички?
ВладОшин © (29.06.20 12:16) [1]
пробовал TChromium, 3 версия исходников с хабра.
Работает. Но странно, при закрытии AV вылетает. И не понял как DOM получить.
например, IE не заходит
https://vk.com
заходит и чистый экран на webim.ru (там статистика)
У них API есть, я его изучил, накатал тесты, а там меньше, чем менеджер видит из браузера. Написал в поддержку - сказали, все правильно, все по API не дают..
Нужен хороший метод парсинга в общем, по зарез )
megavoid © (30.06.20 16:48) [2]
nodejs + selenium
ВладОшин © (03.07.20 08:51) [3]
> megavoid © (30.06.20 16:48) [2]
> nodejs + selenium
Сложно? Сами пробовали?
ВладОшин © (03.07.20 09:04) [4]
не, конечно, почитал сам. Но тут как.. хотелось бы всё это сделать как службу, и сразу заливать в БД mssql.. В общем, все как сейчас работает и только письма получать сайт1 - Ok|Error, сайт2 - Ok|Error
Можно так с selenium?
megavoid © (08.07.20 16:02) [5]
Несложно, именно так и парсю сайты последние несколько лет. Только мне больше нравится puppeteer, а не selenium.
Node умеет mssql. Node, грубо - это как delphi, только javascript, а selenium или puppeteer - это как TChromeBrowser.
Единственно что, не уверен, умеет ли node делать службы.
Разрешается использование тегов форматирования текста:
<b>жирный</b> <i>наклонный</i>
<u>подчеркнутый</u>,
а для выделения текста программ, используйте <code> ... </code>
и не забывайте закрывать теги! </b></i></u></code> :)
Наверх 
Чтобы не потерять эту дискуссию, сделайте закладку