A
ArazDec. 16, 2019, 8:39 a.m.

QT парсинг страницы с автоподгрузкой

QT, GET, POSt

День добрый.
Прошу помочь, каким методом можно подгружать данные с web страницы, которые постоянно обновляются.
Допустим страница: https://ru.investing.com/currencies/single-currency-crosses
Интересуют котировки (наименование, текущий курс).
Данные по текущему курсу постоянно в движении.
Делаю сейчас гет запросом с таймаутом в 10 секунд, иначе блокируется ip.
Но нужно чаще, а точнее в режиме онлайн - изменилось на странице - ловится программой.
Заранее благодарю.

We recommend hosting TIMEWEB
We recommend hosting TIMEWEB
Stable hosting, on which the social network EVILEG is located. For projects on Django we recommend VDS hosting.

Do you like it? Share on social networks!

1
Evgenii Legotckoi
  • Dec. 16, 2019, 9:46 a.m.
  • (edited)

Добрый день.

И вот как вы себе представляете парсинг страницы в режиме реального времени когда на ней что-то изменилось? Чтобы понять, изменяется ли что-то на странице, нужно запускать её в браузере, чтобы могли работать скрипты, которые отвечают за изменение, больше никак. Для любого другого вида получения информации онлайн с этого сайта вам нужно иметь доступ к API сайта, и чтобы это API поддерживало какой-либо протокол для обмена сообщениями о изменениях котировок в режиме реального времени. Либо это websocketы, обычные сокеты, либо специализированный протокол поверх тех же сокетов в конечном итоге. В любом случае нужен доступ к API, если оно вообще имеется на сайте. А "онлайн" парсинг, если на этом сайте ещё и блокировка настроена при частых запросах к странице, то это из области фантастики.

Максимум, что вы можете сделать - это использовать WebEngine из библиотеки Qt, запускать внутри порграммы этот браузерный движок и пытаться выполнять javascript на той странице через этот движок, но там скорее всего тоже будут проблемы с защитой сайта от частого парсинга. Так что довольно дурацкая задача.

Найдите лучше сайт, который предоставляет нормальное открытое API для такого функционала. (Хотя найти такой сайт с реалтаймом тоже задача нетривиальная)

    Comments

    Only authorized users can post comments.
    Please, Log in or Sign up
    Дмитрий

    C ++ - Test 004. Pointers, Arrays and Loops

    • Result:60points,
    • Rating points-1
    Дмитрий

    C++ - Тест 003. Условия и циклы

    • Result:92points,
    • Rating points8
    d
    • dsfs
    • April 26, 2024, 4:56 a.m.

    C ++ - Test 004. Pointers, Arrays and Loops

    • Result:80points,
    • Rating points4
    Last comments
    k
    kmssrFeb. 8, 2024, 6:43 p.m.
    Qt Linux - Lesson 001. Autorun Qt application under Linux как сделать автозапуск для флэтпака, который не даёт создавать файлы в ~/.config - вот это вопрос ))
    Qt WinAPI - Lesson 007. Working with ICMP Ping in Qt Без строки #include <QRegularExpressionValidator> в заголовочном файле не работает валидатор.
    EVA
    EVADec. 25, 2023, 10:30 a.m.
    Boost - static linking in CMake project under Windows Ошибка LNK1104 часто возникает, когда компоновщик не может найти или открыть файл библиотеки. В вашем случае, это файл libboost_locale-vc142-mt-gd-x64-1_74.lib из библиотеки Boost для C+…
    J
    JonnyJoDec. 25, 2023, 8:38 a.m.
    Boost - static linking in CMake project under Windows Сделал всё по-как у вас, но выдаёт ошибку [build] LINK : fatal error LNK1104: не удается открыть файл "libboost_locale-vc142-mt-gd-x64-1_74.lib" Хоть убей, не могу понять в чём дел…
    G
    GvozdikDec. 18, 2023, 9:01 p.m.
    Qt/C++ - Lesson 056. Connecting the Boost library in Qt for MinGW and MSVC compilers Для решения твой проблемы добавь в файл .pro строчку "LIBS += -lws2_32" она решит проблему , лично мне помогло.
    Now discuss on the forum
    G
    George13May 7, 2024, 12:27 a.m.
    добавить qlineseries в функции в функции: "GPlotter::addSeries(QString title, QVector &arr)" я вызываю метод setChart(...), я в конструктор передал адрес на QChartView элемент
    BlinCT
    BlinCTMay 5, 2024, 5:46 a.m.
    Написать свой GraphsView Всем привет. В Qt есть давольно старый обьект дял работы с графиками ChartsView и есть в 6.7 новый но очень сырой и со слабым функционалом GraphsView. По этой причине я хочу написать х…
    PS
    Peter SonMay 3, 2024, 5:57 p.m.
    Best Indian Food Restaurant In Cincinnati OH Ready to embark on a gastronomic journey like no other? Join us at App india restaurant and discover why we're renowned as the Best Indian Food Restaurant In Cincinnati OH . Whether y…
    Evgenii Legotckoi
    Evgenii LegotckoiMay 2, 2024, 2:07 p.m.
    Мобильное приложение на C++Qt и бэкенд к нему на Django Rest Framework Добрый день. По моему мнению - да, но то, что будет касаться вызовов к функционалу Андроида, может создать огромные трудности.
    IscanderChe
    IscanderCheApril 30, 2024, 4:22 a.m.
    Во Flask рендер шаблона не передаётся в браузер Доброе утро! Имеется вот такой шаблон: <!doctype html><html> <head> <title>{{ title }}</title> <link rel="stylesheet" href="{{ url_…

    Follow us in social networks