Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Рекурсивная загрузка веб-сайтов; оффлайн-браузеры (OfflineExplorer, TeleportPro, HTTrack)

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33

Открыть новую тему     Написать ответ в эту тему

Orlon



Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Сравниваем возможности и недостатки оффлайн-браузеров:
OfflineExplorer - (Pro/Potable/Enterprise)
Teleport - (Pro-$50/Ultra-$200/VLX-$2000/Exec-$2500)
 
WebCopier, Webzip, SXBandMaster, WebTransporter, HTTrack, Wget, Wysigot...
Что лучше?
 
ТАБЛИЦЫ СРАВНЕНИЯ :
 
1. по версии разработчика OfflineExplorer цитата
2. по версии автора статьи на iXBT.com
 
Путеводитель по offline-браузерам подробная серия статей на iXBT.com
 
Родственные темы:
Web Organizer-ы (CyberArticle, NetCollector, etc.,)
Мониторинг обновления web-сайтов
RSS Feed Readers | News Aggregators
Сохранение составного flash
rutv.ru Скачиваем потоковое видео

Всего записей: 549 | Зарегистр. 08-01-2002 | Отправлено: 03:21 30-01-2002 | Исправлено: ASE_DAG, 02:41 08-09-2011
UriF

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Есть ли какие-то новые программы, альтернативы старым?  Сейчас полез (надо было скачать сайт) и выяснил, что HTTrack не обновляется с 2017, а Teleport аж с 2015 (!!!).  Скатываю я сайты крайне редко, может раз в 1 или 2 года... Или сейчас это мало кому надо?

Всего записей: 821 | Зарегистр. 14-06-2004 | Отправлено: 03:57 05-02-2020 | Исправлено: UriF, 04:00 05-02-2020
Petrik_Pjatochkin



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Подскажите пожалуйста как скачать эту страничку Перемешивание букв, чтобы скрипт работал оффлайн?

Всего записей: 771 | Зарегистр. 04-12-2007 | Отправлено: 15:04 22-05-2020
LevT



Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

 
Подскажите на уровне грубой идеи, потому что задача мне представляется непосильной.
Но решать её надо
 
Есть учетка в фейсбуке, цель достать прямые ссылки на свои комментарии.
 
Что надумывается мне:
Можно получить выгрузку в HTML или JSON тут https://www.facebook.com/dyi/?referrer=yfi_settings
 
Онлайн доступ в том же виде, как к выгрузке  
https://www.facebook.com/your_information/, отсюда зайти в раздел Comments  
виден Activity Log
 
У каждого события в этом логе есть timestamp, который ведёт на permalink той записи, к которой относится комментарий
 
Под этой записью у каждого коммента тоже вроде как есть timestamp  
Ссылка с него ведёт на https://www.facebook.com/username/posts/postID?comment_id=commentID
 
 
Засада в первую очередь в том, что ФБ показывает ссылки так, как сам считает нужным - визуально очень сильно мимо и хрен поймёшь, куда именно ведёт ссылка.
 
Может кто-то знает более прямой способ сослаться на ФБ комментарий?
 

Всего записей: 17734 | Зарегистр. 14-10-2001 | Отправлено: 16:56 11-06-2020
LevT



Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Короче в выгрузке фейсбучных комментариев есть timestamps
 

Код:
 
    {
      "timestamp": 1590232095,
      "data": [
        {
          "comment": {
            "timestamp": 1590232095,
            "comment": "\u00d0\u009f\u00d0\u00be-\u00d0\u00bc\u00d0\u00be\u00d0\u00b5\u00d0\u00bc\u00d1\u0083, \u00d1\u008f  
 

 
В HTML эти timestamps кликабельны и ведут на контекст комментария,  
   но URI разные в HTML выгрузке и в ActivityLog
 
В Activity Log они появляются по hover,    
в HTML выгрузке они сразу есть, но видны только в отрендеренной браузером
в JSON выгрузке это id, и непонятно в каком контексте они уникальны сами: не факт, что в глобальном, вероятнее что в юзерском
 
 
1) Дайте всё остальные возможные способы получить контекст ФБ комментария.  
 
Потому что я до сих пор не нашёл как сослаться именно на комментарий:  
ФБ всегда показывает комментируемую запись с комментариями, свёрнутыми по разумению своего "искусственного интеллекта".
 
 
2) Может быть, есть какой-то независимый генератор ссылок на контекст timestamp?

Всего записей: 17734 | Зарегистр. 14-10-2001 | Отправлено: 11:09 12-06-2020 | Исправлено: LevT, 11:31 12-06-2020
ChernavinOleg

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
LevT
 
timestamp - всего лишь дата выставления комментария. Не является ссылкой. Кодируется яваскриптом в Unix формате. Подробнее - https://developer.mozilla.org/en-US/docs/Web/JavaScript/Reference/Global_Objects/Date/now
 
Добавлено:
Погуглите API Facebook-а, другие источники. Сходу много чего находится. Например, https://qna.habr.com/q/487584

Всего записей: 240 | Зарегистр. 13-06-2016 | Отправлено: 15:19 12-06-2020
Zuh



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Всем добра.
Никак не могу победить куки.  
Сайт с авторизацией. Первая страница скачивается, остальное требует авторизации.  
Галка использовать куки ие стоит.
Куда копать?

Всего записей: 168 | Зарегистр. 18-12-2004 | Отправлено: 18:53 15-11-2020
santias



Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Подскажите, пожалуйста, как можно скачать все страницы PDF-документа (715 ссылок) одним скачиванием с данного источника:
https://gato.tularegion.ru/object/283784 =>
=> https://gato.tularegion.ru/imageViewer/img?url=mZaTmpGekprCL2wvby9dL2Ggxsygzt/Rj5uZ2ZyKjY2akYuvnpiaws7ZmoeLwtGPm5nZkJ2VmpyLws3HzMjHy9mei4uNwsvGx8vZjJqNlp6Tws7Ly83Jzs/Izsc=

Всего записей: 715 | Зарегистр. 12-04-2016 | Отправлено: 01:06 26-04-2021
Shangry

Full Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Надо скачать сайт, который живет на протоколе https.
Полазил по Интернет, нашел приличную кучку программ, начал их пробовать. Результаты пока - сплошные обломы.  
 
Teleport Pro (версия 1.72), выпущена в 2015 году. Более старших версий пока не нашел.
Запускаю новый проект, сделанный через встроенный мастер создания проектов. В ответ получаю:
«1 files were reading, but no new files matching this projects retrieval specifications were found,  and no old files were updated»
«1 файлы были прочитаны, но никаких новых файлов, соответствующих этим спецификациям поиска проектов, найдено не было, и никакие старые файлы не были обновлены».
Основная странность - эта же программа, этой же версии, этот же сайт прошлым летом скачала без проблем. Все скачалось, всё работает. А вот в этом году - облом.
 
Cyotek WebCopy (версия 1.9.0.822), выпущена в 2021 году.
При запуске проекта появляется сообщение:
«The underlying connection was closed: could not established trust relationship for the SSL/TLS secure channel».
«Базовое соединение было закрыто: не удалось установить доверительные отношения для защищенного канала SSL/TLS».
 
MetaProducts Offline Explorer Enterprise (версия 8.3), выпущена в 2022 году.
После запуска проекта выдает строчку "Connecting to host https://historykorolev.ru/". И на этой строчке может висеть хоть полдня, дальше не двигается.  
 
То, что не всякая программа может скачать HTTPS-сайт - это понятно. Cyotek WebCopy как раз на этом и обламывается. Но для Teleport Pro и Offline Explorer здесь вроде проблем не должно быть.
Однако тоже не могут скачать.

Всего записей: 474 | Зарегистр. 27-10-2006 | Отправлено: 12:05 20-01-2023
ChernavinOleg

Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Shangry
 
Offline Explorer 8.4 - загружается нормально.  
 

Всего записей: 240 | Зарегистр. 13-06-2016 | Отправлено: 12:12 20-01-2023
vekozl



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Пожалуйста, подскажите, какая программа сумеет сохранить страницу MagicPoser для полноценной работы офлайн?

Всего записей: 47 | Зарегистр. 23-10-2023 | Отправлено: 00:33 25-12-2023
ValidolX

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Note: Teleport Pro can retrieve and explore only files with HTTP (World Wide Web) and FTP (File
Transfer Protocol) addresses, and files on a local or network drive. Teleport Ultra and Teleport VLX can
also retrieve files from secure servers (those with HTTPS addresses).

Всего записей: 1823 | Зарегистр. 22-07-2001 | Отправлено: 11:52 09-06-2024
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33

Компьютерный форум Ru.Board » Компьютеры » Программы » Рекурсивная загрузка веб-сайтов; оффлайн-браузеры (OfflineExplorer, TeleportPro, HTTrack)


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru