Не получается спарсить страницу

Форумы Помощь по пакетуНе получается спарсить страницу ← Ctrl12Ctrl →

Этот топик читают: Гость

Ответов: 41

Рейтинг: 3

#1: 2012-11-16 19:10:52 ЛС | профиль | цитата

Здравствуйте!
Есть такой код:
code_29545.txt
Но по каким то причинам он абсолютно ничего не выдаёт в ответ...
Изучал запросы при помощи программы "Charles", но увы, никаких результатов.
Буду рад любой помощи. Спасибо.

карма: 1

файлы: 1

code_29545.txt [933B] [206]

Ответов: 274

Рейтинг: 47

#2: 2012-11-16 19:21:45 ЛС | профиль | цитата

добавь в конец запроса два перевода строки

карма: 0

Ответов: 41

Рейтинг: 3

#3: 2012-11-16 19:27:24 ЛС | профиль | цитата

Laetar, не могли бы поподробнее? Не совсем понял.

карма: 1

Гость

Ответов: 17029

Рейтинг: 0

#4: 2012-11-16 19:36:47 правка | ЛС | профиль | цитата

Редактировалось 2 раз(а), последний 2025-01-11 06:29:46

карма: 0

Ответов: 274

Рейтинг: 47

#5: 2012-11-16 19:39:23 ЛС | профиль | цитата

Типа такого:

GET /football/ HTTP/1.1
Host: sports.betfair.com
User-Agent: Mozilla/5.0
Accept-Encoding: deflate
(пустая строка)
(пустая строка)

карма: 0

Ответов: 41

Рейтинг: 3

#6: 2012-11-16 19:42:38 ЛС | профиль | цитата

Но ведь в ответ приходят непонятные символы - https://dl.dropbox.com/u/48193653/2012-11-16_214204.png

карма: 1

Ответов: 274

Рейтинг: 47

#7: 2012-11-16 19:57:51 ЛС | профиль | цитата

где то был компонент zlib для распаковки gzip

карма: 0

Ответов: 41

Рейтинг: 3

#8: 2012-11-16 20:02:44 ЛС | профиль | цитата

Допустим вот он:
Add(ZLIB,6942152,343,175)
{
}
Но, каким бы макаром я его не пытался привинтить, у меня ничего путнего не вышло.

карма: 1

Ответов: 274

Рейтинг: 47

#9: 2012-11-16 20:06:15 ЛС | профиль | цитата

вот нашел у себя, на форуме где то тоже должен быть

карма: 0

файлы: 1

zlib.rar [134.7KB] [100]

Гость

Ответов: 17029

Рейтинг: 0

#10: 2012-11-16 20:30:03 правка | ЛС | профиль | цитата

Редактировалось 2 раз(а), последний 2025-01-11 06:29:47

карма: 0

Ответов: 294

Рейтинг: 64

#11: 2012-11-16 20:38:15 ЛС | профиль | цитата

Либо снять в запросе gzip, как выше советовали, либо вообще по- другому решить вопрос (если куки выдирать не надо для дальнейших действий):


Add(HTTP_Get,7040593,266,133)
{
 URL="http://sports.betfair.com/football/"
 link(onDownload,6251193:doConvert,[])
}
Add(StreamConvertor,6251193,315,140)
{
 Mode=6
 link(onResult,14323921:doCharset,[])
}
Add(Charset,14323921,364,140)
{
 Type=7
}

карма: 0

Ответов: 41

Рейтинг: 3

#12: 2012-11-16 20:46:52 ЛС | профиль | цитата

Quest, такой вариант не подходит, т.к. он сеть почти в два раза больше нагружает чем мой пример.
Вот, по моему получилось...
code_29548.txt
Спасибо за подсказку.

карма: 1

файлы: 1

code_29548.txt [984B] [223]

Ответов: 1376

Рейтинг: 197

#13: 2012-11-16 20:56:15 ЛС | профиль | цитата

minos писал(а):

code_29548.txt

тоже полметра скачал
code_29550.txt
не мало...

карма: 1

файлы: 1

code_29550.txt [1.4KB] [384]

Ответов: 41

Рейтинг: 3

#14: 2014-08-21 17:52:20 ЛС | профиль | цитата

Здравствуйте.
Придётся оживить тему, т.к. без "Accept-Encoding: gzip" уже не обойтись, попадаются слишком тяжёлые страницы.
Пробовал "ZlibOLD", но к сожалению он отказывается парсить допустим вот этот сайт "oddsportal.com", да и Яндекс в примере уже не работает.
Кто чем может помочь?
Спасибо.

карма: 1

Ответов: 41

Рейтинг: 3

#15: 2014-08-24 17:53:35 ЛС | профиль | цитата

Эмм..., никто не сможет помочь?

карма: 1

Форумы Помощь по пакетуНе получается спарсить страницу ← Ctrl12Ctrl →


Сообщение ...
Прикрепленные файлы (файлы не залиты)