Я как бы новичок в сетевых технологиях
Нужно спарсить базу товаров на сайте
Вроде бы я заполнял там какую-то форму на днях

Если в браузере иду по этой ссылке
http://www.kaufland.de/Home/02_Sortiment/K-Classic/Neu_im_Sortiment/index.jsp
то имею скриншот: http://imagepost.ru/?v=screen_104.JPG

А если я по http закачиваю страницу, то получаю: http://zalil.ru/32828692
Или по скриншоту так: http://imagepost.ru/?v=screen_105.JPG
то есть ничего

помогите пожалуйста разобраться с ситуацией
нужно очень

> А если я по http закачиваю страницу, то получаю

Читай про каскадные таблицы стилей (CSS).

А потом про javascript.

> Омлет ©   (06.03.12 10:39) [2]
читай вопрос
я спросил "помогите". А не "отправьте меня на теоретические курсы"
Если есть конкретное место на которое стоит обратить внимание - укажи. Если нужны какие-то дополнительные запросы - укажи где они и каким образом в моём случае обработать.

дело не в том, что страница теряет во внешнем виде
дело в том, что контент иной

> DevilDevil  (06.03.2012 10:53:04)  [4]

А чем ты недоволен, запрашиваешь разный контент, разный и получаешь.

по
> http://zalil.ru/32828692

находится ТОЛЬКО html (css, javascript отсутствуют)!

test

тебе либо все тащить с сайта в локальную папку, либо поправь ссылки в http://zalil.ru/32828692 с относительных путей на абсолютные...

и еще:

> А если я по http закачиваю страницу

как скачивал?

> А чем ты недоволен, запрашиваешь разный контент, разный
> и получаешь.

в каком смысле ?
я иду по той же ссылке и ожидаю список товаров. Но его нет

> brother ©   (06.03.12 11:53) [7]
дело в том, что я не получаю списка товаров, какой мне нужен!
закачиваю через InternetConnect/HttpOpenRequest/HttpSendRequest
несколько простых сайтов уже спарсил

> несколько простых сайтов уже спарсил

Вот! это где контент был сразу доступен, а в случае [0] контент, после загрузки основной html страницы, еще подгружается через (я подозреваю) Ajax или подобное, но тк. ты не загрузил и не
выполнил загрузки javascript, то ты и видишь другое, чем на оригинальном сайте

> Я как бы новичок в сетевых технологиях

не в сетевых, а веб...

> выполнил загрузки javascript, то ты и видишь другое, чем
> на оригинальном сайте

хорошие слова
но что делать то ?

если сложно, то грузи и кликай в баузере, а потом уже и смотри на содержимое...

> brother ©   (06.03.12 12:21) [14]

не хочу
хочу отправлять и загружать запросы, закачивать данные
мне кажется ты сам не в теме

О_о  Удачи!

> DevilDevil  (06.03.2012 12:07:10)  [10]

По какой ссылке идешь, никакого кода не видать

> хочу отправлять и загружать запросы, закачивать данные

Не хочешь не надо, делай сам всю работу, которую делает браузер.

> Anatoly Podgoretsky ©   (06.03.12 12:41) [18]

зачем для пары запросов и функций использовать браузер ?

> По какой ссылке идешь, никакого кода не видать
в каком смысле ?

> дело в том, что я не получаю списка товаров, какой мне нужен!

О каком списке речь? Там и там одно и то же, по-моему.

> Омлет ©   (06.03.12 15:17) [20]

я для этого и приводил ссылки
если я в браузере иду сюда: http://www.kaufland.de/Home/02_Sortiment/K-Classic/Neu_im_Sortiment/index.jsp
то получаю список товаров: http://imagepost.ru/?v=screen_104.JPG

Если закачиваю страницу программными средствами, то получаю такую страницу: http://zalil.ru/32828692
то есть БЕЗ СПИСКА товаров

Вопрос прежний. Как программно дойти до этого списка товаров ?

> DevilDevil ©   (06.03.12 15:26) [21]
> то получаю список товаров: http://imagepost.ru/?v=screen_104.JPG

Когда перехожу по ссылке - появляется всплывающее окошко (что-то там просят ввести), закрываю его - появляется еще одно с каким-то сообщением - тоже закрываю. Нет у меня списка товаров в браузере. Расскажи, как получить.

> Омлет ©   (06.03.12 16:30) [22]

ага !
то, что нужно !
первое поле: 32105
второе: Bad Salzuflen

!!!

> первое поле: 32105
> второе: Bad Salzuflen

Ну ввел, нажал ентер - дальше какие-то списки, адреса. Список товаров так и не удалось получить. Не понимаю я по-ихнему.

если про окно в центре, то там аякс, подгружаются данные непосредственно из страницы, ссылки типа, ну и содержимое можно посмотреть...
http://213.144.6.110/kaufland/kaufland.de/choose.do;jsessionid=C93F4FD7E4277F0E1A4B89049B113C6B
это то, что из твоих параметров сделало, научись также как их скрипт и пользуйся.

> sniknik ©   (06.03.12 22:52) [25]
чёт слишком сложно
похоже  придётся через WebBrowser делать

> мне кажется ты сам не в теме

:)

> чёт слишком сложно
и даже еще сложнее... вот на другом компе, сегодня, по этой ссылке дает только заголовок без данных, т.е. либо сессия кончилась, либо она рассчитывается до этого, и персонально для компа.
т.е. должны быть еще действия, до, чтобы показало список.
в принципе их можно повторить... есть же файребаг в фарефоксе все можно посмотреть как и что.

DevilDevil ©   (07.03.12 12:36) [26]
Поставь http сниффер и посмотри что делает браузер для того чтобы получить список товаров. И сделай это сам если сможешь. А нет значит только через браузер.

> stas ©   (07.03.12 13:49) [29]

есть на примете толковая литература по сниферам ?
для меня это новая информация )
или только гугл  ? )

> толковая литература по сниферам ?
> файребаг в фарефоксе
+ httpfox + куча кучная других дополнений для разработчика.

> sniknik ©   (07.03.12 14:08) [31]
лана
буду разбираться
спасибо )

средств сейчас кругом, в том же ИЕ есть встроенный, никаких доп плагинов
fiddler еще есть