Игорь Петрович

Настройки для парсера КварталПРО

Recommended Posts

Согласно рекомендаций разработчика Квартал ПРО, для настройки отправки данных  парсеру КварталПРО в папку  /cache/upl её необходимо закрыть паролем:

Выдержка из мануала Квартал ПРО по Настройке хостинга:

1. У CMS Sitebillесть папка «/cache/upl».

2. В панели хотинга создать FTP-пользователя и назначить вышеуказанную папку в качестве домашней, т.е. запереть пользователя в этой папке.
Если на хостинге установлена СиПанель,то откройте меню «FTP-аккаунты» и там создайте нового пользователя, укажите папку, пароль, квоту:

http://s017.radikal.ru/i417/1504/39/0276a1edbc9d.jpg

в дальнейшем этот логин и пароль будет добавлен в настройки синхронизатора.

 

ЦМС-ка лежит на вашем хостинге, логин и пароль доступа к дому ФТП получил, 

Через тотл командр, могу заходить на фтп, и закинуть картинки с логотипами (тестовые варианты).

А вот изменить доступ к папке у меня не получаеться посредвам тотал командора (как это сделать?)

Есть ли доступ к ФТП через браузер (SPanel)?

Дело в том, что в процессе использования ресурса, доступ к данной папке необходим для нескольких пользователей, и время от времени предстоит менять доступ пользователей, поэтому такая возможность мне необходима.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Подумаем в новых версиях как можно реализовать такое разделение доступа.

Пока думаю это некритичное замечание, вряд ли кто-то будет скачивать картинки из /cache/upl/

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Проблема с парсером.

Сформированные данные для парсера Квартал ПРО сливаются в папку для парсинга, парсер обращается к данным но не забирает их.

 

Лог Парсера:

---------- START ----------
 
2015-04-17 07:53:21 Attempt to access the file yrl
 
2015-04-17 07:53:21 COMPLETED.
 
Parsing begin
 
Data not available.
 
Summary:
 
-Total records: 0
 
-Added: 0
 
-Edited: 0
 
-Declined: 0
 
-Deleted: 0
 
---------- END ----------
 
---------- START ----------
 
2015-04-17 07:53:23 Attempt to access the file photos_4.zip
 
2015-04-17 07:53:23 COMPLETED.
 
 
---------- END ----------
 
Содержание XML для парсера.
<?xml version="1.0" encoding="UTF-8"?><realty-feed xmlns="http://webmaster.yandex.ru/schemas/feed/realty/2010-06">  <agency-id>4</agency-id>  <offer internal-id="12604">    <internal_type_id>279</internal_type_id>    <type>продажа</type>    <property-type>жилая</property-type>    <category>Квартиры|Улучшенная</category>    <url>12604</url>    <creation-date>2015-03-10T13:52:43+03:00</creation-date>    <last-update-date>2015-04-17T08:52:58+03:00</last-update-date>    <location>      <country>Россия</country>      <region>Севастополь</region>      <district>Стрелецкая</district>      <locality-name>Севастополь</locality-name>      <sub-locality-name>Стрелецкая</sub-locality-name>      <non-admin-sub-locality>Стрелецкая</non-admin-sub-locality>      <address>Вакуленчука, д. 26</address>      <street>Вакуленчука</street>      <house_number>26</house_number>      <housing/>      <metro>        <name>АГВ</name>      </metro>    </location>    <sales-agent>      <name>Колохов Игорь</name>      <phone>095ХХХХХ</phone>      <phone>978ХХХХ</phone>      <category>agency</category>      <organization>Агентство "Галерея недвижимости"</organization>      <agency_id>4</agency_id>    </sales-agent>    <price>      <value>4762874</value>      <currency>RUB</currency>    </price>    <haggle>false</haggle>    <description>Продам 2-комн. Улучшенная, цена 79540, площ. 68.00/34.00/10.00. Стрелецкая, улица: Вакуленчука, состояние (ремонт): без ремонта, сан. узел: разд.</description>    <area>      <value>68</value>      <unit>м.кв.</unit>    </area>    <living-space>      <value>34</value>      <unit>м.кв.</unit>    </living-space>    <kitchen-space>      <value>10</value>      <unit>м.кв.</unit>    </kitchen-space>    <rooms>2</rooms>    <phone>-</phone>    <balcony>балконов 1, застеклено 1</balcony>    <BALCONY_COUNT>1</BALCONY_COUNT>    <BALCONY_GLASS_COUNT>1</BALCONY_GLASS_COUNT>    <bathroom-unit>раздельный</bathroom-unit>    <floor>5</floor>    <floors-total>6</floors-total>    <building-type>Альминс Блок</building-type>    <ceiling-height>2,6</ceiling-height>    <toilet>разд.</toilet>    <meta_keywords/>    <meta_description/>    <meta_title/>    <text_obyavl>2-х комнатная квартира в хорошем состоянии, продаем</text_obyavl>  </offer></realty-feed>

Причем до момента обращения к файлу xml парсером, он открывается через Тотал командр.

После того как парсер обратился к файлу его уже открыть не возможно. 

 

Как вылечить, или что делать?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Пробуем запустить файл в ручном режиме.

 

1. Берете ваш файл, кладете его в папку /cache/upl/ в сайте

2. Запускаете адрес http://ваш_сайт/apps/mlsparser/parser.php?file=yrl

В ответ на странице должно появиться, что-то вроде 4139=12604=279

4. Смотрим логи.

 

Я попробовал на локальном своем запустить на контенте, который вы запостили - съело не чихнув.

 

После того как парсер обратился к файлу его уже открыть не возможно. 

 

 

А если обратиться до открывания тоталом? Может тотал при сохраении переставляет неверную кодировку или меняет права доступа? Ваш файл, после выдачи ответа, что данных нет, удаляет потом файл из папки или так и оставляет его там лежать?

 

Если можете прикрепите к сообщению не содержимое файла, а сам файл. Супер было бы, если именно тот, который становится после открытия тоталом.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

https://yadi.sk/d/K6tep0ffg4k2B Здесь лежит Xml.

 

 

1. Берете ваш файл, кладете его в папку /cache/upl/ в сайте

2. Запускаете адрес http://ваш_сайт/apps/mlsparser/parser.php?file=yrl

В ответ на странице должно появиться, что-то вроде 4139=12604=279

Запускал парсер таким образом, на странице браузера пусто.

Вообщем разные комбинации пробовал, результат тот же.

Такое ощущение, что парсер просто игнорит информацию в файле, или там что то не так прописано.

 

 

 

Цитата

После того как парсер обратился к файлу его уже открыть не возможно. 

 

 

А если обратиться до открывания тоталом? Может тотал при сохраении переставляет неверную кодировку или меняет права доступа? Ваш файл, после выдачи ответа, что данных нет, удаляет потом файл из папки или так и оставляет его там лежать?

Ложная тревога, файл после обращения парсера удаляться, такое впечатление сложилось из-за того что тотал показал новые файлы, а после того как парсер их удалил, я не обновив страницу тотала к ним тырцнулся, вот и сложилось впечатление что парсер кривит фаил.

 

Вообщем если есть возможность, протестите файл yrl.xml  у себя, если ваш локальны ресурс его схавает, хотя должен, ну ура,

 

мне прийдется ломать голову как отладить парсер у себя, может он криво встал при установке? переустанавливать его ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

 

 

Тему можно закрывать? 

А что по тексту ветки видно Что вопрос решен?

Если вы позволите Я сообщу, когда проблемма будет решена, или здесь на форуме есть любители плодить ветки с одинаковыми темами?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Вообщем переустановка Парсера не помогла решить проблему, ситуация та же:

ЛОГ парсера

---------- START ----------
 
2015-04-17 19:17:28 Attempt to access the file yrl
 
2015-04-17 19:17:28 COMPLETED.
 
Parsing begin
 
Data not available.
 
Summary:
 
-Total records: 0
 
-Added: 0
 
-Edited: 0
 
-Declined: 0
 
-Deleted: 0
 
---------- END ----------
 
---------- START ----------
 
2015-04-17 19:17:30 Attempt to access the file photos_4.zip
 
2015-04-17 19:17:30 COMPLETED.
 
 
---------- END ----------
 
Здесь есть инструкция по настройке парсера http://www.sitebill.ru/instrukciya-kvartal-pro/
Дело в том, что у меня нет возможности её выполнить, так как в админке сайта нет приложения Конструктор полей, может ли это быть критичной ошибкой?
 
А вот в случае выполнения команды Приложения Парсер формата MLS установить появляется следующее сообщения: 
 
--------------------------------
Результат установки
Ошибка при выполнении запроса alter table re_data add column uniq_id varchar(255). Возможно колонка уже существует
Ошибка при выполнении запроса alter table re_data add column internal_type_id varchar(255). Возможно колонка уже существует
Ошибка при выполнении запроса alter table re_data add column property_type varchar(255). Возможно колонка уже существует
Ошибка при выполнении запроса alter table re_data add column optype varchar(255). Возможно колонка уже существует
-------------------------------------
Это нормально?
В чем может быть проблема?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Залил на сервер вот такой файл (Пример корректного YRL-файла из технических требования к фиду яндекс)  и дал команду парсеру читать его, результат тот же

https://yadi.sk/d/esZZ_0Plg4sGk имя файла соответствовало запрашиваемому парсером.

 

---------- START ----------
2015-04-17 20:07:32 Attempt to access the file yrl
2015-04-17 20:07:32 COMPLETED.
Parsing begin
Data not available.
Summary:
-Total records: 0
-Added: 0
-Edited: 0
-Declined: 0
-Deleted: 0
---------- END ----------
---------- START ----------
2015-04-17 20:07:34 Attempt to access the file photos_4.zip
2015-04-17 20:07:34 COMPLETED.
---------- END ----------
---------- START ----------
2015-04-17 20:12:20 Attempt to access the file yrl
2015-04-17 20:12:20 COMPLETED.
Parsing begin
Data not available.
Summary:
-Total records: 0
-Added: 0
-Edited: 0
-Declined: 0
-Deleted: 0
---------- END ----------
Первый раз с помощью настроек квартал ПРО, второй Лог при ручном запуске парсера, в обоих случаях файл заливался на ФТП вручную.
Что делать? 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

нет приложения Конструктор полей, может ли это быть критичной ошибкой?

 

Это Редактор форм. Просто когда писали инстукцию, еще не определились с финальным названием.

 

Это нормально?

 

Да. Он честно попытался создать колонку, но у него не получилось, так как она возможно уже существует. Вот он и предупредил вас.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
Гость
Эта тема закрыта для публикации сообщений.