Программа для загрузки объявлений из АВИТО

[zanzibara 0]

Это все помогло, спасибо. Но после выгрузки объявлений он создал мне кучу дублей http://prntscr.com/f04exg

Подскажите плз как этого избежать в будущем и как щас это удалить быстро и без последствий, потому что если я это пытаюсь удалить в справочнике он пишет что это используется в объявлении  http://prntscr.com/f04gw9, типа сначала удалите его, но объявлений много, а ID  объявления он  не указывает где используется.

[Дмитрий Кондин 690]

10 минут назад, zanzibara сказал:

Это все помогло, спасибо. Но после выгрузки объявлений он создал мне кучу дублей http://prntscr.com/f04exg

Подскажите плз как этого избежать в будущем и как щас это удалить быстро и без последствий, потому что если я это пытаюсь удалить в справочнике он пишет что это используется в объявлении  http://prntscr.com/f04gw9, типа сначала удалите его, но объявлений много, а ID  объявления он  не указывает где используется.

 

[zanzibara 0]

а можно скринчик или название чекбоксов что выключать?

[Дмитрий Кондин 690]

1 час назад, zanzibara сказал:

а можно скринчик или название чекбоксов что выключать?

А по ссылке выше и есть скрины.

[zanzibara 0]

убрал галочки, как я понял это поможет на будущее, а как щас удалить лишние пункты в справочнике городов? может есть решение

[Дмитрий Кондин 690]

38 минут назад, zanzibara сказал:

убрал галочки, как я понял это поможет на будущее, а как щас удалить лишние пункты в справочнике городов? может есть решение

Теперь надо поудалять старые записи и записи в справочниках и грузить заново.

Потренируйтесь на небольшом количестве сначала.

[Дмитрий Кондин 690]

Если не охота заморачиваться с самостоятельным парсингом авито с помощью граббера, теперь есть вариант попроще

 

[Not Good 1]

Из программы не выгружаются эксель-файлы.

В error.log такие ошибки:

[05-Sep-2017 11:36:30 Europe/Moscow] PHP Notice:  Undefined index: file_name in /home/.../public_html/post.php on line 2
[05-Sep-2017 11:36:30 Europe/Moscow] PHP Notice:  Undefined index: file_data in /home/.../public_html/post.php on line 3
[05-Sep-2017 11:36:30 Europe/Moscow] PHP Warning:  file_put_contents(/home/.../public_html/cache/upl/): failed to open stream: Is a directory in /home/.../public_html/post.php on line 9
[05-Sep-2017 11:36:30 Europe/Moscow] PHP Warning:  file_put_contents(/home/.../public_html/cache/upl/arch/): failed to open stream: Is a directory in /home/.../public_html/post.php on line 10

 

Сам файл post.php такой (дефолтный):

<?
$file_name = $_POST['file_name'];
$file_data = $_POST['file_data'];
if ( $_GET['secure'] != 'ПАРОЛЬ'  ) {
echo 'ERROR:secure code incorrect';
exit;
}

file_put_contents($_SERVER['DOCUMENT_ROOT'].'/cache/upl/' . $file_name, pack('H*', $file_data));
file_put_contents($_SERVER['DOCUMENT_ROOT'].'/cache/upl/arch/' . $file_name, pack('H*', $file_data));

echo 'OK'; 

?>

 

Подскажите, как это исправить?

 

[TopRaN 235]

2 часа назад, Not Good сказал:

Подскажите, как это исправить?

Проверьте права на папки. должны быть 755

[Not Good 1]

6 минут назад, TopRaN сказал:

Проверьте права на папки. должны быть 755

Сделал. Не помогло.

[Дмитрий Кондин 690]

3 часа назад, Not Good сказал:

Из программы не выгружаются эксель-файлы.

В error.log такие ошибки:

[05-Sep-2017 11:36:30 Europe/Moscow] PHP Notice:  Undefined index: file_name in /home/.../public_html/post.php on line 2
Подскажите, как это исправить?

 

Вам нужно отключить notice в PHP

https://www.komtet.ru/lib/plangs/php/otklyuchenie-pokaza-notice-i-warning-v-logah

[Not Good 1]

3 часа назад, rumantic сказал:

Вам нужно отключить notice в PHP

https://www.komtet.ru/lib/plangs/php/otklyuchenie-pokaza-notice-i-warning-v-logah

Так проблема не в записи ошибок, а в том, что не загружаются эксель-файлы 

[Not Good 1]

Хостер пишет: $file_name пустая - в результате file_put_contents пытается записать данные напрямую в папку

Но я ведь post.php не изменял. Он скачан с первого поста. Не понимаю, это программа AdvertGrabber косячит или на сервере проблема?

[Дмитрий Кондин 690]

11 час назад, Not Good сказал:

Хостер пишет: $file_name пустая - в результате file_put_contents пытается записать данные напрямую в папку

Но я ведь post.php не изменял. Он скачан с первого поста. Не понимаю, это программа AdvertGrabber косячит или на сервере проблема?

Извиняюсь, не полностью лог посмотрел.

Да, файл не передается, надо смотреть что с настройками граббера.

[Not Good 1]

2 часа назад, rumantic сказал:

Извиняюсь, не полностью лог посмотрел.

Да, файл не передается, надо смотреть что с настройками граббера.

В программе был косяк. С помощью разработчика решил проблему.

[zedo 0]

Почему при выгрузки на сайт объявления не разбиваются автоматом по разделам и не грузятся фото

 

[Дмитрий Кондин 690]

4 минуты назад, zedo сказал:

Почему при выгрузки на сайт объявления не разбиваются автоматом по разделам и не грузятся фото

 

Если фото не грузятся, то скорей всего не настроили загрузку фото с помощью скрипта /apps/excel/cron_image_parser.php - вы его добавил в крон?

Если нет разбивки по разделам, то вероятно что название колонки категории в excel файлах не совпадает с название колонки в cms sitebill для категорий, проверьте это.

[zedo 0]

3 часа назад, rumantic сказал:

Если фото не грузятся, то скорей всего не настроили загрузку фото с помощью скрипта /apps/excel/cron_image_parser.php - вы его добавил в крон?

Если нет разбивки по разделам, то вероятно что название колонки категории в excel файлах не совпадает с название колонки в cms sitebill для категорий, проверьте это.

как /apps/excel/cron_image_parser.php добавить в крон?

 

[Дмитрий Кондин 690]

2 часа назад, zedo сказал:

как /apps/excel/cron_image_parser.php добавить в крон?

 

http://wiki.sitebill.ru/index.php?title=Excel

[Sunnysehmet 1]

Добрый день. Выгружаю объявления с авито.

1. В файле выгрузки Все параметры адреса слепляются в одну колонку (типа Москва, ул. Липецкая, д. 34/25 Царицыно (3.7км) Орехово (3.1км) Домоде). В программе такая же фигня, весь адрес в одной колонке. Настроила автоматическое определение адреса, как тут указано https://www.sitebill.ru/news/avtomaticheskoe-opredelenie-adresa/?utm_source=whmcs&utm_campaign=754e0d2ee2-EMAIL_CAMPAIGN_2018_06_22_04_02_COPY_01&utm_medium=email&utm_term=0_6cc976024e-754e0d2ee2-47762969&mc_cid=754e0d2ee2&mc_eid=9c19b152a9), не помогло. Автоматом колонки Клица, Дом и т. п. не заполняются.

2. В файле выгрузки Координаты - это две разные колонки (Широта и Долгота). Думала решить проблему настройкой автоматического определения адреса - не помогло.

3. В файле выгрузки Цена и старая и текущая по 0. Да и в самой программе смотрю строки, поле цена пустое. У всех абсолютно объявлений. 

4. После загрузки файла с объявлениями объявления добавляются в базу, а крон фотки не подгружает, сядает ошибку (run import file to parse =  nothing to parse). ГРужу через платный плагин Exel.

5. Переадресация категория (без Params делала) не сработала. Куда заглянуть?

6. В файле выгрузки поле "Запрос" переименовала соответственно в "Тип" (в соответствии с сайтом). И структура в CMS (Купить / Квартиру / Комнату к примеру) соответствует тому, что в файле выгрузки. Все равно при выгрузке создаются новые категории, переадресация из которых не работает (см вопрос выше). 

Кусок из файла выгрузки в аттаче.

Еще. Есть необходимость грузить много тысяч объявлений. Как настроить крон, чтобы он фото подгружал? Грузить файлики по 10-20 штук, когда надо, например, 100 тысяч объявлений - смысл тогда в парсере?

avito11.xlsx

[doma 22]

2 часа назад, Sunnysehmet сказал:

Добрый день. Выгружаю объявления с авито.

1. В файле выгрузки Все параметры адреса слепляются в одну колонку (типа Москва, ул. Липецкая, д. 34/25 Царицыно (3.7км) Орехово (3.1км) Домоде). В программе такая же фигня, весь адрес в одной колонке. Настроила автоматическое определение адреса, как тут указано https://www.sitebill.ru/news/avtomaticheskoe-opredelenie-adresa/?utm_source=whmcs&utm_campaign=754e0d2ee2-EMAIL_CAMPAIGN_2018_06_22_04_02_COPY_01&utm_medium=email&utm_term=0_6cc976024e-754e0d2ee2-47762969&mc_cid=754e0d2ee2&mc_eid=9c19b152a9), не помогло. Автоматом колонки Клица, Дом и т. п. не заполняются.

2. В файле выгрузки Координаты - это две разные колонки (Широта и Долгота). Думала решить проблему настройкой автоматического определения адреса - не помогло.

3. В файле выгрузки Цена и старая и текущая по 0. Да и в самой программе смотрю строки, поле цена пустое. У всех абсолютно объявлений. 

4. После загрузки файла с объявлениями объявления добавляются в базу, а крон фотки не подгружает, сядает ошибку (run import file to parse =  nothing to parse). ГРужу через платный плагин Exel.

5. Переадресация категория (без Params делала) не сработала. Куда заглянуть?

6. В файле выгрузки поле "Запрос" переименовала соответственно в "Тип" (в соответствии с сайтом). И структура в CMS (Купить / Квартиру / Комнату к примеру) соответствует тому, что в файле выгрузки. Все равно при выгрузке создаются новые категории, переадресация из которых не работает (см вопрос выше). 

Кусок из файла выгрузки в аттаче.

Еще. Есть необходимость грузить много тысяч объявлений. Как настроить крон, чтобы он фото подгружал? Грузить файлики по 10-20 штук, когда надо, например, 100 тысяч объявлений - смысл тогда в парсере?

avito11.xlsx

а какой программой делаете  -ответ ждем в личку

[Real 2]

Народ, а как сейчас работает прога?

Гребанное авито стало добавлять на страницу запроса похожие объявления, но с другого города. И у меня парсер их все качает. Условно говоря, если моих объявлений пару штук, то дополнительно парсер скачает еще пару сотен с другого города. 

Как-то не комильфо. Кто как решает вопрос или этот геморрой только у меня?

[DD-Base 5]

сейчас авито добавляет в конец многих ссылок символы http://joxi.ru/52a3MXcbRJyor0

попробуйте переформировать ссылку в браузере

[Real 2]

1 час назад, DD-Base сказал:

сейчас авито добавляет в конец многих ссылок символы http://joxi.ru/52a3MXcbRJyor0

попробуйте переформировать ссылку в браузере

Для меня это просто буквенная абракадабра. Как именно ее надо форматировать? Вообще убирать или менять буквы?

Попробовал убрать буквы, не помогает или как-то не так делаю

[DD-Base 5]

нужно переформировать ссылку (запрос) в браузере