Парсер с кинопоиска

canda 01.10.2014 парсер, php Все вопросы » Общие вопросы по PHP 5534

вопрос

Есть парсер который парсит и добовляет в базу данных контент с кинопоиска. Вот только есть пару ошибок.

Он парсит строки: жанр, сборы в США, сборы в мире, сборы в России. Проблема в том что в конце жанра: ", ... слова".

Короче вот скрин:

Показать / Скрыть текст

И еще хотелось бы чтоб он парсил и трейлер. Есть тут те кто смогут в этом помочь? В долгу не останусь!

Вот:

Показать / Скрыть текст

# Парсим информацию по фильму:
            preg_match_all('#<title>(.*)</title>#isU', $content, $title);
            preg_match_all('#<table class="info">(.*)</table>#isU', $content, $result);
            preg_match_all('#<tr>(.*)</td>(.*)</tr>#isU', $result[0][0], $result);
            preg_match_all('#<div class="brand_words" itemprop="description">(.*)</div>#isU', $content, $anonce);
            preg_match_all('#<title>(.*)</title>#isU', $content, $title);
            $write['title'] = $title[1][0];
            $write['title'] = iconv('windows-1251','utf-8',$write['title']);            
            $write['anonce'] = str_replace('&nbsp;', ' ', strip_tags($anonce[1][0]));
            $write['anonce'] = iconv('windows-1251','utf-8',$write['anonce']);
            # Сохраняем данные в xml:
            $xml = new DOMDocument('1.0','UTF-8');
            $film = $xml->appendChild($xml->createElement('film'));
            $title = $film->appendChild($xml->createElement('title'));
            $title->appendChild($xml->createCDATASection($write['title']));
            $date = $film->appendChild($xml->createElement('date'));
            $date->appendChild($xml->createCDATASection(time()));
            
            for($i=0;$i<count($result[0]);$i++){
                $write['key'] = trim(strip_tags($result[1][$i]));
                $write['value'] = trim(str_replace('&nbsp;','',strip_tags($result[2][$i])));
                if($write['key'] == 'год'){$write['value'] = substr($write['value'],0,4);}
                $write['key'] = iconv('windows-1251','utf-8', $write['key']);
                $write['value'] = iconv('windows-1251','utf-8', $write['value']);
                $buffer = '';
                $write['value'] = explode(",",$write['value']);
                for($o=0;$o<count($write['value']);$o++){
                    $buffer .= trim($write['value'][$o]).', ';
                }
                $buffer = str_replace('..., ','', $buffer);
                $buffer = substr($buffer,0,-2);
                $write['value'] = $buffer;
                $info = $film->appendChild($xml->createElement('info'));
                $key = $info->appendChild($xml->createElement('key'));
                $key->appendChild($xml->createCDATASection($write['key']));
                $value = $info->appendChild($xml->createElement('value'));
                $value->appendChild($xml->createCDATASection($write['value']));
            }
            
            $anonce = $film->appendChild($xml->createElement('anonce'));
            $anonce->appendChild($xml->createCDATASection($write['anonce']));
            $xml->formatOutput = true;
            $xml->save('./base/'.$_POST['id'].'.xml');

Ответа пока нет

3 комментария

Юзер

urban.terror - 2015-05-012 октября 2014 07:35 - #35820

Этот работает на ура.

Юзер

morefilms - 2015-05-012 октября 2014 13:04 - #35825

urban.terror, если бы еще можно было увидеть скрины настроек PKinoPoisk и PKinoPoisk Person, что эти модули умеют, там на сайте не описано ничего. Сам пользуюсь вот таким парсером, вроде не плохой, правда автор пропал и нет поддержки дле 10.3

Гости

canda - 2015-05-013 октября 2014 14:50 - #35852

Вы не поняли. Это не тот парсер. Вот: http://hreniiiiii.esy.es/

mondolfo | Шаблон waitlogin при авторизации через с ...

mondolfo
Шаблон waitlogin при авторизации через соцсеть?
Вчера, 01:31

/engine/modules/social.php
TeraMoune | Как изменить вывод custom по нескольким ... ¹¹

TeraMoune
Как изменить вывод custom по нескольким тегам?
28-10-2024, 01:05

Я же написал, продублирую: нужно использовать [[:punct:]]

И проблема в условии проверяющее версию mysql, можно поменять местами true и false, изменить знак меньше на больше или вовсе убрать код строки с version_compare и оставить ту строку кода $tempArray[] где используется [[:punct:]].

В статье также указано, что важно использовать экранирование, собственно, что и указано в методе по исправлению ошибки.
Статья по решению проблемы

Там у человека совершенно другое условие поиска. Он не теги ищет которые строго разделены запятыми, он просто слова ищет и ему как раз подойдёт граница слова. И это когда-то давно поиск был разделяя по границе слова, теперь есть character_class и используется другой метод. Но это не отменяет того, что вы нашли вопрос и решение которое никак не связано с темой новости поиска новостей с наличием тегов.
homa152 | Как изменить вывод custom по нескольким ... ¹¹

homa152
Как изменить вывод custom по нескольким тегам?
27-10-2024, 23:33

Если вы готовы предложить какое-то решение для исправление проблемы 3685, отлично. Иначе к сожалению на последних версиях MySQL хак не рабочий, согласно вашему трактату.
homa152 | Как изменить вывод custom по нескольким ... ¹¹

homa152
Как изменить вывод custom по нескольким тегам?
27-10-2024, 23:20

Я буквально 2 часа назад столкнулся с проблемами при установке этого хака, проблема была именно в ошибке 3685, сайт не просто переставал работать, использовалась стандартная заглушка при критических ошибках MySQL исправить получилось методом описанным выше, для версия до 8 хак работает исправно, но выше, требуется доработка, так как синтаксис считается ошибочным, вы можете проверить самостоятельно.

В статье также указано, что важно использовать экранирование, собственно, что и указано в методе по исправлению ошибки.
Статья по решению проблемы
TeraMoune | Как изменить вывод custom по нескольким ... ¹¹

TeraMoune
Как изменить вывод custom по нескольким тегам?
27-10-2024, 22:32

Напротив нужно использовать [[:punct:]] вместо скобок, про это написано в документации на которую вы ссылаетесь. А \b означает границу слова и не способен правильно отображать результаты. Граница слова это когда выражение будет находить отдельные слова. Например новость имеет теги (Социальная сеть, Блокировка) и tags REGEXP '\\b(сеть)\\b' найдёт новость с тегом Социальная сеть, а так же Рыбацкая сеть и в принципе найдёт все новости где присутствует слово "Сеть" и будет много лишних результатов, а не только нужные.

В хаке как раз присутствует проверка на старую версию и новую mysql и в каждом случае используется тот вариант который является валидным для используемой версии.
homa152 | Как изменить вывод custom по нескольким ... ¹¹
homa152
Как изменить вывод custom по нескольким тегам?
27-10-2024, 21:30
Добавлю касаемо обновления архитектуры MySQL
При добавлении хака с версии MySQL 8.0, возможно появление ошибки: 3685. Неверный аргумент для регулярного выражения.

Можно пофиксить самостоятельно внеся корректировки в сам хак из панели админа.

Строку:
```
$tempArray[] = "tags REGEXP '[[:<:]](" . $value  . ")[[:>:]]'";
```
Заменить на:
```
$tempArray[] = "tags REGEXP '\\\\b(" . $value  . ")\\\\b'";
```
Согласно справочному руководству MySQL 8.0 / ... / Регулярные выражения, «MySQL поддерживает регулярные выражения с помощью международных компонентов для Unicode (ICU)».

То есть, вместо "[[:<:]] и [[:>:]]", нужно использовать: "\b"
vitnet | Есть ли возможность изменить язык сайта? ¹

vitnet
Есть ли возможность изменить язык сайта?
25-10-2024, 16:22

Ну как вариант можно использовать тег {lang text=***} подробнее

{lang text="LANG_PARAMETER"}

Данный тег предназначен для вывода информации из языкового файла website.tpl, который в данный момент используется, где LANG_PARAMETER это значение параметра, который необходимо вывести. Например, тег {lang text="attach_images"} выведет надпись “Прикрепить изображения” из языкового пакета, в случае использования русского языка и если используется английский язык, то “Attach Images”
vitnet | Есть готовый модуль рейтинга комментарие ... ¹
vitnet
Есть готовый модуль рейтинга комментариев?
25-10-2024, 13:12
Вариант 1 (вручную)

1.0 Открываете файл engine/modules/show.full.php находите в нем
```
$where_approve . " ORDER BY " . PREFIX . "_comments.id " . $comm_msort;
```
И меняете здесь id на rating
Пример:
```
$where_approve . " ORDER BY " . PREFIX . "_comments.rating " . $comm_msort;
```
2.0 Затем переходите в админку /admin.php?mod=options&action=syscon --> Настройки комментариев --> Порядок сортировки комментариев --> По убыванию

2.1 Далее --> Тип рейтинга комментариев выставляете "Нравится или Не нравится"

Готово!

Вариант 2 (плагин)
Для просмотра содержимого спойлера, перейдите к выбранному событию.

Graf | Как сделать аякс кнопку "загрузить еще"? ²

Graf
Как сделать аякс кнопку "загрузить еще"?
23-10-2024, 16:03

Вот рабочий пример со скрытие пагинатора и кнопки.
Полный код файла navigation.tpl

[not-available=userinfo]
<div class="nav-load" id="nav-load">[next-link]Загрузить еще[/next-link]</div>

<nav class="navigation"[available=lastcomments] style="padding: 4% 8%;"[/available]>
	<div class="page_next-prev">
		<span class="page_prev" title="Предыдущая страница">
			[prev-link]<svg class="icon icon-left"><use xlink:href="#icon-left"></use></svg>[/prev-link]
		</span>
		<span class="page_next" title="Следующая страница">
			[next-link]<svg class="icon icon-right"><use xlink:href="#icon-right"></use></svg>[/next-link]
		</span>
	</div>
	<ul class="pagination">
		{pages}
	</ul>
</nav>
<script type="text/javascript">
$(document).ready(function(){
    
         $('body').on('click','#nav-load a',function(){
        var urlNext = $(this).attr('href');
        var scrollNext = $(this).offset().top - 200;
        if (urlNext !== undefined) {
            $.ajax({
                url: urlNext,
                beforeSend: function() {
                    ShowLoading('');
                },            
                success: function(data) {
                    $('.navigation').remove();
                    $('#nav-load').remove();
                    $('#dle-content').append($('#dle-content', data).html());
                    $('#dle-content').after($('#bottom-nav'));
                    window.history.pushState("", "", urlNext);
                    $('html, body').animate({scrollTop:scrollNext}, 800);    
                    HideLoading('');
                },
                  error: function() {                
                    HideLoading('');
                    alert('что-то пошло не так');
                  }
            });
        };
        return false;
    });
    
});
</script>
[/not-available]

vitnet | Как перенести категории в DLE? ²

vitnet
Как перенести категории в DLE?
22-10-2024, 11:30

Для начала проверьте наличие файла /engine/cache/system/category.php и если он был до замены БД то удалите его а ещё лучше очистить кеш.

наверх

Парсер с кинопоиска

Ответа пока нет

3 комментария

Похожие вопросы

Сайт выдает ошибку из-за замены атрибутов папки

Убрать символы после знака /

Подскажите как доработать php + javascript

Вывод тумба тегом

Cursor in bold, spoiler, etc

Как использовать в быстром поиске туг {image-1} ?

Постер в быстром поиске

Не могу вывести msgbox через JSON

Анализ работы сайта. Долгая загрузка (ожидание) сайта. В чем беда?

Как организовать правильный вывод алфавитного меню?