Вставка скребковых данных с использованием php curl в MySQL

Question

Я работаю над этим скриптом последние пару дней и не могу найти способ вставить данные в MySQL. Я начинаю, когда речь заходит о PHP/MYSQL, и раньше пишут несколько простых скриптов. Я могу отбросить скребковые данные и не получать сообщений об ошибках, но когда я проверяю phpmyadmin, запрос не работает (результаты не вводятся в базу данных).

Вот код, который я работал на

require ("mysqli_connect.php"); 
include('../simple_html_dom.php'); 

ini_set('user_agent', 
    'Mozilla/5.0 (Windows; U; Windows NT 6.0; en-GB; rv:1.9.0.3) Gecko/2008092417 Firefox/3.0.3'); 

// get DOM from URL or file 
$html = file_get_html('http://www.asos.com/Women/Jeans/Cat/pgecategory.aspx?cid=3630&via=lhn'); 
// find all images 

foreach($html->find('#items') as $a)  
    echo $a->innertext .'<br>'; 

foreach($html->find('span.price') as $p) 
    echo $p->innertext .',';  

$q = "INSERT INTO jeans (`image`, `price`) VALUES ('$a', '$p')"; 
$r = @mysqli_query ($dbc, $q) or die ("Update query failed : " . mysql_error());; //Run the Query. 

Answer 1

В примере кода $ а и $ р являются объекты, попробуйте вместо этого:

$a = ''; 
foreach($html->find('#items') as $item) { 
    $a.= $item->innertext .'<br>'; 
} 

$p = ''; 
foreach($html->find('span.price') as $price) { 
    $p.= $price->innertext.',';  
} 

Далее удалите @ из @mysqli_query, постарайтесь не использовать это, когда-либо, попытайтесь правильно поймать/обработать ошибки.

Далее, пожалуйста, несколько минут, чтобы исследовать paramaterized запросы и PDO, не принимают неизвестный вход (с 3 сторон не менее) и ввести их прямо в ваш SQL:

$q = "INSERT INTO jeans (`image`, `price`) VALUES ('$a', '$p')"; 

т.е. Дон 't do that^

Наконец, вы, вероятно, хотите проверить ответ от get.

Надеюсь, что это поможет!

Answer 2

Вы подавляете ошибку, помещая @ перед тем mysqli_query

Попробуйте изменить это:

$q = "INSERT INTO jeans ('image', 'price') VALUES ('$a', '$p')"; 
mysqli_query ($dbc, $q) or die ("Update query failed : " . mysql_error());; //Run the Query. 

Answer 3

Я думаю, я знаю, что это неправильно.

Если вы просто использовать

echo file_get_contents("http://www.asos.com/Women/Jeans/Cat/pgecategory.aspx?cid=3630"); 

(или просто asos.com, не имеет значения), вы заметите, что вы всегда будете получать обратно:

К сожалению, мы можем» т найти что страница или что-то пошло не так ...

вернуться назад или попробовать здесь:

женщин мужчин домой службу

Поскольку ни один из указанных вами элементов на этой странице, вы ничего не вернете.

Мое предположение, что asos.com предотвращает выскабливание со своего сайта.

Answer 4

Не забывайте использовать функцию mysql_real_escape_string, чтобы избежать проблем с сохранением содержимого. Пример ниже.

$query2 = sprintf("INSERT INTO jeans(image, price) 
       VALUES ('%s','%s')",mysql_real_escape_string($a), 
            mysql_real_escape_string($p)) 
mysql_query($query2) or die(mysql_error()."<br />".$query2);