Pagina raschiare e ottenere il titolo o la descrizione più pertinente per le immagini con XPath

Question

Quello che sto cercando di fare è essenzialmente la stessa cosa di un pulsante Tweet o di un pulsante Condividi/Mi piace di Facebook, e cioè di raschiare una pagina e il più titolo pertinente per un dato. Il miglior esempio a cui riesco a pensare è quando sei sulla prima pagina di un sito web con molti articoli e fai clic su un pulsante Mi piace di Facebook. Otterrà quindi le informazioni corrette per il post relative al (più vicino) pulsante Mi piace. Alcuni siti hanno tag Open Graph, ma alcuni non lo fanno e funzionano ancora.

Dato che questo viene eseguito da remoto, ho solo il controllo dei dati che voglio targetizzare. In questo caso i dati sono immagini. Piuttosto che recuperare solo il <title> della pagina, sto cercando in qualche modo di attraversare la cupola al contrario dal punto di partenza di ogni immagine, e trovare il "titolo" più vicino. Il problema è che non tutti i titoli si verificano prima di un'immagine. Tuttavia, la possibilità che l'immagine si verifichi dopo il titolo in questo caso sembra piuttosto alta. Detto ciò, spero di farlo funzionare bene per quasi tutti i siti.

Pensieri:

• trovare il "contenitore" delle immagini e quindi utilizzare il primo blocco di testo.
• Trova i blocchi di testo in elementi che contengono determinate classi ("descrizione", "titolo") o elementi (h1, h2, h3, h4).

Titolo backup:

• utilizzando Open Tag Grafico
• utilizzando solo il <title>
• Utilizzando tag ALT solo
• Utilizzando meta tag

Sommario: Estrazione le immagini non è il problema, è come ottenere titoli rilevanti per loro.

Domanda: Come procederesti per ottenere titoli pertinenti per ciascuna immagine? Forse usando DomDocument o XPath?

Answer 1

Il tuo approccio sembra abbastanza buono, vorrei solo dare alcuni tag/attributi un peso e scorrere attraverso di loro con query XPath fino a trovare qualcosa che esce e non è nullo. Qualcosa di simile:

i = 0 

while (//img[i][@src]) 
    if (//img[i][@alt]) 
    return alt 
    else if (//img[i][@description]) 
    return description 
    else if (//img[i]/../p[0]) 
    return p 
    else 
    return (//title) 

    i++ 

---

Un semplice esempio XPath (funzione ported from my framework):

function ph_DOM($html, $xpath = null) 
{ 
    if (is_object($html) === true) 
    { 
     if (isset($xpath) === true) 
     { 
      $html = $html->xpath($xpath); 
     } 

     return $html; 
    } 

    else if (is_string($html) === true) 
    { 
     $dom = new DOMDocument(); 

     if (libxml_use_internal_errors(true) === true) 
     { 
      libxml_clear_errors(); 
     } 

     if ($dom->loadHTML(ph()->Text->Unicode->mb_html_entities($html)) === true) 
     { 
      return ph_DOM(simplexml_import_dom($dom), $xpath); 
     } 
    } 

    return false; 
} 

E l'effettivo utilizzo:

$html = file_get_contents('http://en.wikipedia.org/wiki/Photography'); 

print_r(ph_DOM($html, '//img')); // gets all images 
print_r(ph_DOM($html, '//img[@src]')); // gets all images that have a src 
print_r(ph_DOM($html, '//img[@src]/..')); // gets all images that have a src and their parent element 
print_r(ph_DOM($html, '//img[@src]/../..')); // and so on... 
print_r(ph_DOM($html, '//title')); // get the title of the page