GNU/Linux >> Linux Esercitazione >  >> Linux

Estrazione dei dati dalla tabella HTML

Usa pandas.read_html:

import pandas as pd
html_tables = pd.read_html('resources/test.html')
df = html_tables[0]
df.T # transpose to align
                   0
Tests            103
Failures          24
Success Rate  76.70%
Average Time   71 ms

Una soluzione Python che utilizza BeautifulSoup4 (Modifica: con il giusto salto. Modifica3: Utilizzando class="details" per selezionare table ):

from bs4 import BeautifulSoup

html = """
  <table class="details" border="0" cellpadding="5" cellspacing="2" width="95%">
    <tr valign="top">
      <th>Tests</th>
      <th>Failures</th>
      <th>Success Rate</th>
      <th>Average Time</th>
      <th>Min Time</th>
      <th>Max Time</th>
   </tr>
   <tr valign="top" class="Failure">
     <td>103</td>
     <td>24</td>
     <td>76.70%</td>
     <td>71 ms</td>
     <td>0 ms</td>
     <td>829 ms</td>
  </tr>
</table>"""

soup = BeautifulSoup(html)
table = soup.find("table", attrs={"class":"details"})

# The first tr contains the field names.
headings = [th.get_text() for th in table.find("tr").find_all("th")]

datasets = []
for row in table.find_all("tr")[1:]:
    dataset = zip(headings, (td.get_text() for td in row.find_all("td")))
    datasets.append(dataset)

print datasets

Il risultato è simile a questo:

[[(u'Tests', u'103'),
  (u'Failures', u'24'),
  (u'Success Rate', u'76.70%'),
  (u'Average Time', u'71 ms'),
  (u'Min Time', u'0 ms'),
  (u'Max Time', u'829 ms')]]

Modifica2: Per produrre l'output desiderato, usa qualcosa del genere:

for dataset in datasets:
    for field in dataset:
        print "{0:<16}: {1}".format(field[0], field[1])

Risultato:

Tests           : 103
Failures        : 24
Success Rate    : 76.70%
Average Time    : 71 ms
Min Time        : 0 ms
Max Time        : 829 ms

Linux
  1. Ottenere i tag Wispr da un portale di autenticazione Fon?

  2. DAEMON Sync – Sincronizza i dati da Linux a dispositivi Android e iOS

  3. estrazione di testo da file MS word in python

  4. ottenere sorgenti HTML o rich text dagli appunti di X

  5. Impedire a un server Apache 2 di registrare dati sensibili

Come creare una tabella in Hive

Come esportare una tabella da MySQL a CSV

Pulisci la tua tabella wp_options e i dati caricati automaticamente

MySQL:conversione in dati per tabella per InnoDB

Come inserire dati nel database MySQL utilizzando PHP in XAMPP

Come visualizzare i dati da un file di testo in Linux