Differenze tra le versioni di "Acquisire il codice HTML di una pagina web"

Da Gambas-it.org - Wikipedia.
 
(20 versioni intermedie di uno stesso utente non sono mostrate)
Riga 1: Riga 1:
L'acquisizione del codice HTML di una pagina web può essere effettuata mediante almeno le due modalità appresso descritte.
+
L'acquisizione del codice HTML di una pagina web può essere effettuata mediante le modalità appresso descritte.
  
 +
=Uso delle sole risorse di Gambas=
 +
Vi sono due modalità che prevedono l'uso delle sole risorse di Gambas.
  
==Uso del componente ''gb.net.curl''==
+
==Uso dell'oggetto ''WebView''==
Si potrà innanzitutto acquisire l'intero codice html di una pagina web, utilizzando i componenti ''gb.net'' e ''gb.net.curl'' nel modo che segue: |[[#Note|1]]|
+
Per poter utilizzare l'oggetto ''WebView'', bisognerà attivare anche il Componente <FONT color=#B22222>''gb.qui.qt.webkit''</font> o il Componente <FONT color=#B22222>''gb.qt5.webkit''</font>.
'''Public''' mioHttp As NEW HttpClient As "mioHttp"   
+
<BR>Verrà innanzitutto caricata la pagina web con la Proprietà ".Url" dell'Oggetto ''WebView''. Successvamente si acquisirà il codice html di detta pagina mediante la Proprietà ".HTML":
  '''Public''' stringa As String 
+
Public Sub Form_Open()  
 +
   
 +
  WebView1.<FONT color=#B22222>Url</font> = "<FONT color=darkgreen>''https&#58;//www.pagina_web_da_caricare''</font>" 
 +
 +
End
 +
 +
 +
Public Sub WebView1_Finish()  <FONT color=gray>' ''Quando la pagina web è stata completamente caricata dalla "WebView", viene sollevato questo evento:''</font>
 
    
 
    
 +
  Dim s As String 
 +
 
 +
<FONT color=gray>' ''Carica nella variabile di tipo stringa il codice HTML della pagina web:''</font>
 +
  s = WebView1<FONT color=#B22222>.GetHtml()</font>
 
   
 
   
  '''Public''' Sub Button1_Click()
+
  <FONT color=gray>' ''Salva il codice html, ottenuto, in apposito file:''</font>
   
+
  File.Save("/tmp/codice_html.html", s)
  inviaRichiesta 
 
 
    
 
    
  '''End'''   
+
  End
 +
 
 +
==Uso dei Componenti ''gb.net'' e ''gb.net.curl''==
 +
Si potrà innanzitutto acquisire l'intero codice HTML di una pagina web, utilizzando i Componenti <FONT color=#B22222>''gb.net''</font> e <FONT color=#B22222>''gb.net.curl''</font> nel modo che segue: <SUP>&#091;[[#Note|Nota 1]]&#093;</sup>
 +
Private mioHttp As NEW HttpClient As "mioHttp"
 +
Private stringa As String  
 
    
 
    
 
   
 
   
  '''Public''' Sub inviaRichiesta()   
+
  Public Sub Button1_Click()   
                         
+
               
 
   With mioHttp
 
   With mioHttp
     .URL = "www.pagina_web_da_caricare"           
+
     .URL = "<FONT color=darkgreen>''https&#58;//www.pagina_web_da_caricare''</font>"           
 
     .Timeout = 15   
 
     .Timeout = 15   
 
     .Get()
 
     .Get()
 
   End With
 
   End With
 
 
'''End''' 
 
 
 
 
   
 
   
  '''Public''' Sub mioHttp_Read()   
+
  End
 +
 +
 +
Public Sub mioHttp_Read()   
 
    
 
    
 
   Dim sBuf As String   
 
   Dim sBuf As String   
 
      
 
      
  Wait
+
  Wait
 
    
 
    
  IF Lof(mioHttp) THEN   
+
  IF Lof(mioHttp) THEN   
    Read #mioHttp, sBuf, Lof(mioHttp)   
+
    Read #mioHttp, sBuf, Lof(mioHttp)   
    stringa = stringa & sBuf   
+
    stringa = stringa & sBuf   
  Endif
+
  Endif
+
 
  '''End''' 
+
  End
 
    
 
    
 
   
 
   
  '''Public''' Sub mioHttp_Finished()
+
  Public Sub mioHttp_Finished()
 
    
 
    
 
   Dim p, s As String   
 
   Dim p, s As String   
 
   Dim i As Integer   
 
   Dim i As Integer   
 
          
 
          
  Label1.Text = ("Pagina scaricata !")   
+
  Label1.Text = ("Pagina scaricata !")   
 
      
 
      
  Wait         
+
  Wait         
 
          
 
          
  <FONT color=#006400>' ''la variabile stringa contiene la pagina html e viene visualizzata in una textarea:''</font>
+
  <FONT color=gray>' ''La variabile stringa contiene la pagina html e viene visualizzata in una "TextArea":''</font>
    TextArea1.text=stringa
+
  TextArea1.Text=stringa
 
          
 
          
    mioHttp.Close
+
  mioHttp.Close
   
+
 
'''End'''
+
  End
 +
 
 +
 
 +
=Uso delle funzioni esterne della libreria ''Libcurl''=
 +
'''Libcurl''' è una libreria gratuita lato-client di trasferimento dati con la sintassi URL, capace di supportare diversi protocolli.
 +
 
 +
Per poter fruire in Gambas delle risorse della libreria ''Libcurl'', è necessario avere installata nel sistema e richiamare la libreria condivisa: "''libcurl.so.4.8.0'' ".
  
  
==Uso dell'oggetto ''WebView''==
+
Mostriamo un esempio pratico:
Per poter utilizzare l'oggetto ''WebView'', bisognerà attivare anche il componente ''gb.qt4.webkit''.
+
  Library "<FONT Color=blue>libcurl:4.8.0</font>"
<BR>Verrà innanzitutto caricata la pagina web con la proprietà ''.Url'' dell'oggetto ''WebView''. Successvamente si acquisirà il codice html di detta pagina mediante la proprietà ''.HTM'':
+
  '''Public''' Sub Form_Open() 
+
Private Const CURLOPT_WRITEDATA As Integer = 10001
   
+
  Private Const CURLOPT_URL As Integer = 10002
  WebView1.<FONT color=#B22222>Url</font> = "http&#58;//www.pagina_web_da_caricare"  
 
 
      
 
      
  '''End'''   
+
  <FONT Color=gray>' ''CURL *curl_easy_init(void)''
 +
' ''Start a libcurl easy session.''</font>
 +
Private Extern curl_easy_init() As Pointer
 +
 +
<FONT Color=gray>' ''CURLcode curl_easy_setopt(CURL *curl, CURLoption option, ...)''
 +
' ''Set options for a curl easy handle''</font>
 +
  Private Extern curl_easy_setopt(curl As Pointer, optionI As Integer, optionP As Pointer) As Integer
 
    
 
    
  <FONT color=#006400>' ''Quando la pagina web è stata completamente caricata dalla "WebView",''
+
  <FONT Color=gray>' ''CURLcode curl_easy_perform(CURL *curl)''
  ' ''viene sollevato questo evento:''</font>
+
' ''Perform a blocking file transfer.''</font>
  '''Public''' Sub WebView1_Load()   
+
Private Extern curl_easy_perform(curl As Pointer) As Pointer
 +
 +
<FONT Color=gray>' ''const char *curl_easy_strerror(CURLcode)''
 +
' ''Turn a CURLcode value into the equivalent human readable error string.''</font>
 +
Private Extern curl_easy_strerror(CURLcode As Integer) As String
 +
 +
<FONT Color=gray>' ''void curl_easy_cleanup(CURL *curl)''
 +
' ''End a libcurl easy handle.''</font>
 +
Private Extern curl_easy_cleanup(curl As Pointer)
 +
 +
 +
Library "<FONT color=#B22222>libc:6</font>"
 +
 +
<FONT Color=gray>' ''FILE *fopen (const char *__restrict __filename, const char *__restrict __modes)''
 +
  ' ''Open a file and create a new stream for it.''</font>
 +
  Private Extern fopen(__filename As String, __modes As String) As Pointer
 +
 +
<FONT Color=gray>' ''int fclose (FILE *__stream)''
 +
' ''Close STREAM.''</font>
 +
Private Extern fclose(__stream As Pointer) As Integer
 +
 +
 +
Public Sub Main()
 +
   
 +
  Dim cu, url, pagina As Pointer
 +
  Dim file_finale As String
 +
  Dim ris As Integer
 
    
 
    
  Dim s As String 
+
  <FONT Color=gray>' ''Imposta l'indirizzo della pagina web di cui scaricare i dati html:''</font>
 +
  url = Alloc("<FONT Color=darkgreen>''https:&#047;/indirizzo/della/pagina/web''</font>")
 
    
 
    
  <FONT color=#006400>' ''Carichiamo nella variabile di tipo stringa il codice HTML della pagina web:''</font>
+
  <FONT Color=gray>' ''Imposta il percorso del nuovo file generato con i dati html scaricati della pagina web:''</font>
  s = WebView1.<FONT color=#B22222>HTML</font>
+
  file_finale = "<FONT Color=darkgreen>''/percorso/del/nuovo/file.html''</font>"
 
      
 
      
   Print s  
+
<FONT Color=gray>' ''Inizilizza la libreria ''Libcurl':''</font>
    
+
  cu = curl_easy_init()
  '''End'''
+
  If cu = 0 Then Error.Raise("Impossibile inizializzare la libreria 'curl' !")
 +
    
 +
  curl_easy_setopt(cu, CURLOPT_URL, url)
 +
   
 +
  <FONT Color=gray>' ''Apre in scrittura il percorso del nuovo file da salvare:''</font>
 +
  pagina = fopen(file_finale, "wb")
 +
   
 +
<FONT Color=gray>' ''Scrive i dati html scaricati della pagina web nella variabile handle per la gestione del nuovo file da salvare:''</font>
 +
   curl_easy_setopt(cu, CURLOPT_WRITEDATA, pagina)
 +
 
 +
  <FONT Color=gray>' ''Scrive il nuovo file:''</font>
 +
  ris = curl_easy_perform(cu)
 +
  If ris <> 0 Then Error.Raise("Errore nella scrittura del file: " & curl_easy_strerror(ris))
 +
   
 +
   
 +
<FONT Color=gray>' ''Va in chiusura e libera tutta la memoria precedentemente allocata:''</font>
 +
  fclose(pagina)
 +
  Free(url)
 +
  curl_easy_cleanup(cu)
 +
 
 +
End
 +
 
 +
 
 +
 
 +
=Riferimenti=
 +
* https://curl.haxx.se/libcurl/
 +
* http://libcurl.org/
 +
 
  
  
 
=Note=
 
=Note=
 
[1] Il codice è stato proposto dall'utente ''fsurfing'' del forum del sito ''www.gambas-it.org''.
 
[1] Il codice è stato proposto dall'utente ''fsurfing'' del forum del sito ''www.gambas-it.org''.

Versione attuale delle 18:57, 20 gen 2024

L'acquisizione del codice HTML di una pagina web può essere effettuata mediante le modalità appresso descritte.

Uso delle sole risorse di Gambas

Vi sono due modalità che prevedono l'uso delle sole risorse di Gambas.

Uso dell'oggetto WebView

Per poter utilizzare l'oggetto WebView, bisognerà attivare anche il Componente gb.qui.qt.webkit o il Componente gb.qt5.webkit.
Verrà innanzitutto caricata la pagina web con la Proprietà ".Url" dell'Oggetto WebView. Successvamente si acquisirà il codice html di detta pagina mediante la Proprietà ".HTML":

Public Sub Form_Open()  

 WebView1.Url = "https://www.pagina_web_da_caricare"  

End


Public Sub WebView1_Finish()  ' Quando la pagina web è stata completamente caricata dalla "WebView", viene sollevato questo evento:
 
 Dim s As String  
  
' Carica nella variabile di tipo stringa il codice HTML della pagina web:
 s = WebView1.GetHtml()

' Salva il codice html, ottenuto, in apposito file:
 File.Save("/tmp/codice_html.html", s)
 
End

Uso dei Componenti gb.net e gb.net.curl

Si potrà innanzitutto acquisire l'intero codice HTML di una pagina web, utilizzando i Componenti gb.net e gb.net.curl nel modo che segue: [Nota 1]

Private mioHttp As NEW HttpClient As "mioHttp"
Private stringa As String  
 

Public Sub Button1_Click()  
                
  With mioHttp
    .URL = "https://www.pagina_web_da_caricare"           
    .Timeout = 15  
    .Get()
  End With

End


Public Sub mioHttp_Read()  
  
 Dim sBuf As String  
   
 Wait
 
 IF Lof(mioHttp) THEN   
   Read #mioHttp, sBuf, Lof(mioHttp)  
   stringa = stringa & sBuf  
 Endif
 
End
 

Public Sub mioHttp_Finished()
 
 Dim p, s As String  
 Dim i As Integer  
        
 Label1.Text = ("Pagina scaricata !")  
   
 Wait        
       
' La variabile stringa contiene la pagina html e viene visualizzata in una "TextArea":
 TextArea1.Text=stringa
       
 mioHttp.Close
 
End


Uso delle funzioni esterne della libreria Libcurl

Libcurl è una libreria gratuita lato-client di trasferimento dati con la sintassi URL, capace di supportare diversi protocolli.

Per poter fruire in Gambas delle risorse della libreria Libcurl, è necessario avere installata nel sistema e richiamare la libreria condivisa: "libcurl.so.4.8.0 ".


Mostriamo un esempio pratico:

Library "libcurl:4.8.0"

Private Const CURLOPT_WRITEDATA As Integer = 10001
Private Const CURLOPT_URL As Integer = 10002
   
' CURL *curl_easy_init(void)
' Start a libcurl easy session.
Private Extern curl_easy_init() As Pointer

' CURLcode curl_easy_setopt(CURL *curl, CURLoption option, ...)
' Set options for a curl easy handle
Private Extern curl_easy_setopt(curl As Pointer, optionI As Integer, optionP As Pointer) As Integer
 
' CURLcode curl_easy_perform(CURL *curl)
' Perform a blocking file transfer.
Private Extern curl_easy_perform(curl As Pointer) As Pointer

' const char *curl_easy_strerror(CURLcode)
' Turn a CURLcode value into the equivalent human readable error string.
Private Extern curl_easy_strerror(CURLcode As Integer) As String

' void curl_easy_cleanup(CURL *curl)
' End a libcurl easy handle.
Private Extern curl_easy_cleanup(curl As Pointer)


Library "libc:6"

' FILE *fopen (const char *__restrict __filename, const char *__restrict __modes)
' Open a file and create a new stream for it.
Private Extern fopen(__filename As String, __modes As String) As Pointer

' int fclose (FILE *__stream)
' Close STREAM.
Private Extern fclose(__stream As Pointer) As Integer


Public Sub Main()

 Dim cu, url, pagina As Pointer
 Dim file_finale As String
 Dim ris As Integer
 
' Imposta l'indirizzo della pagina web di cui scaricare i dati html:
 url = Alloc("https://indirizzo/della/pagina/web")
  
' Imposta il percorso del nuovo file generato con i dati html scaricati della pagina web:
 file_finale = "/percorso/del/nuovo/file.html"
    
' Inizilizza la libreria Libcurl':
 cu = curl_easy_init()
 If cu = 0 Then Error.Raise("Impossibile inizializzare la libreria 'curl' !")
  
 curl_easy_setopt(cu, CURLOPT_URL, url)
   
' Apre in scrittura il percorso del nuovo file da salvare:
 pagina = fopen(file_finale, "wb")
   
' Scrive i dati html scaricati della pagina web nella variabile handle per la gestione del nuovo file da salvare:
 curl_easy_setopt(cu, CURLOPT_WRITEDATA, pagina)
  
' Scrive il nuovo file:
 ris = curl_easy_perform(cu)
 If ris <> 0 Then Error.Raise("Errore nella scrittura del file: " & curl_easy_strerror(ris))
   
   
' Va in chiusura e libera tutta la memoria precedentemente allocata:
 fclose(pagina)
 Free(url)
 curl_easy_cleanup(cu)
  
End


Riferimenti


Note

[1] Il codice è stato proposto dall'utente fsurfing del forum del sito www.gambas-it.org.