Il web scraping^{(Web scraping)} è l'atto di estrarre dati, informazioni o immagini da un sito Web utilizzando un metodo automatizzato. Pensalo^(Think) come copia e incolla^{(copy and paste)} in modo completamente automatico.

Scriviamo o utilizziamo un'app per accedere ai siti Web che desideriamo e fare una copia delle cose specifiche che desideriamo da quei siti Web. È molto più preciso del download di un intero sito web.

Come qualsiasi strumento, il web scraping può essere utilizzato nel bene o nel male. Alcuni dei motivi migliori per lo scraping dei siti Web potrebbero essere il posizionamento in un motore di ricerca in^{(search engine)} base al contenuto, agli acquisti^{(price comparison shopping)} di confronto dei prezzi o al monitoraggio delle informazioni sul mercato azionario^{(stock market information)} . Potresti persino usarlo come una sorta di strumento di ricerca .^{(research tool)}

Come posso raschiare i siti Web con Excel ?

Che ci crediate o no, Excel ha avuto la capacità di estrarre dati dai siti Web per molto tempo, almeno da Excel 2003 . È solo che il web scraping è qualcosa a cui la maggior parte delle persone non pensa^{(t think)} , per non parlare di usare un programma di fogli^{(spreadsheet program)} di calcolo per fare il lavoro. Ma è sorprendentemente facile e potente. Impariamo come è fatto creando una raccolta di scorciatoie da tastiera di Microsoft Office^{(Microsoft Office keyboard)} .

Trova i siti che vuoi raschiare

La prima cosa che faremo è trovare le pagine web specifiche da cui vogliamo ottenere informazioni. Andiamo alla fonte e cerchiamo^{(source and search)} su https://support.office.com/ . Utilizzeremo il termine di ricerca^{(search term)} "scorciatoie usate di frequente". Possiamo renderlo più specifico usando il nome dell'app specifica, come Outlook , Excel , Word e così via. Potrebbe essere una buona idea aggiungere la pagina dei risultati ai segnalibri in modo da poterci tornare facilmente.

Fare clic^(Click) sul risultato della ricerca^{(search result)} , "Scorciatoie da tastiera in Excel per Windows". Una volta in quella pagina, trova l'elenco delle versioni di Excel e fai clic su Versioni più recenti^{(Newer Versions)} . Ora stiamo lavorando con l'ultimo e il più grande.

Potremmo tornare alla nostra pagina dei risultati di ricerca e aprire i risultati per tutte le altre app di Office^{(Office apps)} nelle loro schede e aggiungerli ai segnalibri. È una buona idea, anche per questo esercizio. È qui che la maggior parte delle persone si fermerebbe nella raccolta di scorciatoie di Office , ma non noi. ^(Office)Li metteremo in Excel così possiamo fare quello che vogliamo con loro, quando vogliamo.

Apri Excel e cancella

Apri Excel e avvia una nuova cartella di lavoro. Salva la cartella di lavoro come Collegamenti di Office^{(Office Shortcuts)} . Se hai OneDrive, salvalo lì in modo che la funzione di salvataggio automatico^{(AutoSave )} funzioni.

Una volta salvata la cartella di lavoro, fare clic sulla scheda Dati .^(Data)

Nella barra multifunzione della scheda Dati^{(Data tab)} , fare clic su Dal Web^{(From Web)} .

Si aprirà la finestra della procedura guidata Dal Web . ^{(From Web )}Qui è dove inseriamo l' indirizzo web o l'URL^{(web address or URL)} del sito web da cui vogliamo estrarre i dati. Passa al tuo browser web e copia^(copy) l'URL.

Incollare l'URL nel campo URL della procedura guidata Dal Web^{(From Web wizard)} . Potremmo scegliere di usarlo in modalità Base^(Basic) o Avanzata^(Advanced) . La modalità Avanzata^{(Advanced mode)} ci offre molte più opzioni su come accedere ai dati dal sito web. Per questo esercizio, abbiamo solo bisogno della modalità Base. Fare clic su ^(Click) OK .

Excel tenterà ora di connettersi al sito Web. Questa operazione potrebbe richiedere alcuni secondi. Vedremo una finestra di avanzamento^{(progress window)} , se lo fa.

Si aprirà la finestra del Navigatore^(Navigator) e sulla sinistra vedremo un elenco di tabelle dal sito web. Quando ne selezioniamo uno, vedremo un'anteprima della tabella sulla destra. Selezioniamo la tabella delle scorciatoie usate di frequente^{(Frequently used shortcuts )} .

Possiamo fare clic sulla scheda Visualizzazione Web^{(Web View)} per vedere il sito Web effettivo, se dobbiamo cercare il tavolo che desideriamo. Quando lo troviamo, possiamo fare clic su di esso e verrà selezionato per l'importazione.

Ora, facciamo clic sul pulsante Carica^(Load) nella parte inferiore di questa finestra. Ci sono altre opzioni che potremmo scegliere, che sono più complesse e oltre lo scopo del nostro primo scraping. Basta essere consapevoli che sono lì. Le capacità di web scraping di Excel sono molto potenti.

La tabella web^{(web table)} verrà caricata in Excel dopo pochi secondi. Vedremo i dati a sinistra, dove il numero 1 è nell'immagine qui sotto. Il numero 2 evidenzia la Query utilizzata per ottenere i dati dal sito web. Quando abbiamo più query in una cartella di lavoro, è qui che selezioniamo quella che dobbiamo usare.

Si noti^(Notice) che i dati entrano nel foglio di calcolo come una tabella di Excel. È già configurato per poter filtrare o ordinare i dati.

Possiamo ripetere questo processo per tutte le altre pagine Web che dispongono dei collegamenti di Office desiderati per ^(Office)Outlook , Word , Access , PowerPoint e qualsiasi altra app di Office^{(Office app)} .

Mantenere aggiornati i dati raschiati^{(Scraped Data Current)} in Excel

Come bonus per te, impareremo come mantenere aggiornati i nostri dati raschiati in Excel . Questo è un ottimo modo per illustrare quanto sia potente Excel per lo scraping dei dati. Anche con questo, stiamo eseguendo solo lo scraping più semplice che Excel può fare.

Per questo esempio, utilizziamo una pagina Web di informazioni sulle azioni come ^{(stock information)}https://www.cnbc.com/stocks/ .

Esamina ciò che abbiamo fatto prima e copia e incolla^{(copy and paste)} il nuovo URL dalla barra degli indirizzi^{(address bar)} .

Arriverai alla finestra del Navigatore^{(Navigator window)} e vedrai le tabelle disponibili. Selezioniamo i principali indici azionari statunitensi^{(Major U.S. Stock Indices)} .

Una volta che i dati sono stati raschiati, vedremo il seguente foglio di calcolo.

Sulla destra, vediamo la query per i principali indici azionari statunitensi^{(Major U.S. Stock Indexes)} . Selezionalo^(Select) in modo che sia evidenziato. Assicurati^(Make) di essere nella scheda Strumenti^{(Table Tools)} tabella e nell'area Progettazione^(Design) . Quindi fare clic sulla freccia giù sotto Aggiorna^(Refresh) . Quindi fare clic su Proprietà connessione^{(Connection Properties)} .

Nella finestra Proprietà della query , nella scheda ^{(Query Properties )}Utilizzo^(Usage) , possiamo controllare il modo in cui queste informazioni vengono aggiornate. Possiamo impostare un periodo di tempo specifico per l'aggiornamento, o per l'aggiornamento quando apriamo la cartella di lavoro la prossima volta, o per l'aggiornamento in background, o qualsiasi combinazione di questi. Una volta scelto ciò di cui abbiamo bisogno, fare clic su OK per chiudere la finestra e continuare.

Questo è tutto! Ora puoi tenere traccia dei prezzi delle azioni, dei risultati sportivi o di qualsiasi altro dato che cambia frequentemente da un foglio di calcolo Excel^{(Excel spreadsheet)} . Se sei bravo con le equazioni e le funzioni di Excel , puoi fare quasi tutto ciò che vuoi con i dati.

Forse prova a identificare le tendenze delle azioni, gestisci un pool di sport fantasy al lavoro o forse semplicemente tieni traccia del tempo. Chissà? La tua immaginazione ei dati disponibili su Internet , sono gli unici limiti.

Use Excel as a Tool to Copy Data from the Web

Web scraping is thе act of extracting data, information, or images from a website uѕing an automated method. Think of it as copy and pаste on full automatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Utilizzare la nuova funzione "Inserisci dati dall'immagine" di Excel Mobile

• Utilizzare le funzioni di riepilogo per riassumere i dati in Excel

• Usa Excel per capire un tasso di interesse effettivo da un tasso di interesse nominale

• Tracciare i tuoi dati Excel

• Come filtrare i dati in Excel

• Come usare CERCA.VERT in Excel

• Utilizzare la finestra di controllo di Excel per monitorare le celle importanti in una cartella di lavoro

• Come tenere traccia delle modifiche in Excel

• Collega celle tra fogli e cartelle di lavoro in Excel

• Come creare una lista di controllo in Excel

• Come capire l'analisi what-if in Microsoft Excel

• Adatta automaticamente le larghezze delle colonne e le altezze delle righe in Excel

• Come Create Labels in Word da uno Excel Spreadsheet

• Come impostare e utilizzare il formato MLA in Microsoft Word

• Come utilizzare la funzione YEARFRAC in Excel

• Come saldamente Password Protect A Excel File

• Come utilizzare le funzionalità di ripristino automatico e backup automatico di Excel

• Come creare uno Flowchart in Word and Excel

• Come creare Gantt Charts in Microsoft Excel

• Come aggiungere commenti a una cella del foglio di lavoro di Excel