Η απόξεση Ιστού^(Web) είναι η πράξη εξαγωγής δεδομένων, πληροφοριών ή εικόνων από έναν ιστότοπο χρησιμοποιώντας μια αυτοματοποιημένη μέθοδο. Σκεφτείτε^(Think) το ως αντιγραφή και επικόλληση σε πλήρη αυτόματη λειτουργία.

Είτε γράφουμε είτε χρησιμοποιούμε μια εφαρμογή για να μεταβούμε στους ιστότοπους που θέλουμε και να κάνουμε ένα αντίγραφο των συγκεκριμένων πραγμάτων που θέλουμε από αυτούς τους ιστότοπους. Είναι πολύ πιο ακριβές από τη λήψη ενός ολόκληρου ιστότοπου^{(downloading an entire website)} .

Όπως κάθε εργαλείο, το web scraping μπορεί να χρησιμοποιηθεί για καλό ή κακό. Μερικοί από τους καλύτερους λόγους για την απόξεση ιστοτόπων θα ήταν η κατάταξή τους σε μια μηχανή αναζήτησης με βάση το περιεχόμενό τους, οι αγορές σύγκρισης τιμών ή η παρακολούθηση πληροφοριών χρηματιστηρίου. Μπορείτε ακόμη και να το χρησιμοποιήσετε ως εργαλείο έρευνας.

Πώς μπορώ να σκάψω ιστότοπους με το Excel^(Excel) ;

Είτε το πιστεύετε είτε όχι, το Excel^(Excel) είχε τη δυνατότητα να εξάγει δεδομένα από ιστότοπους εδώ και πολύ καιρό, τουλάχιστον από το Excel 2003 . Απλώς η απόξεση ιστού είναι κάτι που οι περισσότεροι άνθρωποι δεν σκέφτονται, πόσο μάλλον να σκεφτούν να χρησιμοποιήσουν ένα πρόγραμμα υπολογιστικών φύλλων για να κάνουν τη δουλειά. Αλλά είναι εκπληκτικά εύκολο και ισχυρό. Ας μάθουμε πώς γίνεται δημιουργώντας μια συλλογή από συντομεύσεις πληκτρολογίου του Microsoft Office .

Βρείτε τους ιστότοπους που θέλετε να ξύσετε

Το πρώτο πράγμα που θα κάνουμε είναι να βρούμε τις συγκεκριμένες ιστοσελίδες από τις οποίες θέλουμε να λάβουμε πληροφορίες. Ας πάμε στην πηγή και ας κάνουμε αναζήτηση στη https://support.office.com/ . Θα χρησιμοποιήσουμε τον όρο αναζήτησης "συντομεύσεις που χρησιμοποιούνται συχνά". Μπορούμε να το κάνουμε πιο συγκεκριμένο χρησιμοποιώντας το όνομα της συγκεκριμένης εφαρμογής, όπως το Outlook , το Excel^(Excel) , το Word και ούτω καθεξής. Ίσως είναι καλή ιδέα να προσθέσετε σελιδοδείκτη στη σελίδα αποτελεσμάτων, ώστε να μπορέσουμε να επιστρέψουμε εύκολα εκεί.

Κάντε κλικ^(Click) στο αποτέλεσμα αναζήτησης, "Συντομεύσεις πληκτρολογίου στο Excel για Windows". Μόλις μεταβείτε σε αυτήν τη σελίδα, βρείτε τη λίστα με τις εκδόσεις του Excel και κάντε κλικ στο Νεότερες εκδόσεις^{(Newer Versions)} . Τώρα εργαζόμαστε με τα πιο πρόσφατα και καλύτερα.

Θα μπορούσαμε να επιστρέψουμε στη σελίδα αποτελεσμάτων αναζήτησης και να ανοίξουμε τα αποτελέσματα για όλες τις άλλες εφαρμογές του Office στις δικές τους καρτέλες και να τις προσθέσουμε σελιδοδείκτες. Είναι μια καλή ιδέα, ακόμα και για αυτήν την άσκηση. Εδώ θα σταματούσαν οι περισσότεροι να συλλέγουν συντομεύσεις του Office , αλλά όχι εμείς. ^(Office)Θα τα βάλουμε στο Excel για να μπορούμε να κάνουμε ό,τι θέλουμε μαζί τους, όποτε θέλουμε.

Ανοίξτε το Excel και το Scrape

Ανοίξτε το Excel^(Excel) και ξεκινήστε ένα νέο βιβλίο εργασίας. Αποθηκεύστε το βιβλίο εργασίας ως Συντομεύσεις του Office^{(Office Shortcuts)} . Εάν διαθέτετε OneDrive, αποθηκεύστε το εκεί για να λειτουργήσει η λειτουργία Αυτόματης αποθήκευσης^{(AutoSave )} .

Μόλις αποθηκευτεί το βιβλίο εργασίας, κάντε κλικ στην καρτέλα Δεδομένα .^(Data)

Στην κορδέλα της καρτέλας Δεδομένα , κάντε κλικ στο ^(Data)Από τον Ιστό^{(From Web)} .

Θα ανοίξει το παράθυρο του οδηγού From Web . Εδώ τοποθετούμε τη διεύθυνση ιστού ή τη διεύθυνση URL^(URL) του ιστότοπου από τον οποίο θέλουμε να αφαιρέσουμε δεδομένα. Μεταβείτε στο πρόγραμμα περιήγησής σας και αντιγράψτε^(copy) τη διεύθυνση URL.

Επικολλήστε τη διεύθυνση URL στο πεδίο URL του οδηγού Από τον Ιστό . ^{(From Web)}Θα μπορούσαμε να επιλέξουμε να το χρησιμοποιήσουμε σε Basic ή Advanced mode. Η Προηγμένη^(Advanced) λειτουργία μας δίνει πολλές περισσότερες επιλογές για τον τρόπο πρόσβασης στα δεδομένα από τον ιστότοπο. Για αυτήν την άσκηση, χρειαζόμαστε μόνο τη Βασική λειτουργία. Κάντε κλικ ^(Click) στο OK^(OK) .

Το Excel^(Excel) θα επιχειρήσει τώρα να συνδεθεί στον ιστότοπο. Αυτό μπορεί να διαρκέσει μερικά δευτερόλεπτα. Θα δούμε ένα παράθυρο προόδου, αν συμβεί.

Θα ανοίξει το παράθυρο του Navigator και θα δούμε μια λίστα πινάκων από τον ιστότοπο στα αριστερά. Όταν επιλέξουμε ένα, θα δούμε μια προεπισκόπηση πίνακα στα δεξιά. Ας επιλέξουμε τον πίνακα Συντομεύσεις που χρησιμοποιούνται συχνά .^{(Frequently used shortcuts )}

Μπορούμε να κάνουμε κλικ στην καρτέλα Προβολή Ιστού^{(Web View)} για να δούμε τον πραγματικό ιστότοπο, εάν χρειάζεται να ψάξουμε γύρω μας για τον πίνακα που θέλουμε. Όταν το βρούμε, μπορούμε να κάνουμε κλικ πάνω του και θα επιλεγεί για εισαγωγή.

Τώρα, κάνουμε κλικ στο κουμπί Φόρτωση^(Load) στο κάτω μέρος αυτού του παραθύρου. Υπάρχουν και άλλες επιλογές που θα μπορούσαμε να διαλέξουμε, οι οποίες είναι πιο περίπλοκες και ξεπερνούν τα όρια του να κάνουμε το πρώτο μας ξύσιμο. Απλά να ξέρετε ότι είναι εκεί. Οι δυνατότητες απόξεσης ιστού του Excel είναι πολύ ισχυρές.

Ο πίνακας Ιστού θα φορτωθεί στο Excel μετά από λίγα δευτερόλεπτα. Θα δούμε τα δεδομένα στα αριστερά, όπου ο αριθμός 1 είναι στην παρακάτω εικόνα. Ο αριθμός 2 επισημαίνει το ερώτημα^(Query) που χρησιμοποιήθηκε για τη λήψη των δεδομένων από τον ιστότοπο. Όταν έχουμε πολλά ερωτήματα σε ένα βιβλίο εργασίας, εδώ επιλέγουμε αυτό που πρέπει να χρησιμοποιήσουμε.

Σημειώστε^(Notice) ότι τα δεδομένα έρχονται στο υπολογιστικό φύλλο ως πίνακας Excel . Είναι ήδη ρυθμισμένο για να μπορούμε να φιλτράρουμε ή να ταξινομούμε τα δεδομένα.

Μπορούμε να επαναλάβουμε αυτή τη διαδικασία για όλες τις άλλες ιστοσελίδες που έχουν τις συντομεύσεις του Office που θέλουμε για το Outlook , το Word^(Word) , την Access , το PowerPoint^(PowerPoint) και οποιαδήποτε άλλη εφαρμογή του Office^(Office) .

Διατήρηση τρέχοντος αποκομμένου δεδομένων^{(Scraped Data Current)} στο Excel

Ως μπόνους για εσάς, θα μάθουμε πώς να διατηρούμε φρέσκα τα αποκομμένα δεδομένα μας στο Excel . Αυτός είναι ένας πολύ καλός τρόπος για να δείξετε πόσο ισχυρό είναι το Excel^(Excel) για την απόξεση δεδομένων. Ακόμη και με αυτό, κάνουμε μόνο την πιο βασική απόξεση που μπορεί να κάνει το Excel .

Για αυτό το παράδειγμα, ας χρησιμοποιήσουμε μια ιστοσελίδα πληροφοριών μετοχών όπως η https://www.cnbc.com/stocks/ .

Ανατρέξτε σε αυτό που κάναμε πριν και αντιγράψτε και επικολλήστε τη νέα διεύθυνση URL^(URL) από τη γραμμή διευθύνσεων.

Θα μεταβείτε στο παράθυρο του Navigator και θα δείτε τους διαθέσιμους πίνακες. Ας επιλέξουμε τους κύριους δείκτες μετοχών των ΗΠΑ^{(Major U.S. Stock Indices)} .

Μόλις αποξεσθούν τα δεδομένα, θα δούμε το παρακάτω υπολογιστικό φύλλο.

Στα δεξιά, βλέπουμε το ερώτημα για τους σημαντικούς δείκτες μετοχών των ΗΠΑ^{(Major U.S. Stock Indexes)} . Επιλέξτε^(Select) το ώστε να τονίζεται. Βεβαιωθείτε^(Make) ότι βρισκόμαστε στην καρτέλα Εργαλεία πίνακα και στην περιοχή ^{(Table Tools)}Σχεδίαση^(Design) . Στη συνέχεια, κάντε κλικ στο κάτω βέλος στην περιοχή Ανανέωση^(Refresh) . Στη συνέχεια, κάντε κλικ στις Ιδιότητες σύνδεσης^{(Connection Properties)} .

Στο παράθυρο Ιδιότητες ερωτήματος , στην καρτέλα ^{(Query Properties )}Χρήση^(Usage) , μπορούμε να ελέγξουμε τον τρόπο ανανέωσης αυτών των πληροφοριών. Μπορούμε να ορίσουμε μια συγκεκριμένη χρονική περίοδο για ανανέωση ή για ανανέωση όταν ανοίγουμε το βιβλίο εργασίας την επόμενη φορά ή για ανανέωση στο παρασκήνιο ή οποιονδήποτε συνδυασμό αυτών. Αφού επιλέξουμε τι χρειαζόμαστε, κάνουμε κλικ στο OK για να κλείσουμε το παράθυρο και να συνεχίσουμε.

Αυτό είναι! Τώρα μπορείτε να παρακολουθείτε τις τιμές των μετοχών, τα αποτελέσματα των αθλημάτων ή οποιαδήποτε άλλα δεδομένα αλλάζουν συχνά από ένα υπολογιστικό φύλλο του Excel . Εάν είστε καλοί με τις εξισώσεις και τις συναρτήσεις του Excel^{(Excel equations and functions)} , μπορείτε να κάνετε σχεδόν ό,τι θέλετε με τα δεδομένα.

Ίσως προσπαθήσετε να προσδιορίσετε τις τάσεις των μετοχών, να οργανώσετε μια πισίνα φαντασίας αθλητικών στη δουλειά ή ίσως απλώς να παρακολουθείτε τον καιρό. Ποιός ξέρει? Η φαντασία σας και τα δεδομένα που είναι διαθέσιμα στο Διαδίκτυο^(Internet) , είναι τα μόνα όρια.

Use Excel as a Tool to Copy Data from the Web

Web scraping is the act of extracting data, information, or images from a website usіng an automated method. Think of it as copy and paste on full autоmatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Χρησιμοποιήστε τη νέα συνάρτηση "Εισαγωγή δεδομένων από εικόνα" του Excel Mobile

• Χρησιμοποιήστε τις συναρτήσεις σύνοψης για τη σύνοψη δεδομένων στο Excel

• Χρησιμοποιήστε το Excel για να υπολογίσετε ένα πραγματικό επιτόκιο από ένα ονομαστικό επιτόκιο

• Χαρτογράφηση των δεδομένων σας Excel

• Πώς να φιλτράρετε δεδομένα στο Excel

• Πώς να παρακολουθείτε τις αλλαγές στο Excel

• Μορφοποίηση κελιών χρησιμοποιώντας Μορφοποίηση υπό όρους στο Excel

• Πώς να κατανοήσετε την ανάλυση What-If στο Microsoft Excel

• Πώς να δημιουργήσετε και να χρησιμοποιήσετε τύπους σε πίνακες στο Word

• Πώς να βρείτε αντίστοιχες τιμές στο Excel

• Σύνδεση κελιών μεταξύ φύλλων και βιβλίων εργασίας στο Excel

• Αυτόματη προσαρμογή πλάτη στηλών και ύψη γραμμής στο Excel

• Οι 40 καλύτερες συντομεύσεις πληκτρολογίου του Microsoft Excel

• Πώς να χρησιμοποιήσετε τις δυνατότητες AutoRecover και AutoBackup του Excel

• Πώς να δημιουργήσετε ετικέτες στο Word από ένα υπολογιστικό φύλλο του Excel

• Πώς να δημιουργήσετε γραφήματα Gantt στο Microsoft Excel

• Πώς να χρησιμοποιήσετε τη σύγκριση και τον συνδυασμό εγγράφων στο Word

• Οδηγός βασικών στοιχείων του Microsoft Excel – Μάθετε πώς να χρησιμοποιείτε το Excel

• Πώς να χρησιμοποιήσετε τη συνάρτηση YEARFRAC στο Excel

• Πώς να ρυθμίσετε και να χρησιμοποιήσετε τη μορφή MLA στο Microsoft Word