Web scraping je čin vađenja podataka, informacija ili slika s web stranice pomoću automatizirane metode. Zamislite^(Think) to kao kopirajte i zalijepite potpuno automatski.

Ili pišemo ili koristimo aplikaciju da bismo otišli na web-mjesta na koja to želimo i napravili kopiju određenih stvari koje želimo s tih web-mjesta. Mnogo je preciznije od preuzimanja cijele web stranice^{(downloading an entire website)} .

Kao i svaki alat, web struganje se može koristiti za dobro ili zlo. Neki od boljih razloga za scraping web stranice bi bio rangiranje u tražilici na temelju njihovog sadržaja, usporedbe cijena kupovine ili praćenja informacija o burzi. Možete ga čak koristiti kao svojevrsni istraživački alat.

Kako mogu scrape web stranice s Excelom^(Excel) ?

Vjerovali ili ne, Excel već duže vrijeme ima mogućnost izdvajanja podataka s web-mjesta, barem od Excela 2003^{(Excel 2003)} . Samo što je web scraping nešto o čemu većina ljudi ne razmišlja, a kamoli na korištenje programa za proračunske tablice za obavljanje posla. Ali to je iznenađujuće jednostavno i moćno. Naučimo kako se to radi tako što ćemo napraviti zbirku tipkovnih prečaca za Microsoft Office .

Pronađite web-mjesta koja želite scrape

Prvo što ćemo učiniti je pronaći određene web stranice s kojih želimo dobiti informacije. Idemo na izvor i pretražimo na https://support.office.com/ . Koristit ćemo pojam za pretraživanje "često korišteni prečaci". Možemo ga učiniti konkretnijim korištenjem naziva određene aplikacije, kao što su Outlook , Excel , Word i tako dalje. Možda bi bilo dobro označiti stranicu s rezultatima kako bismo se lako mogli vratiti tamo.

Kliknite^(Click) na rezultat pretraživanja, "Tipkovnički prečaci u Excelu^(Excel) za Windows". Na toj stranici pronađite popis verzija programa Excel^(Excel) i kliknite Novije verzije^{(Newer Versions)} . Sada radimo s najnovijim i najboljim.

Mogli bismo se vratiti na našu stranicu s rezultatima pretraživanja i otvoriti rezultate za sve ostale aplikacije sustava Office na njihovim karticama i označiti ih. To je dobra ideja, čak i za ovu vježbu. Ovdje bi većina ljudi stala u prikupljanju Office prečaca, ali ne i mi. Stavit ćemo ih u Excel kako bismo s njima mogli raditi što god želimo, kad god želimo.

Otvorite Excel i Scrape

Otvorite Excel i pokrenite novu radnu knjigu. Spremite radnu knjigu kao Office prečace^{(Office Shortcuts)} . Ako imate OneDrive, spremite ga tamo kako bi funkcija automatskog spremanja radila.^{(AutoSave )}

Nakon što je radna knjiga spremljena, kliknite karticu Podaci^(Data) .

Na vrpci kartice Podaci kliknite ^(Data)S weba^{(From Web)} .

Otvorit će se prozor čarobnjaka s weba . ^{(From Web )}Ovdje stavljamo web adresu ili URL web-stranice s koje želimo izvući podatke. Prijeđite na svoj web preglednik i kopirajte^(copy) URL.

Zalijepite URL u URL polje čarobnjaka S weba . ^{(From Web)}Mogli bismo odabrati koristiti ovo u osnovnom^(Basic) ili naprednom^(Advanced) načinu rada. Napredni način^(Advanced) rada daje nam puno više opcija kako pristupiti podacima s web stranice. Za ovu vježbu potreban nam je samo osnovni način rada. Kliknite ^(Click) OK .

Excel će se sada pokušati spojiti na web stranicu. To može potrajati nekoliko sekundi. Vidjet ćemo prozor napretka, ako bude.

Otvorit će se prozor Navigatora^(Navigator) i na lijevoj strani vidjet ćemo popis tablica s web stranice. Kada ga odaberemo, vidjet ćemo pregled tablice s desne strane. Odaberimo tablicu Često korištenih prečaca .^{(Frequently used shortcuts )}

Možemo kliknuti karticu Web View da bismo vidjeli stvarnu web stranicu, ako trebamo potražiti tablicu koju želimo. Kada ga pronađemo, možemo kliknuti na njega i bit će odabran za uvoz.

Sada kliknemo na gumb Učitaj^(Load) na dnu ovog prozora. Postoje i druge opcije koje možemo izabrati, koje su složenije i izvan opsega našeg prvog pregleda. Samo budite svjesni da su oni tu. Excelove mogućnosti web scrapinga su vrlo moćne.

Web tablica će se učitati u Excel nakon nekoliko sekundi. Podatke ćemo vidjeti na lijevoj strani, gdje je broj 1 na slici ispod. Broj 2 ističe upit^(Query) koji se koristi za dobivanje podataka s web-mjesta. Kada imamo više upita u radnoj knjizi, ovdje odabiremo onaj koji trebamo koristiti.

Primijetite^(Notice) da podaci dolaze u proračunsku tablicu kao Excel tablica. Već je postavljeno da možemo filtrirati ili sortirati podatke.

Ovaj postupak možemo ponoviti za sve ostale web stranice koje imaju Office prečace koje želimo za Outlook , Word , Access , PowerPoint i bilo koju drugu aplikaciju sustava Office .

Održavanje struganih podataka aktualnim^{(Scraped Data Current)} u Excelu^(Excel)

Kao bonus za vas, naučit ćemo kako održavati ažurirane podatke u Excelu^(Excel) . Ovo je sjajan način da se ilustrira koliko je Excel moćan za scraping podataka. Čak i uz to, radimo samo najosnovnije scraping koje Excel može učiniti.

Za ovaj primjer, upotrijebimo web stranicu s informacijama o dionicama kao što je https://www.cnbc.com/stocks/ .

Prođite kroz ono što smo radili prije i kopirajte i zalijepite novi URL iz adresne trake.

Doći ćete do prozora Navigatora^(Navigator) i vidjeti dostupne tablice. Odaberimo glavne američke burzovne indekse^{(Major U.S. Stock Indices)} .

Kada se podaci izvuku, vidjet ćemo sljedeću proračunsku tablicu.

S desne strane vidimo upit za glavne američke burzovne indekse^{(Major U.S. Stock Indexes)} . Odaberite^(Select) to tako da bude istaknuto. Provjerite^(Make) jesmo li na kartici Alati^{(Table Tools)} za tablice i u području Dizajn^(Design) . Zatim kliknite strelicu prema dolje ispod Osvježi^(Refresh) . Zatim kliknite na Svojstva veze^{(Connection Properties)} .

U prozoru Svojstva upita^{(Query Properties )} , na kartici Upotreba^(Usage) , možemo kontrolirati kako se te informacije osvježavaju. Možemo postaviti određeno vremensko razdoblje za osvježavanje, ili za osvježavanje kada sljedeći put otvorimo radnu knjigu, ili za osvježavanje u pozadini, ili bilo koju kombinaciju ovoga. Nakon što odaberemo što nam treba, kliknite na OK za zatvaranje prozora i nastavak.

To je to! Sada možete pratiti cijene dionica, sportske rezultate ili bilo koje druge podatke koji se često mijenjaju iz Excel proračunske tablice. Ako ste dobri s Excelovim jednadžbama i funkcijama^{(Excel equations and functions)} , s podacima možete učiniti gotovo sve što želite.

Možda pokušajte identificirati trendove dionica, pokrenuti bazen fantastičnih sportova na poslu ili možda jednostavno pratiti vrijeme. Tko zna? Vaša mašta i podaci dostupni na Internetu^(Internet) , jedina su ograničenja.

Use Excel as a Tool to Copy Data from the Web

Wеb scraping is the act of extracting data, information, or images from a website usіng an aυtomated method. Think of it as copy and paste on full automatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Koristite novu funkciju "Umetanje podataka iz slike" u programu Excel Mobile

• Koristite funkcije sažetka za sažimanje podataka u Excelu

• Koristite Excel da biste izračunali efektivnu kamatnu stopu iz nominalne kamatne stope

• Izrada grafikona vaših Excel podataka

• Kako filtrirati podatke u Excelu

• Kako se prebacivati ​​između radnih listova u Excelu

• Kako snimiti makro u Excelu

• Kako napraviti histogram u Excelu

• Vodič za sve ekstenzije Excel datoteka i što one znače

• Kako izračunati varijancu u Excelu

• 40 najboljih Microsoft Excel tipkovničkih prečaca

• Kako napraviti kontrolnu listu u Excelu

• Kako stvoriti Ganttov grafikon u Microsoft Excelu

• Kako koristiti funkciju YEARFRAC u Excelu

• Umetnite Excel radni list u Word dokument

• Kako koristiti Excel AutoRecover i AutoBackup značajke

• Kako pronaći odgovarajuće vrijednosti u Excelu

• Oblikujte ćelije pomoću uvjetnog oblikovanja u Excelu

• Kako stvoriti i koristiti formule u tablicama u Wordu

• Kako razumjeti analizu što ako u Microsoft Excelu