Веб^(Web) стругање је чин издвајања података, информација или слика са веб локације помоћу аутоматизоване методе. Замислите^(Think) то као потпуно аутоматско копирање и лепљење.

Или пишемо или користимо апликацију да бисмо отишли ​​на веб локације на које желимо и направили копију одређених ствари које желимо са тих веб локација. То је много прецизније од преузимања целе веб локације^{(downloading an entire website)} .

Као и сваки други алат, веб стругање се може користити за добро или за зло. Неки од бољих разлога за брисање веб локација били би рангирање у претраживачу на основу његовог садржаја, куповине у поређењу са ценама или праћења информација о берзи. Можете га чак користити као својеврсно истраживачко средство.

Како могу да сцрапе веб странице помоћу програма Екцел^(Excel) ?

Веровали или не, Екцел^(Excel) већ дуже време има могућност да издваја податке са веб локација, барем од Екцел-а 2003^{(Excel 2003)} . Само што је веб стругање нешто о чему већина људи не размишља, а камоли да користи програм за табеларне прорачуне за обављање посла. Али то је изненађујуће лако и моћно. Хајде да научимо како се то ради тако што ћемо направити колекцију Мицрософт Оффице^{(Microsoft Office)} пречица на тастатури.

Пронађите сајтове које желите да сцрапете

Прва ствар коју ћемо урадити је да пронађемо одређене веб странице са којих желимо да добијемо информације. Идемо до извора и претражимо на https://support.office.com/ . Користићемо термин за претрагу „често коришћене пречице“. Можемо га учинити конкретнијим коришћењем назива одређене апликације, као што су Оутлоок^(Outlook) , Екцел^(Excel) , Ворд^(Word) итд. Можда би било добро да обележите страницу са резултатима како бисмо се тамо могли лако вратити.

Кликните^(Click) на резултат претраге „Пречице на тастатури у програму Екцел^(Excel) за Виндовс“. Када сте на тој страници, пронађите листу верзија програма Екцел^(Excel) и кликните на Новије верзије^{(Newer Versions)} . Сада радимо са најновијим и најбољим.

Могли бисмо да се вратимо на нашу страницу са резултатима претраге и отворимо резултате за све остале Оффице^(Office) апликације у њиховим картицама и обележимо их. То је добра идеја, чак и за ову вежбу. Овде би се већина људи зауставила у прикупљању Оффице^(Office) пречица, али не и ми. Ставићемо их у Екцел^(Excel) тако да можемо да радимо шта год желимо са њима, кад год желимо.

Отворите Екцел и Сцрапе

Отворите Екцел^(Excel) и покрените нову радну свеску. Сачувајте радну свеску као Оффице пречице^{(Office Shortcuts)} . Ако имате ОнеДриве, сачувајте га тамо да би функција АутоСаве^{(AutoSave )} радила.

Када је радна свеска сачувана, кликните на картицу Подаци^(Data) .

На траци картице Подаци кликните на ^(Data)Са веба^{(From Web)} .

Отвориће се прозор Чаробњака са веба . ^{(From Web )}Овде стављамо веб адресу или УРЛ^(URL) веб локације са које желимо да извучемо податке. Пређите на свој веб претраживач и копирајте^(copy) УРЛ.

Налепите УРЛ у УРЛ^(URL) поље чаробњака Са веба . ^{(From Web)}Могли бисмо изабрати да користимо ово у основном^(Basic) или напредном^(Advanced) режиму. Напредни режим нам даје много више опција како да приступимо подацима са веб локације . ^(Advanced)За ову вежбу потребан нам је само основни режим. Кликните ^(Click) на ОК^(OK) .

Екцел^(Excel) ће сада покушати да се повеже на веб локацију. Ово може потрајати неколико секунди. Видећемо прозор напретка, ако јесте.

Прозор Навигатор^(Navigator) ће се отворити и видећемо листу табела са веб локације са леве стране. Када га одаберемо, видећемо преглед табеле са десне стране. Хајде да изаберемо табелу Често коришћене пречице .^{(Frequently used shortcuts )}

Можемо да кликнемо на картицу Веб приказ^{(Web View)} да видимо стварну веб локацију, ако треба да потражимо табелу коју желимо. Када га пронађемо, можемо кликнути на њега и биће изабран за увоз.

Сада кликнемо на дугме Учитај^(Load) на дну овог прозора. Постоје и друге опције које можемо изабрати, које су сложеније и ван оквира нашег првог прегледа. Само будите свесни да су они тамо. Ексцел-ове могућности веб сцрапинг-а су веома моћне.

Веб табела ће се учитати у Екцел^(Excel) након неколико секунди. Видећемо податке са леве стране, где је број 1 на слици испод. Број 2 истиче упит^(Query) који се користи за добијање података са веб локације. Када имамо више упита у радној свесци, овде бирамо онај који треба да користимо.

Обратите пажњу^(Notice) да подаци долазе у табелу као Екцел^(Excel) табела. Већ је подешено да можемо да филтрирамо или сортирамо податке.

Овај процес можемо поновити за све друге веб странице које имају Оффице^(Office) пречице које желимо за Оутлоок^(Outlook) , Ворд^(Word) , Аццесс^(Access) , ПоверПоинт^(PowerPoint) и било коју другу Оффице^(Office) апликацију.

Одржавање ажурираних података^{(Scraped Data Current)} у Екцел -у^(Excel)

Као бонус за вас, научићемо како да сачувамо ажуриране податке у Екцел^(Excel) -у . Ово је одличан начин да се илуструје колико је Екцел^(Excel) моћан за сцрапинг података. Чак и са овим, радимо само најосновније стругање које Екцел^(Excel) може да уради.

За овај пример, користимо веб страницу са информацијама о акцијама као што је https://www.cnbc.com/stocks/ .

Прођите кроз оно што смо раније радили и копирајте и налепите нови УРЛ^(URL) са траке за адресу.

Доћи ћете до прозора Навигатора^(Navigator) и видети доступне табеле. Хајде да изаберемо главне америчке берзанске индексе^{(Major U.S. Stock Indices)} .

Када се подаци извуку, видећемо следећу табелу.

На десној страни видимо упит за главне америчке берзанске индексе^{(Major U.S. Stock Indexes)} . Изаберите^(Select) то тако да буде истакнуто. Уверите^(Make) се да смо на картици Алатке за табеле^{(Table Tools)} и у области Дизајн^(Design) . Затим кликните на стрелицу надоле испод Освежи^(Refresh) . Затим кликните на Својства везе^{(Connection Properties)} .

У прозору Својства упита , на картици ^{(Query Properties )}Употреба^(Usage) , можемо да контролишемо како се ове информације освежавају. Можемо да подесимо одређени временски период за освежавање или за освежавање када следећи пут отворимо радну свеску, или за освежавање у позадини, или било коју комбинацију овога. Када изаберемо шта нам треба, кликните на ОК^(OK) да затворите прозор и наставите.

То је то! Сада можете пратити цене акција, спортске резултате или било које друге податке који се често мењају из Екцел^(Excel) табеле. Ако сте добри са Екцел једначинама и функцијама^{(Excel equations and functions)} , са подацима можете да радите скоро све што желите.

Можда покушајте да идентификујете трендове акција, водите фантастични спортски базен на послу или можда само пратите временске прилике. Ко зна? Ваша машта и подаци доступни на Интернету^(Internet) су једина ограничења.

Use Excel as a Tool to Copy Data from the Web

Web scraping is the act of extracting data, information, or images from a website uѕing an automated method. Think of it as copy and paste on full automatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Користите нову функцију Екцел Мобиле „Инсерт Дата Фром Пицтуре“.

• Користите функције сумирања за сумирање података у Екцел-у

• Користите Екцел да бисте израчунали ефективну каматну стопу из номиналне каматне стопе

• Цртање ваших Екцел података

• Како филтрирати податке у Екцелу

• Како направити хистограм у Екцелу

• Како одузети датуме у Екцелу

• Како сакрити листове, ћелије, колоне и формуле у Екцелу

• Како снимити макро у Екцелу

• Како направити падајућу листу у Екцелу

• Како направити контролну листу у Екцелу

• Како користити Спарклинес у Екцелу

• Како упоредити две Екцел датотеке и истаћи разлике

• Како креирати Гантове графиконе у Мицрософт Екцел-у

• Форматирајте ћелије користећи условно форматирање у Екцел-у

• Како направити налепнице у Ворд-у из Екцел табеле

• Како отворити више инстанци Екцел-а

• Како разумети шта-ако анализу у Мицрософт Екцел-у

• Како груписати радне листове у Екцелу

• Како израчунати варијансу у Екцелу