Pengikisan web^{(Web scraping)} adalah tindakan mengekstraksi data, informasi, atau gambar dari situs web menggunakan metode otomatis. Anggap^(Think) saja sebagai salin dan tempel^{(copy and paste)} secara otomatis penuh.

Kami menulis atau menggunakan aplikasi untuk membuka situs web yang kami inginkan dan membuat salinan dari hal-hal spesifik yang kami inginkan dari situs web tersebut. Ini jauh lebih tepat daripada mengunduh seluruh situs web.

Seperti alat apa pun, pengikisan web dapat digunakan untuk kebaikan atau kejahatan. Beberapa alasan yang lebih baik untuk menggores situs web adalah dengan memeringkatnya di mesin pencari^{(search engine)} berdasarkan kontennya, perbandingan harga belanja^{(price comparison shopping)} , atau memantau informasi pasar saham^{(stock market information)} . Anda bahkan dapat menggunakannya sebagai semacam alat penelitian^{(research tool)} .

Bagaimana Saya Dapat Mengikis Situs Web dengan Excel ?

Percaya atau tidak, Excel telah memiliki kemampuan untuk mengekstrak data dari situs web untuk waktu yang lama, setidaknya sejak Excel 2003 . Hanya saja web scraping adalah sesuatu yang kebanyakan orang tidak pikirkan^{(t think)} , apalagi berpikir untuk menggunakan program spreadsheet^{(spreadsheet program)} untuk melakukan pekerjaan itu. Tapi itu sangat mudah, dan kuat. Mari pelajari cara melakukannya dengan membuat kumpulan pintasan keyboard Microsoft Office^{(Microsoft Office keyboard)} .

Temukan Situs yang Ingin Anda Kikis

Hal pertama yang akan kita lakukan adalah menemukan halaman web tertentu dari mana kita ingin mendapatkan informasi. Ayo ke sumbernya dan cari^{(source and search)} di https://support.office.com/ . Kami akan menggunakan istilah pencarian^{(search term)} "pintasan yang sering digunakan". Kita bisa membuatnya lebih spesifik dengan menggunakan nama aplikasi tertentu, seperti Outlook , Excel , Word , dan sebagainya. Mungkin ide yang baik untuk menandai halaman hasil sehingga kami dapat dengan mudah kembali ke sana.

Klik^(Click) pada hasil pencarian^{(search result)} , "Pintasan keyboard di Excel untuk Windows". Setelah berada di halaman itu, temukan daftar versi Excel dan klik Newer Versions . Sekarang kami bekerja dengan yang terbaru dan terbaik.

Kami dapat kembali ke halaman hasil pencarian kami dan membuka hasil untuk semua aplikasi Office lainnya^{(Office apps)} di tab mereka sendiri dan menandainya. Itu ide yang bagus, bahkan untuk latihan ini. Di sinilah kebanyakan orang akan berhenti mengumpulkan pintasan Office , tetapi bukan kami. ^(Office)Kami akan menempatkannya di Excel sehingga kami dapat melakukan apa pun yang kami inginkan dengan mereka, kapan pun kami mau.

Buka Excel dan Gosok

Buka Excel dan mulai buku kerja baru. Simpan buku kerja sebagai Pintasan Office^{(Office Shortcuts)} . Jika Anda memiliki OneDrive, simpan di sana sehingga fitur Simpan Otomatis^{(AutoSave )} akan berfungsi.

Setelah buku kerja disimpan, klik pada tab Data .

Di pita tab Data^{(Data tab)} , klik Dari Web^{(From Web)} .

Jendela panduan Dari Web^{(From Web )} akan terbuka. Di sinilah kami meletakkan alamat web atau URL^{(web address or URL)} situs web tempat kami ingin mengikis data. Beralih ke browser web Anda dan salin^(copy) URL-nya.

Tempelkan URL ke bidang URL dari wizard Dari Web^{(From Web wizard)} . Kita dapat memilih untuk menggunakan ini dalam mode Dasar^(Basic) atau Lanjutan . ^(Advanced)Mode Lanjutan^{(Advanced mode)} memberi kami lebih banyak opsi tentang cara mengakses data dari situs web. Untuk latihan ini, kita hanya membutuhkan mode Basic. Klik ^(Click) Oke^(OK) .

Excel sekarang akan mencoba menyambung ke situs web. Ini mungkin memakan waktu beberapa detik. Kita akan melihat jendela kemajuan^{(progress window)} , jika ya.

Jendela Navigator akan terbuka, dan kita akan melihat daftar tabel dari situs web di sebelah kiri. Saat kita memilih satu, kita akan melihat pratinjau tabel di sebelah kanan. Mari kita pilih tabel Pintasan yang sering digunakan .^{(Frequently used shortcuts )}

Kita bisa klik pada tab Web View untuk melihat website yang sebenarnya, jika kita perlu mencari-cari tabel yang kita inginkan. Ketika kami menemukannya, kami dapat mengkliknya dan itu akan dipilih untuk diimpor.

Sekarang, kita klik tombol Load di bagian bawah jendela ini. Ada opsi lain yang bisa kami pilih, yang lebih kompleks dan di luar cakupan melakukan goresan pertama kami. Sadarilah bahwa mereka ada di sana. Kemampuan pengikisan web Excel sangat kuat.

Tabel web^{(web table)} akan dimuat di Excel setelah beberapa detik. Kita lihat datanya di sebelah kiri, dimana angka 1 ada pada gambar di bawah ini. Nomor 2 menyoroti Query yang digunakan untuk mendapatkan data dari situs web. Saat kami memiliki beberapa kueri dalam buku kerja, di sinilah kami memilih salah satu yang perlu kami gunakan.

Perhatikan^(Notice) bahwa data masuk ke dalam spreadsheet sebagai tabel Excel. Itu sudah diatur agar kita bisa memfilter atau mengurutkan data.

Kami dapat mengulangi proses ini untuk semua halaman web lain yang memiliki pintasan Office yang kami inginkan untuk Outlook , Word , Access , PowerPoint , dan aplikasi Office^{(Office app)} lainnya .

Menjaga Data Tergores Saat Ini^{(Scraped Data Current)} di Excel

Sebagai bonus untuk Anda, kami akan mempelajari cara menjaga agar data tergores kami tetap segar di Excel . Ini adalah cara yang bagus untuk menggambarkan betapa hebatnya Excel untuk pengikisan data. Bahkan dengan ini, kami hanya melakukan pengikisan paling dasar yang dapat dilakukan Excel .

Untuk contoh ini, mari gunakan halaman web informasi stok seperti ^{(stock information)}https://www.cnbc.com/stocks/ .

Lihat apa yang kami lakukan sebelumnya dan salin dan tempel ^{(copy and paste)}URL baru dari bilah alamat^{(address bar)} .

Anda akan masuk ke jendela Navigator^{(Navigator window)} dan melihat tabel yang tersedia. Mari kita pilih Indeks Saham Utama AS^{(Major U.S. Stock Indices)} .

Setelah data tergores kita akan melihat spreadsheet berikut.

Di sebelah kanan, kita melihat kueri untuk Indeks Saham Utama AS^{(Major U.S. Stock Indexes)} . Pilih^(Select) itu sehingga disorot. Pastikan^(Make) kita berada di tab Table Tools dan di area ^{(Table Tools)}Design . Kemudian klik panah bawah di bawah Refresh . Kemudian klik Properti Koneksi^{(Connection Properties)} .

Di jendela Properti Kueri^{(Query Properties )} , di bawah tab Penggunaan^(Usage) , kita dapat mengontrol bagaimana informasi ini disegarkan. Kita bisa mengatur periode waktu tertentu untuk me-refresh, atau untuk me-refresh ketika kita membuka buku kerja di lain waktu, atau untuk me-refresh di latar belakang, atau kombinasi dari semuanya. Setelah kami memilih apa yang kami butuhkan, klik OK untuk menutup jendela dan melanjutkan.

Itu dia! Sekarang Anda dapat melacak harga saham, skor olahraga, atau data lain yang sering berubah dari spreadsheet Excel^{(Excel spreadsheet)} . Jika Anda mahir dengan persamaan dan fungsi Excel , Anda dapat melakukan hampir semua hal yang Anda inginkan dengan data tersebut.

Mungkin mencoba mengidentifikasi tren saham, menjalankan kolam olahraga fantasi di tempat kerja, atau mungkin hanya melacak cuaca. Siapa tahu? Imajinasi Anda dan data yang tersedia di Internet , adalah satu-satunya batasan.

Use Excel as a Tool to Copy Data from the Web

Web scraping is the аct of extracting data, information, or images frоm a website using an automated method. Think оf it as copy and paste on full automatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Gunakan Fungsi "Sisipkan Data Dari Gambar" Baru di Excel Mobile

• Gunakan Fungsi Ringkasan untuk Meringkas Data di Excel

• Gunakan Excel untuk Mengetahui Suku Bunga Efektif dari Suku Bunga Nominal

• Memetakan Data Excel Anda

• Cara Memfilter Data di Excel

• Cara Menggunakan Fungsi YEARFRAC di Excel

• Cara Create and Use AutoText di Microsoft Word

• Cara Group Worksheets di Excel

• Cara Mengatur dan Menggunakan Format MLA di Microsoft Word

• Gunakan Format Painter di Word untuk Menyalin dan Menempel Pemformatan

• Masukkan Lembar Kerja Excel ke dalam Word Doc

• Cara Membuka Banyak Instance Excel

• Panduan Untuk Semua Ekstensi File Excel & Apa Artinya

• Cara Menghapus, Memecahkan, atau Mematahkan Kata Sandi Excel XLS yang Terlupakan

• Cara Membuat Gantt Charts di Microsoft Excel

• Cara Membuat Drop Down List di Excel

• Cara Menemukan Nilai yang Cocok di Excel

• Cara Create Labels di Word dari Excel Spreadsheet

• Cara Membuat Flowchart di Word and Excel

• Cara Menyembunyikan Lembar, Sel, Kolom, dan Rumus di Excel