hur importerar du Data från en webbplats till Excel?

hur importerar du Data från en webbplats till Excel?

det är välkänt att World Wide Web innehåller enorma användbara data. Vi måste dock importera data till Microsoft Excel innan vi gör någon form av analys. Det finns två metoder som du kan använda för att slutföra denna typ av uppgift.

hämta externa Data från webben manuellt

Antag att du vill ladda ner intäkter om bästa moneymaking filmer från denna webbsida, här visar hur du gör det enkelt.

öppna Microsoft Excel och klicka på fliken Data, i gruppen hämta externa Data, Klicka på från Web. När dialogrutan Ny webbfråga visas kopierar du webbadressen (http://www.the-numbers.com/movie/records/All-Time-Worldwide-Box-Office) till adressfältet och klickar på Go-knappen. Excel kommer att börja ladda ner webbsidan som visas i Figur 1.1. Klicka bara på Nej Om du får en varningsruta för skriptfel som liknar den i figuren nedan. Lådan kommer att försvinna och det har ingen inverkan på din importprocess.

det finns en pil i den gula rutan i det övre högra hörnet av dialogrutan Ny webbfråga. Genom att klicka på den kan du bestämma om du vill visa liknande ikoner före tabeller eller inte. Det finns till exempel ingen pilikon bredvid tabellen i den vänstra panelen i Figur 1.2. Och det kommer att finnas en ikon (i den högra panelen) när du klickar på pilknappen för att visa ikoner.

klicka på pilikonen bredvid tabellerna som du vill välja. Ikonerna och tabellerna ändras och liknar dem som visas i den vänstra panelen i Figur 1.3. När du klickar på Importera kommer en dialogruta för importdata att uppmanas. Fyll i intervallet (från kolumn A till kolumn H i vårt fall) där du vill lägga data och klicka på OK.

data importeras till Excel när du klickar på Ok. Om du högerklickar på någon cell i tabellen och väljer Uppdatera, kommer Excel att gå ut och dra ut de senaste uppgifterna från en webbsida.

och du kan till och med ställa in dina frågedata för att uppdateras på vilket sätt du vill. Högerklicka bara på vilken cell som helst i tabellen, välj Data Range Properties. I dialogrutan Egenskaper för externa dataintervall kan du ändra inställningarna för uppdateringskontroll för att ändra formatet. Du kan till exempel ange frågan som ska uppdateras var 60: e minut eller när filen öppnas.

skrapa data med VBA-programmering

VBA-programmering kan användas för att skrapa data från en webbsida. Det är mycket mer användbart medan det är svårt att jämföra med det första tillvägagångssättet. Dessutom måste du förstå vad HTML är innan du lär dig att skrapa data med VBA-programmering. Jag rekommenderar dig att lära dig grundläggande kunskaper om HTML från den här webbplatsen om du inte vet något eller lite om HTML. Och härifrån kan du lära dig nästan allt relaterat till webbskrapning med VBA. Den här artikeln visar bara två exempel.

skrapa data från en webbsida

Antag att vi vill extrahera företagsnamn, e-postadress och kontaktnamn från den här webbsidan. Om du öppnar den här webbsidan kommer du att upptäcka att det finns ett kontaktblock längst ner. Figur 2.1 visar kontaktblocket och motsvarande källkod. Information i röda rutor är vad vi vill behöva. Och de med en grön understrykning är exakt vad vi behöver extrahera.

följande kod kan hjälpa dig att extrahera ovanstående begärda information och lägga dem i det första kalkylbladet.

”dvs.dokument.getElementsByClassName (”contact-details block dark”) ” kan göra det möjligt för dig att få alla element med klassnamnet – contact-details block dark. Denna webbsida listar nästan alla egenskaper och metoder som kan användas på HTML-element. Du kan välja lämplig för ditt eget problem.

egenskapen innerHTML låter dig ställa in eller returnera innehållet i ett HTML-element. I vårt fall returnerade det innehållet i elementet med klassnamnet ”contact-details block dark” och ställde det till en variabel htext. Innehållet (figur 2.2) kan uppmanas av ’Msgbox htext’.

du kan se att texten är välstrukturerad. Det är därför vi kan använda delad funktion för att extrahera vad som behöver. Om vi till exempel tar ” <p>företagsnamn:”som avgränsare och Formel ”Split(htext, ”<p>företagsnamn:”) (1) ”kan returnera hela texten efter”<p>företagsnamn:”. För denna nyligen returnerade text kan vi ta ”<br” som avgränsare och få texten före den första ”< br” och det är företagsnamnet. Sammanfattningsvis är SPLIT-funktionen ett flexibelt verktyg som du kan använda för att extrahera nästan allt. Andra användbara funktioner inkluderar LEN, INSTR, vänster, höger, mitten och ersätt. Jag kommer inte att diskutera i detalj här.

när du klickar på OK i Figur 2.2, de begärda uppgifterna kan importeras från webben till ett Excel-kalkylblad. Till exempel innehåller cell A1 företagsnamnet medan cell A4 innehåller företagets webbadress.

genom att lägga till koden nedan innan du sparar arbetsboken kan du lägga till en hyperlänk i cell A4.

om du klickar på cell A4 kan du besöka webbsidan igen. Detta är användbart särskilt när du måste hämta data för många företag. Eftersom du kan klicka på någon hyperlänk för att besöka motsvarande webbsida och lägga till eller uppdatera information manuellt under granskning senare.

interagera med webbsidor

ovanstående exempel illustrerar bara hur man hämtar data från en statisk webbsida. Men mer än ofta är vi skyldiga att extrahera har interagerat med webbsidor för att hämta en stor mängd data. Se figur 3.1. Det visar hur du kommer till webbsidan i ovanstående exempel. Du kan se att det finns många branscher och för varje bransch finns det många företag. Till exempel finns det 651 företag inom jordbruksnäringen. Vad ska vi göra om vi vill extrahera kontaktinformationen för alla företag från alla branscher?

Tja, den viktigaste punkten är att hur man gör VBA interagera med webbsidor som vad vi gör manuellt. Låt oss ta S. W. I. S fördel som ett exempel. Generellt hoppas vi att Excel kan klicka på Agribusiness (topppanel i Figur 3.1) och därmed utlösa IE för att rikta oss till den andra webbsidan. På den andra webbsidan (nedre panelen i Figur 3.1) kan Excel klicka på S. W. I. s Advantage, och sedan leder IE oss till sidan som visas i Figur 2.1 så att vi kan hämta kontaktinformation för S. W. I. S Advantage.

när du har angett följande kod i Visual Basic Editor och skickat in koden ser du att din IE öppnas. Den första webbsidan visas följt av den andra webbsidan. Här lär du dig hur du får listrutan, väljer ett alternativ och utlöser en händelse efter att du har valt alternativet. ”m = IE.dokument.getElementsByTagName (”alternativ”).Längd-1 ” ger dig ett totalt antal alternativ. Detta kan användas för nästa slinga.

denna del av koden kan hänvisa dig till webbsidan som visas i Figur 2.1 efter Excel klicka på förnamnet. Alla företagsnamn ingår i elementet med klassnamnet ”namn”. Searchobj är en samling och searchobj (i)kan returnera (i+1) th objekt. Till exempel, searchobj(1).Klicka kan du besöka webbsidan för RIDLEY CORPORATION (Melbourne).

slutligen, här är hela koden som kan visa dig processen att öppna IE, surfa på webbsidor och extrahera data. De data som extraheras kommer att vara desamma som i Figur 2.4.

faktum är att vad vi behöver göra är att extrahera kontaktinformation för alla företag från alla branscher, därför måste vi använda för loop-uttalande för att slutföra denna uppgift. Följande är den fullständiga koden. Och du kan också hitta koden I hämta kontaktinformation för alla företag.xlsm som du kan ladda ner i slutet av den här artikeln.

den enda punkt som jag behöver förklara illustreras i Figur 3.2. En webb kan bara lista så många som 25 företag. När det totala antalet företag är större än 25 kommer det att finnas mer än en sida. Figur 3.2 visar att det finns en regel att få adressen till sidor efter den första sidan. Det är resultatet av den sammanlänkande adressen till den första sidan, ”&pg=” och det faktiska sidnumret. Och för alla sidor före den sista sidan är det totala objektnumret 25. ”IE.dokument.getElementsByClassName (”SearchTotal”) (0).innerHTML ” kan returnera det totala antalet företag inom en bransch. I vårt fall blir det 651. ”Int (tot / 25) + 1” kan få dig det totala antalet sidor. Och ”Max = (tot Mod 25) – 1” kan returnera det maximala antalet företag på sista sidan. Jag kommer att stanna här och lämna dig för att ta reda på hur du tillämpar den här tanken på koden. Det är ett mycket bättre tillvägagångssätt för dig att förstå kod. Du kan lämna en kommentar om du har frågor.

här visar du en del av den slutliga excel. Kontaktinformation för alla företag inom en bransch sammanställs i ett kalkylblad.

• hur extraherar du data från webbplats till Excel automatiskt?
• importera Data (mening, stycken, tabeller, kommentarer) från Word till Excel
• 6 Bästa Excel VBA – Programmeringsböcker (för nybörjare & avancerade användare)
• lär dig Excel VBA-programmering & makron (gratis handledning-steg för steg)
• Excel VBA-Kodningstips
• vad du kan göra med VBA
• introduktion till VBA-makron

ladda ner Arbetsfil

ladda ner arbetsfilen från länken nedan.

Pull-Data-från-Web-till-Excel.rar