Je hebt zojuist de basis van webscraping geleerd.
Het is best spannend, niet?
Veel kracht binnen handbereik.
Maar laten we zeggen dat u verder wilt gaan, meer wilt leren, misschien een professionele webschraper wilt worden.
Ik weet het niet.
Misschien wil je het daarom doen.
Wat zijn enkele dingen die ik zou aanraden, raak meer vertrouwd met mooie soep, maar onthoud wat ik aan
het begin van dit gedeelte zei.
Idealiter hoef je niet eens te scrappen, idealiter kun je een API gebruiken, misschien geeft de
website waar je gegevens van wilt krijgen je eigenlijk een API, bijvoorbeeld als ik naar Airbnb API ga.
Je kunt zien dat Airbnb een officiële API heeft aangekondigd.
Dus we kunnen misschien wel lezen tot welke data Airbnb ons nu net toegang geeft.
En dat zou je eerste stop moeten zijn, misschien als je dat niet hebt, dan kijk je naar mooie soep.
Het volgende waar je misschien naar wilt kijken, is dit framework dat scrapie wordt genoemd.
Zie het als een mooie soep, maar met veel meer functies.
Een framework is in wezen een hele keuken, een hele gereedschapsriem die je kunt gebruiken
om websites te schrapen en je gebruikt dingen als scrapie wanneer je enorme websites, enorme hoeveelheden gegevens wilt
schrapen. Een framework versus een bibliotheek is dat een framework bijna een nieuw leert taal op zich.
Het geeft je alle tools die nodig zijn om alles te doen wat je wilt als het gaat om het schrapen van gegevens.
Mooie soep daarentegen is kleiner.
Het is een bibliotheek, dus het geeft je een paar handige tools om kleine dingen te doen, zoals wat we
hier hebben gedaan, scrapie, het raamwerk, is een heel ding op zich.
Je kunt hun documentatie en tutorial doornemen, het kost wat tijd om eraan te wennen, maar als je
dit wilt doen, is fulltime scrapie misschien iets dat je moet bekijken.
Tot slot, wat doe je met al deze gegevens?
Uiteindelijk wil je misschien iets doen, misschien opslaan in een tekstbestand, in een koffiebestand, iets waar we het over hebben gehad en waar
we het in de cursus over zullen hebben.
Maar naarmate we meer en meer gegevens verzamelen, misschien met behulp van iets als scrapie, wil je misschien gaan
kijken naar het gebruik van wat we databases en databases noemen, ons in staat stellen enorme hoeveelheden gegevens op te slaan en ergens op
te slaan, zodat we er toegang toe hebben wanneer we maar willen. willen.
En er zijn een heleboel databases, iets dat het doel van deze cursus te boven gaat.
Maar je hebt misschien gehoord van dingen als Mongo, DB Radice, MySQL.
PostgreSQL, dit zijn allemaal manieren om gegevens op te slaan, enorme hoeveelheden gegevens op te slaan en er toegang toe te
krijgen, dus misschien wilt u leren hoe u een framework zoals scrapie kunt gebruiken en die gegevens kunt verzamelen en ergens in een database kunt
opslaan, zodat andere mensen op uw team heeft er misschien toegang toe.
De mogelijkheden zijn eindeloos.
Maar als er één ding is dat je hiervan wilt afnemen, is dat je aardig bent, ethisch bent en niets illegaals doet,
want, nou ja, ik wil niet in de problemen komen, en ik weet zeker dat je dat niet doet. ook niet.
Ik zie je in de volgende.
Tot ziens.