כלים ללכידה ולהמרה של האינטרנט

ממשק ה- API של GrabzIt למגרד, נתונים כשירות!

באמצעות ממשק ה- API של GrabzIt Web Scraper אנו יכולים לספק לאפליקציה שלך נתונים מגרדים כשירות אינטרנט המאפשר לך intמידע גרד גרד בחזרה into בקשתך. ה intאיחוד נתונים into היישום שלך מושג באמצעות מטפל להתקשר שוב, שהוא סקריפט או יישום בכתובת אתר נגישה לציבור שמעבדים את הנתונים שנשלחו מ מגרד האינטרנט של GrabzIt. קבצים שלמים מתפרסמים למטפל חוזר זה ברצף, כך למשל זה יכול להתחיל בסדרת תמונות לפני סיום עם JSON לאחר מכן ניתן לנתח את הנתונים בקובץ JSON בקלות בשיטות העזרה בספריית הלקוח. ממשק API זה מאפשר גם לבקשתך לשלוט אוטומטית כאשר מגרדים מתחילים ועוצרים גרוטאות, כמו גם מבקש להישלח לתוצאות.

כדי להתחיל קודם ליצור גרד אז תבחר אפשרות כתובת אתר להתקשרות חוזרת מהכרטיסייה אפשרויות ייצוא והזן את ה- URL למטפל ההתקשרויות שלך, למשל http://www.example.com/handler/

אם אתה נתקל בבעיות עם מטפל ההתקשרויות שלך, בחר במצב באגים מהכרטיסייה אפשרויות גירוד. פעולה זו תפיק את התגובה שהחזיר המטפל into היומנים.

מטפל התקשרות חוזרת

כדי לעבד נתונים מגרוטים בתוך מטפל ההתקשרויות שלך, בחר באפשרויות JSON או XML בכרטיסייה ייצוא מכיוון שהדבר מחזיר את הנתונים בפורמט שניתן לקרוא בקלות על ידי כל שפה המכוונת עצמים.

עבור נתונים שאינם נתוני JSON או XML, אפשרויות העיבוד שלך מוגבלות מכיוון שהנתונים אינם קריאים במיוחד במכונה, כך שהאפשרות הטובה ביותר יכולה להיות save הקובץ לדיסק או במסד נתונים.

כדי לעזור ל intתהליך האגירה GrabzIt מספק את ה- API של המגרד הבא עבור השפות שלהלן. עם זאת מכיוון שהקוד שלנו הוא קוד פתוח וזמין ב- GitHub אין סיבה שאינך יכול להכין שפה לתכנות שאינה מופיעה כאן, או שתוכל לבקש מאיתנו צור עבורך ספרייה. אם כן, מדוע לא לשתף אותו עם העולם?

ממשק API של ASP.NET Scraper ממשק API של מגרד PHP ממשק API לפיתון מגרד

בעוד שמטפל ההתקשרות הוא הדרך הטובה ביותר מקרוב intלברך את מגרד האינטרנט GrabzIt עם היישום שלך אתה יכול גם intאיחוד באמצעות אמזון S3, Dropbox, FTP ו- WebDav.