Back to Question Center
0

חינם אינטרנט Scrapers עבור מתכנתים

1 answers:

אם יש לך אי פעם צורך למשוך נתונים מאתרים של צד שלישי, רוב הסיכויים שאתה מעדיף API הרשמי. עם זאת, ישנם כמה אינטרנט scrapers באינטרנט שיכולים להפוך את העבודה שלך קל יותר, וכמתכנת או מפתח, אתה יכול לחלץ נתונים מאתרים רבים ככל שתרצה.

1. נתונים מגרד:

נתונים מגרד היא פשוטה אך רבת עוצמה ושימושית באינטרנט scraping התוכנית. זה לא רק scrapes תמונות וטקסטים, אלא גם מנתח רשימות ושולחנות מתוך דפים בודדים או מרובים. לאחר מכן, כלי זה ממיר או שומר את הנתונים שחולצו לקבצי XLS ו- CSV. זה ללא עלות ומגיע עם שפע של תכונות. עם זאת, מתכנתים ומפתחים מקצועיים צריכים להשתמש בגירסה בתשלום שלה שמגיע עם הרבה תכונות ואינו דורש שום קידוד.

2. מגרד אינטרנט:

Web Scraper הוא תוסף Chrome שניתן לשלב בקלות עם דפדפן Google Chrome שלך. זה מאפשר למשתמשים ליצור sitemaps כדי להראות את הדרך האתר צריך להיות מנווט ואת סוג הנתונים שאתה צריך לגרד. מתכנתים ומפתחים פשוט צריכים להוסיף תוסף זה ל- Chrome ולהתחיל לחלץ נתונים.

3. מגרד:

כשמדובר בחילוץ נתונים, מפתחים ומתכנתים צריכים להתמודד עם אתגרים רבים. עם זאת, עם מגרד, עבודתם יכולה להיעשות מהר וקל יותר מאשר אי פעם. זהו מגרד אינטרנט קל לשימוש שיכול לחלץ נתונים בצורה של טבלאות, תמונות, רשימות וטקסטים. אתה רק צריך ללחוץ על כפתור Scrape מהתפריט הימני העליון שלה ולתת כלי זה לעשות את העבודה שלה. ) 3

4

26

10

13 (4. Octoparse:) 14

11 (Octoparse מגיע עם אפשרויות רבות עוצמה, והוא אחד ממארגני האינטרנט הטובים ביותר באינטרנט..הוא יכול לטפל בקלות באתרים הסטטיים והדינמיים שלך באמצעות AJAX, קובצי cookie ו- Javascript. אתה רק צריך להוריד את התוכנית ולהפעיל אותה. זה יהיה גם להסתיר את התוכן שאתה לא רוצה לחלץ, שירות ענן שלה מאפשר לך לחלץ כמות עצומה של נתונים בתוך כמה דקות.

5. ParseHub:

Parsehub היא תוכנית מפורטת באינטרנט scraping שאוסף נתונים מאתרים ובלוגים המשתמשים ב- JavaScript, עוגיות וטכנולוגיית AJAX. יש לו מכונה ייחודית מכונת למידה שיכולה לקרוא, להעריך, לשנות ולנתח את הנתונים הרלוונטיים שלך ללא כל בעיה.

6. מגרד חזותי:

Visual Scraper הוא נהדר עבור אלה שרוצים לחלץ תמונות וקבצי וידאו. זה מגרד אינטרנט חינם שמגיע עם ממשק פשוט הצבע ולחץ הוא בשימוש נרחב כדי לאסוף נתונים רלוונטיים מהאינטרנט. אתה תקבל את הנתונים בזמן אמת מתוך הדפים הרצוי ולייצא אותו בצורה של XML, CSV, SQL, ו JSON.

7. Outwit רכזת:

זה freeware מגיע עם הרבה תכונות המתאימות ביותר עבור Windows, Linux ומערכות הפעלה אחרות. זה יאפשר לך לגרד נתונים מתוך יותר מ -50 אלף דפי אינטרנט. עם זאת, גרסת פרימיום יכול לגרד מעל 130,000 דפי אינטרנט ללא כל בעיה.

8. Dexi.io: ​​

ידוע גם בשם CloudScrape, Dexi.io הוא מגרד אינטרנט מבוסס אינטרנט מפורסם. זה מאפשר למשתמשים לגרד נתונים ומספק שלושה סוגים שונים של רובוטים כדי לקבל את העבודה נעשה בקלות. זה יכול לבצע משימות הקשורות זחילה, מיצוי נתונים צנרת.

9. Webhose.io:

Webhose.io היא תוכנה חופשית המספקת לנו שרת פרוקסי אינטרנט אנונימי ומקבל את העבודה בהקדם האפשרי. זה לא רק לגרד את האתרים שלך, אלא גם ארכיונים נתונים; זה אומר שאתה לא צריך לדאוג לאבד את המידע שימושי כפי שהוא יישמר בתיקייה ארכיון שלה.

December 7, 2017
חינם אינטרנט Scrapers עבור מתכנתים
Reply