מעקב אחר מחירים ומלאי באתרים מוגנים

PriceZag עוקבת אחר מחירים ומלאי גם באתרי מסחר רבים המוגנים מפני בוטים, בעזרת דפדפנים אמיתיים, חומרה מגוונת, אלפי כתובות IP וניסיונות חוזרים חכמים.

נכתב על ידי Jeff M. אסטרטג מוצר בתחום התמחור ב-PriceZag

קריאה של כ-6 דקות

שירות מעקב מחירים מועיל רק אם הוא באמת מצליח לגשת לאתרים שאתם רוצים לנטר. חנויות מקוונות רבות חוסמות באופן פעיל גישה אוטומטית. כלי מעקב זול עשוי לאסוף מחירים מאתרים פשוטים, אבל להיכשל ברגע שקמעונאי גדול מפעיל הגנות מחמירות יותר.

ב-PriceZag, מעקב אחר אתרים קשים לגישה המוגנים מפני בוטים הוא חלק מרכזי בעבודה שלנו, ולא בעיה מזדמנת שאנחנו משאירים ללקוחות. השקענו בתשתית של דפדפנים אמיתיים, בחומרה ייעודית, במאגר גדול של כתובות IP ובמערכות שממשיכות לנסות כשקשה לגשת לאתר. התשתית הזאת עומדת לרשותכם כחלק משירות המעקב אחר מחירים ומלאי.

למה קשה לעקוב אחר חלק מאתרי המסחר המקוון

קמעונאים רוצים להגן על האתרים שלהם מפני תעבורה פוגענית, אגירת מלאי, מתקפות ובקשות אוטומטיות לא רצויות. רבים משתמשים בשירותים כגון Cloudflare, Akamai, DataDome או Imperva כדי לזהות בוטים, לדרוש אימות ממבקרים חשודים או לחסום בקשות.

ההגנות האלה עלולות להשפיע גם על מעקב לגיטימי אחר מחירי המתחרים. סקריפט פשוט עשוי לבקש דף מוצר ולקבל מסך אימות במקום מחיר. אתרים אחרים תלויים מאוד ב-JavaScript, או מציגים מחירים וזמינות שונים בהתאם למיקום שממנו המבקר מתחבר.

כך נוצרת בעיה מעשית: דווקא הקמעונאים שהכי חשוב לכם לעקוב אחריהם עלולים להיות הקשים ביותר לגישה. שירות שעובד היטב רק באתרים פשוטים עלול להשאיר חורים בנתוני המתחרים שלכם בדיוק במקום שבו הם נחוצים ביותר.

איך PriceZag מנטרת אתרים מוגנים

אנחנו לא מתייחסים לדפי מסחר מקוון כאל קבצים פשוטים שאפשר להוריד. תשתית הניטור שלנו נבנתה כדי לטעון דפי מוצר אמיתיים, לקרוא מהם מחירים ומלאי ולהתמודד עם האתגרים של אתרי קמעונאות מודרניים. חלק מהעבודה מתבצע מאחורי הקלעים:

  • דפדפנים גרפיים אמיתיים עם JavaScript. אנחנו מבקרים בדפי מוצר באמצעות דפדפנים מלאים שאינם פועלים במצב headless, מציגים את האתר ומריצים את קוד ה-JavaScript שלו. כך אפשר לקרוא תוכן שאולי לא קיים בבקשת HTML פשוטה.
  • חומרה אמיתית ומעבדים גרפיים מגוונים. השרתים שלנו מאפשרים לנו לשלוט בחומרה שבה הדפדפנים משתמשים, כולל מגוון מעבדים גרפיים שעוזרים להימנע מטביעות אצבע אחידות של דפדפנים, המאפיינות סביבות ענן רגילות. אנחנו לא מסתמכים על התצורות הווירטואליות הנפוצות אצל סורקים זולים.
  • אלפי כתובות IP מספקים שונים. מאגר גדול ומגוון של כתובות מעניק לנו גמישות כאשר אתר דוחה תעבורה ממקור מסוים. תחזוקה עצמאית של אלפי כתובות IP רק לצורך מעקב אחר אתרים עבור עסק יחיד תהיה יקרה וקשה להצדקה כלכלית. חלוקת התשתית הזאת בין אלפי לקוחות PriceZag מאפשרת לנו להציע את היכולת כחלק ממנוי במחיר סביר.
  • ביקורים המותאמים לשוק של כל קמעונאי. אנחנו בוחרים מיקום מתאים מתוך התשתית שלנו בארצות הברית, באוסטרליה ובבריטניה, לפי קהל היעד של האתר. כשאין לנו מיקום במדינה המדויקת, אנחנו בוחרים חלופה מתאימה בקרבת מקום. כך גדל הסיכוי שהאתר יציג את המטבע, המחירים ונתוני המלאי הצפויים.
  • ניסיונות חוזרים חכמים ושיפורים מתמשכים. אם דף לא נטען או לא מספק מחיר תקין, המערכת שלנו יכולה לנסות שוב באמצעות משאבים אחרים. המפתחים שלנו משפרים ללא הרף, לאורך כל השנה, את ההתמודדות עם אתרים משתנים ועם מערכות נגד בוטים.

המיקום שלנו בסנטה מוניקה, ליד קמפוס של Google וקהילת טכנולוגיה מקומית חזקה, סייע לנו לבנות צוות מהנדסים מנוסים המתמחה באתגרים המורכבים האלה של ניטור אתרים. הפיתוח והשיפור המתמשך של הטכנולוגיה הזאת נמצאים בלב העשייה שלנו מאז 2016.

מאחורי הקלעים מתרחש הרבה יותר, אבל אתם לא צריכים ללמוד איך פועלות טביעות אצבע של דפדפנים, רשתות IP או בדיקות נגד בוטים רק כדי לעקוב אחר מחירי המתחרים. זה התפקיד שלנו.

מה קורה כשאתר חוסם ביקור?

ניסיון שנכשל לא אומר בהכרח שאי אפשר לנטר את המוצר. המערכת יכולה לנסות שוב לגשת לדף, לשנות את אופן הביקור ולהמשיך לבדוק אותו לאורך זמן. אנחנו לא גובים תשלום נוסף על הניסיונות האלה. אתם משלמים לפי מספר כתובות ה-URL שאתם מנטרים, ולא לפי כל דפדפן או כתובת IP שנצטרך לנסות.

יש אתרים שנותרים קשים לגישה למרות המאמצים האלה. העדכונים שלהם עשויים להגיע בתדירות נמוכה יותר, ולעיתים לא נצליח לקבל נתונים אמינים מדף מסוים כלל. אנחנו לא טוענים שכל אתר מוגן יעבוד בצורה מושלמת בכל פעם.

במקום להסתיר את הבעיות האלה, PriceZag עוקבת אחר מצב כתובות ה-URL המנוטרות. בחשבון שלכם, Reports & Sheets > Domains > Sick URLs מציג את הדפים שהגישה אליהם נכשלה לאחרונה או נכשלת שוב ושוב. כך קל יותר להבחין בין תקלה זמנית לבין דף שדורש טיפול. אם קמעונאי מסוים חשוב לכם במיוחד, הצוות שלנו יכול לבדוק את הבעיה.

נתוני מחירים ומלאי מלאים יותר, עם הוכחות

לכל הטכנולוגיה הזאת יש מטרה מעשית אחת: לעזור לכם לקבל נתונים שימושיים על מחירים ומלאי של מתחרים ממספר גדול יותר של אתרים שחשובים לעסק שלכם. אחרי שאנחנו מצליחים לקרוא דף מוצר, תוכלו להשתמש במידע לצורך התראות, דוחות Excel ו-CSV, כללי תמחור מחדש, גרפים היסטוריים ודרך ה-API.

ואתם לא צריכים פשוט להאמין למחיר שאנחנו מדווחים עליו. כל ביקור מוצלח בדף מתועד באמצעות צילום מסך ברזולוציה גבוהה של מה שהדפדפן שלנו ראה. לחצו על סמל המצלמה לצד המחיר של הקמעונאי כדי לבדוק את הדף שצולם ולוודא שזיהינו את המחיר הנכון. אנחנו שומרים היסטוריית צילומי מסך של כחודש.

מציג צילומי המסך של PriceZag עם דף מוצר של קמעונאי במעקב, המחיר והמלאי שזוהו ואפשרויות הבקרה של צילומי המסך
דף מוצר של קמעונאי שצולם על ידי PriceZag, עם נתוני המחיר והמלאי שנקראו כדי שתוכלו לאמת אותם בעצמכם.

השקיפות הזאת חשובה במיוחד באתרים מאתגרים, שבהם דפים עלולים להשתנות במפתיע או להציג מידע שונה למבקרים שונים. תוכלו לבדוק מה באמת קיבלנו במקום להסתמך על מחיר בלתי מוסבר במסד נתונים.

אל תסתפקו במילה שלנו. השוו בעצמכם.

אם אתם בוחנים שירותי מעקב מחירים, נסו את אותן כתובות URL של דפי מוצרים ב-PriceZag ובשירות אחר. כללו בבדיקה קמעונאים גדולים ואתרים קשים לגישה שחשובים לכם באמת, ולא רק כמה חנויות שקל לנטר.

  1. בדקו את אותם מוצרים. הוסיפו לכל שירות מבחר מייצג של דפי מוצר של קמעונאים.
  2. בדקו את התוצאות בפועל. האם כל שירות מזהה את המחיר, המטבע והמלאי הנכונים? האם אפשר לראות צילום מסך ולאמת את התוצאה?
  3. בדקו שוב לאורך כמה ימים. ביקור ראשון מוצלח הוא טוב, אבל רק מעקב עקבי מספק היסטוריה, התראות ודוחות שאפשר לסמוך עליהם.

אנחנו מעודדים את ההשוואה. הניסיון החינמי שלנו למשך 14 ימים מאפשר לנטר עד 200 מוצרים ללא כרטיס אשראי. התחילו באתרים שהקשו על כלים אחרים וראו בעצמכם איך PriceZag מתמודדת איתם.

שאלות נפוצות

האם PriceZag יכולה לנטר אתרים המוגנים באמצעות Cloudflare או מערכות אחרות נגד בוטים?

כן. אנחנו יכולים לנטר אתרי מסחר מקוון רבים המשתמשים בהגנה מפני בוטים, כולל אתרים שקשה לסקריפטים פשוטים לגשת אליהם. אנחנו משתמשים בדפדפנים אמיתיים, בחומרה מגוונת, במאגר גדול של כתובות IP ובניסיונות חוזרים המותאמים למצב. כל אתר שונה, ולכן אנחנו ממליצים לבדוק את דפי הקמעונאים הספציפיים שחשובים לכם במקום להניח ששירות כלשהו יכול לגשת לכולם.

האם צריך להתקין משהו בחנות שלי?

לא. PriceZag מבקרת בדפי המוצרים של הקמעונאים שאתם בוחרים לנטר. לא צריך להתקין תוכנה בחנות המקוונת שלכם או להשתמש בפלטפורמת מסחר מסוימת כדי לעקוב אחר אתרים מתחרים.

האם ניסיונות חוזרים עולים יותר?

לא. כשצריך ביקורי דפדפן נוספים או כתובות IP נוספות כדי לקבל נתונים, אנחנו לא מחייבים בנפרד על הניסיונות האלה. תוכנית המנוי שלכם מבוססת על מספר כתובות ה-URL המנוטרות.

האם כל אתר מוגן יעבוד?

אף שירות ניטור לא יכול להבטיח זאת. חלק מהאתרים עלולים לחסום ביקורים לזמן מה או למנוע חילוץ אמין של מחירים. PriceZag מנסה שוב לגשת לדפים קשים, עוקבת אחר כתובות URL שנכשלו ומאפשרת לכם לחקור בעיות. אם אתר מסוים חשוב לכם במיוחד, תוכלו לבקש מהצוות שלנו לבדוק אותו.

איך אפשר לדעת אם המחיר נקרא נכון?

פתחו את צילום המסך דרך סמל המצלמה לצד מחיר המתחרה. תוכלו לראות את הדף שהדפדפן שלנו הציג, יחד עם המחיר, המטבע, המלאי ומידע על רמת הביטחון בזיהוי.