אַרייַן אַ וועבזייטל URL צו ברענגען robots.txt, פּאַרסירן קריכער גרופּעס, דעטעקט סיטעמאַפּ דיירעקטיווז און וואַלאַדייט לינגקט סיטעמאַפּ קסמל טעקעס.
דער אַנאַליזער טשעק צי וויכטיק באָץ קענען קריכן די וואָרצל דרך, קאַונץ סיטעמאַפּ URL ס, געפינט דופּליקאַט אָדער פונדרויסנדיק URL ס און פּערפאָרמז אַ סאַמפּאַלד צעבראכן-לינק טשעק פֿאַר סיטעמאַפּ איינסן.