robots.txt او د سایټ نقشه ازموینې
موږ د خپل سرور څخه د robots.txt او sitemap.xml ترلاسه کوو، تاسو ته د کرول لارښوونې او اعلان شوي سایټونه وښایاست، او د پوښتنې-سټرینګ سټیمپ URLs وښایاست چې د دوه ګونی-محتوياتو د مینځلو لامل کیږي.
څنګه د robots.txt او sitemap.xml ازموینه
څلور ګامونه، نه signup. د ټول چک د سرور خوا روان دی.
د سایټ URL سرېښل
د هرې ویب پاڼې کورپاڼې URL داخل کړئ. تاسو د robots.txt ته بشپړه لار نه غواړئ - موږ دا د کوربه څخه ترلاسه کوو.
موږ د خپل پالنګر نه اخلو
زموږ سرور د robots.txt او هر اعلان شوي sitemap.xml غوښتنې کوي، نو ازموینه ستاسو د بریښنالیک یا ستاسو د خپل کیچ لخوا نه بندیږي.
د لارښوونو او سایټ نقشه ولولئ
د تحلیل شوي کارونکي-اګزیټ ډلې بیاکتنه وکړئ، قوانین او د اعلان شوي سایټ میپونو لیست، د هر یو څخه د URL نمونې سره.
هغه څه سمول چې جلۍ شوی دی
د کومې پوښتنې-سټرینګ سټیمپ URLs یا د لاک-خو-indexed شخړې د لټون انجن د دوهم د مخه حل کړئ.
دا ازموېونکی څومره کتل کيږي
د همدې guardrails موږ په داخلي توګه د يو واحد مخ خپرولو څخه مخکې چلوي.
لارښوونې لټول
Parses هر کاروونکي-agent ډله او د هغې اجازه / اجازه نه قواعد نو تاسو کولای شي په سمه توګه څه بند شي وګورئ.
اعلان شوي سایټ نقشه
په robots.txt کې هر سټیټ میپ لیست کوي، هر یو یې اخلي، او د هغې ډول او URL شمیر راپور ورکوي.
د پوښتنې مزی
د پاڼو د پوښتنې-string sitemap URLs چې د نږدې دوه ګونی مخونو تخمونه او د دوه ګوني-محتوياتو د تخریبونو هڅول.
د رغتون رغتون
د robots.txt کې اعلان شوي سټیټ ماپونه چې غلطي، بیرته راستنیدنه، یا غیر XML بیرته راستنیدنه - خاموش کرول قاتلین.
ډېرې پوښتنې
په خپل پمپ کې چلول
دا ټیسټر په بشپړ ډول د سرور خوا ته ځي - تاسو یو URL وړاندې کوئ، زموږ د بیکنډ فټ او د robots.txt او اعلان شوي سایټ نقشه رامینځته کوي، بیا د پایلو سره دا مخ بیا رامینځته کوي. د CI / CD او د لوی حساب ارزونې لپاره د پروګرام REST API د تادیه شوي مدیریت شوي پلانونو کې شتون لري. پلانونه وګورﺉ →