Що таке приховані сторінки (Deep Web) і як включити їх у карту сайту?


Deep Web (також відомий як Deepnet, Invisible Web, Undernet або прихований Web) – веб-сторінки, які не індексуються пошуковими системами, оскільки такі сторінки не мають гіперпосилань з інших доступних сторінок. Наприклад – це сторінки, згенеровані через інтерфейс HTML-форм або вміст фрейму.
Якщо ви бажаєте виявити та включити такі сторінки до Sitemap, позначте відповідні параметри:
  • «Сканувати веб-форми» (відправлення відбувається без заповнення форми);
  • «Сканувати фрейми» (вміст <frameset> та <iframe>).