وب عمیق Deep Web

وب عمیق یا Deep Web چیست؟

وب عمیق (Deep Web) به بخشی از وب جهان گستر گفته می‌شود که توسط موتورهای جستجوی متداول وب قابل دسترس و ایندکس شدن نیستند. گاهی اوقات از اصطلاح وب پنهان (Invisible Web یا Hidden Web) نیز به عنوان معادلی برای این واژه استفاده می‌شود.

وب عمیق درست در نقطه مقابل وب سطحی (Surface Web) قرار می‌گیرد که به طور عمومی از طریق اینترنت قابل دسترسی و قابل ایندکس می‌باشد. با وجود اینکه تشخیص حجم دقیق محتواهایی که در وب پنهان قرار دارند تقریبا غیرممکن است اما مطابق با آنچه توسط متخصصین تخمین زده می‌شود آنچه در وب سطحی قرار دارد در مقایسه با کل وب درصد بسیار ناچیزی است.

محتوایی که در وب پنهان وجود دارد به دلایل مختلفی قابل یافتن و ثبت توسط موتورهای جستجوی معمولی و استاندارد نمی‌باشد. محتواهای پویا (Dynamic Content) که متناسب با یک پرس و جو (Query) تولید می‌شوند، محتوایی که بسته به شرایط و نوع دسترسی متغیر می‌باشد و یا صفحاتی که با کمک روش‌های مختلف (نظیر استفاده از کپچا) دسترسی به آن‌ها محدود شده است از جمله محتواهایی به شمار می‌رود که موتورهای جستجوی مرسوم در کشف و ایندکس آن‌ها ناتوان هستند. علاوه براین محتواهای غیر HTML با فرمت‌های مختلف، محتواهای خصوصی (که پس از لاگین در اختیار کاربران قرار می‌گیرد)، صفحاتی که به آن‌ها هیچ لینکی داده نشده است (فاقد بک‌لینک) و هم‌چنین محتواهایی که عمدا از اینترنت معمولی پنهان شده است و تنها توسط نرم‌افزارهای مخصوصی قابل مشاهده است را باید به موارد فوق اضافه کنید. گفتنی است وب تاریک (Dark Web) به بخشی از وب عمیق گفته می‌شود که کاربران برای دسترسی به آن نیازمند نرم‌افزار، پیکربندی یا مجوز خاصی هستند.

بسیاری از کاربردهای روزمره از قبیل استفاده از وب میل ها، انجام تراکنش‌های بانکی آنلاین، استفاده از سرویس‌های پولی نظیر روزنامه‌ها، مجلات، مقالات علمی و … همگی با محتواها و سایت‌هایی سر و کار دارند که زیرمجموعه‌ای از وب پنهان به شمار می‌رود.