Deep web очень огромен, поисковики поэтому и не хотят туда проникать, потому что если доберутся до него, вряд ли справятся с объемом индексации.

Открытый ?нтернет будет расти такими темпами, за которыми ма?инные ресурсы не угонятся. В конце концов, придется удалять из индекса документы старее, например, полугода или даже месяца. Будет развиваться собственный поиск на порталах в их архивах. Также будет развиваться локальный поиск на компьютере пользователя – desktop search, который будет строить индивидуальные архивы документов для конкретного пользователя.

А глобальные поисковые системы будут еле-еле поспевать за индексацией появляющихся страниц на блогах, тредов на форумах и разделов на вики-подобных сервисах.

Кстати, очень часто думаю, что Яндексу как раз не хватает desktop search приблуды. Вот такую ?туку я бы точно поставил себе на комп – очень удобно. ? жду – не дождусь персонального поиска в Яндексе. Думается, что уже потихоньку начинает проявляться.