Термины «индексация», «парсинг» и «токенизация» взаимозаменяемы в корпоративном сленге. Учитывая этот сценарий, несжатый индекс для 2 миллиардов веб-страниц должен был бы хранить 500 миллиардов записей слов. Создание и поддержка крупномасштабного поискового индекса требует значительной памяти…