Redis для автозаполнения

как я могу реализовать автозаполнение с помощью Redis?

допустим у меня есть массив ["alfred","joel","jeff","addick"]. Когда я набираю a Я ["alfred", "addick"]

надеюсь, вы поняли. Как я могу реализовать это с помощью команд redis эффективно (если это возможно, но я думаю, что это так). Было бы здорово, если бы я мог получить несколько простых команд, которые я могу попробовать через telnet, чтобы имитировать это поведение.

спасибо

P. S: Веселого вам всем x-mas:)

20
autocomplete redis

7 ответов

Если вы имеете дело с большим набором данных, я бы предложил рассмотреть возможность реализации этого как trie. Я собрал небольшой кусочек Рубина, который сделал бы это:

require 'rubygems'
require 'redis'

class RedisTrie
  TERMINAL = '+'

  def initialize(prefix)
    @prefix = prefix
    @r = Redis.new
  end

  def add_word(word)
    w = word.gsub(/[^a-zA-Z0-9_-]/, '')
    key = "#{@prefix}:"

    w.each_char do |c|
      @r.zset_add key, c.bytes.first, c
      key += c
    end

    @r.zset_add key, 0, TERMINAL
  end

  def add_words(*words)
    words.flatten.compact.each {|word| add_word word}
  end

  def suggest(text)
    @r.zset_range("#{@prefix}:#{text}", 0, -1).map do |c|
      (c == TERMINAL) ? text : suggest(text + c)
    end.flatten
  end
end

rt = RedisTrie.new('trie')

rt.add_words %w( apple automobile carwash oil-change cranky five ruthie axe auto )

p rt.suggest(ARGV.shift.to_s)

например:

$ ruby RedisTrie.rb
["apple", "auto", "automobile", "axe", "carwash", "cranky", "five", "oil-change", "ruthie"]
$ ruby RedisTrie.rb a
["apple", "auto", "automobile", "axe"]
$ ruby RedisTrie.rb au
["auto", "automobile"]
$ ruby RedisTrie.rb aux
[]

подробнее о попытках на запись Википедии о попытках.

вы определенно захотите оптимизировать свой метод suggest, чтобы не возвращать все значения, а только возвращать первые значения X, которые он находит. Это разрушило бы цель повторения вся структура данных.

19

[да, 2 года после того, как вопрос был опубликован, но тем не менее актуально]

на веб-сайте Redis есть полный учебник (в Ruby):

авто в комплекте с Redis

9

Я нашел этот фрагмент при чтении впечатляет Redis в учебнике.

устранение:

Привет Макс,

ключи не путь пойти, самое лучшее что вы можете сделать, это использовать отсортированный набор. То, что ты хочешь, - это измениться. первые 4 или 5 символов строки в целое число (вы можете представьте себе каждый символ как цифру например, номер radix 256, но есть лучше представительство и добавьте все ваши имена пользователей в сортировку набор.

затем с помощью ZRANGEBYSCORE вы можете получить все элементы данной диапазон.

этот метод гораздо более масштабируемый, как это вещь O(log(N)).

я освещаю это в моих медленно развивается редис книга...

Ура, Сальваторе

6

вот мертвый простой алгоритм в PHP для алфавитного автозаполнения с redis:

function getNextChar($char) {
    $char++;
    if(strlen($char) > 1) { $char--; }
    return $char;
}

function createDictionary($redis, $key, $wordList) {
    if(!$redis->exists($key)) {
        foreach($wordList as $word) {
            $redis->zadd($key, 0, $word);
        }
    }
}

function getLexicalAutocomplete($redis, $dictionaryKey, $input) {
    $inputNext = substr($input, 0, -1) . getNextChar(substr($input, -1)); //ab -> ac

    $redis->zadd($dictionaryKey, 0, $input);
    $redis->zadd($dictionaryKey, 0, $inputNext);

    $rangeStart = $redis->zrank($dictionaryKey, $input)+1;
    $rangeEnd = $redis->zrank($dictionaryKey, $inputNext)-1;

    $autocompleteResults = $redis->zrange($dictionaryKey, $rangeStart, $rangeEnd);

    $redis->zrem($dictionaryKey, $input);
    $redis->zrem($dictionaryKey, $inputNext);

    return $autocompleteResults;
}

$redis = new Redis();
$redis->connect('', 0); //Your redis server ip/port goes here

createDictionary($redis, "dict", array("alfred", "joel", "jeff", "addick"));
$result = getLexicalAutocomplete($redis, "dict", $argv[1]);

echo json_encode($result);

на основании статьи авто в комплекте с Redis Сальваторе, за исключением того, что мне нужно создать дополнительный словарь автозаполнения, за счет крошечного штрафа за производительность (пара zadds и zrems extra), но в большинстве случаев он должен работать хорошо. Сценарий предполагает phpredis, но он должен практически совпадать с предиса.

выход примеры:

> php redisauto.php a
["addick","alfred"]

> php redisauto.php ad
["addick"]

> php redisauto.php al
["alfred"]

> php redisauto.php j
["jeff","joel"]

> php redisauto.php je
["jeff"]
3

вот порт оригинальной реализации Ruby antirez в Python:

http://www.varunpant.com/posts/auto-complete-with-redis-python
2

Я только что прошел через удивительный пост, который служит точной проблеме, о которой вы говорите, и многое другое. зацените

2

вероятно, не связаны, но если вы приземлились здесь, вы также можете быть заинтересованы в простой, правильный, быстрый и масштабируемый способ автозаполнения полей пользовательского интерфейса с предложениями:

http://www.elasticsearch.org/guide/en/elasticsearch/reference/current/search-suggesters-completion.html

0