Elasticearch Ruby Activerecord Persistence Model URL-адрес поиска

101
15

Я пытаюсь выполнить поиск в поле, содержащем URL-адрес, используя запрос поиска по поисковым запросам. Я использую elasticsearch-rails для шаблона Persistent ActiveRecord. Вот как я пытаюсь это сделать.

total_views = UserAction.search :query=> {
:filtered=> {
:filter=> {
:term=> { action_path:"http://0.0.0.0:3000/tshirt/test" }
}
}
}

Он работает, если нет символов '/' или ':'. Например, когда action_path является просто "tshirt". Остальные поля не анализируются, и они работают, если в поле нет символов "/", ":". Таким образом, очевидно, что эластичный поиск пытается проанализировать его, но проблема в том, что они не должны анализироваться, потому что отображение уже существует.

Этот класс действия пользователя

class UserAction
include Elasticsearch::Persistence::Model
extend Calculations
include Styles

attribute :user_id, Integer
attribute :user_referrer, String, mapping: { index: 'not_analyzed' }
attribute :user_ip, String, mapping: { index: 'not_analyzed' }
attribute :user_country, String, mapping: { index: 'not_analyzed' }
attribute :user_city, String, mapping: { index: 'not_analyzed' }
attribute :user_device, String, mapping: { index: 'not_analyzed' }
attribute :user_agent, String, mapping: { index: 'not_analyzed' }
attribute :user_platform
attribute :user_visitid, Integer
attribute :action_type, String, mapping: { index: 'not_analyzed' }
attribute :action_css, String, mapping: { index: 'not_analyzed' }
attribute :action_text, String, mapping: { index: 'not_analyzed' }
attribute :action_path, String, mapping: { index: 'not_analyzed' }
attribute :share_url, String, mapping: { index: 'not_analyzed' }
attribute :tag
attribute :date

Я также попытался добавить индексы, используя "mapping do..", а затем "create_index!", Но результат тот же. Поскольку отображение происходит там, оно создает сопоставление.

Это мой файл gem

   gem "elasticsearch-model", git: "git://github.com/elasticsearch/elasticsearch-rails.git", require: "elasticsearch/model"
gem "elasticsearch-persistence", git: "git://github.com/elasticsearch/elasticsearch-rails.git", require: "elasticsearch/persistence/model"
gem "elasticsearch-rails"

Когда я делаю поиск, я также вижу, что те поля, которые не анализируются.

       :reload_on_failure=>false,
:randomize_hosts=>false,
:transport_options=>{}},
@protocol="http",
@reload_after=10000,
@resurrect_after=60,
@serializer=
#<Elasticsearch::Transport::Transport::Serializer::MultiJson:0x007fc4bf9e0e18
@transport=#<Elasticsearch::Transport::Transport::HTTP::Faraday:0x007fc4bf9b35a8 ...>>,
@sniffer=
#<Elasticsearch::Transport::Transport::Sniffer:0x007fc4bf9e0dc8
@timeout=1,
@transport=#<Elasticsearch::Transport::Transport::HTTP::Faraday:0x007fc4bf9b35a8 ...>>,
@tracer=nil>>,
@document_type="user_action",
@index_name="useraction",
@klass=UserAction,
@mapping=
#<Elasticsearch::Model::Indexing::Mappings:0x007fc4bfab18d8
@mapping=
{:created_at=>{:type=>"date"},
:updated_at=>{:type=>"date"},
:user_id=>{:type=>"integer"},
:user_referrer=>{:type=>"string"},
:user_ip=>{:type=>"string"},
:user_country=>{:type=>"string", :index=>"not_analyzed"},
:user_city=>{:type=>"string", :index=>"not_analyzed"},
:user_device=>{:type=>"string", :index=>"not_analyzed"},
:user_agent=>{:type=>"string", :index=>"not_analyzed"},
:user_platform=>{:type=>"string"},
:user_visitid=>{:type=>"integer"},
:action_type=>{:type=>"string", :index=>"not_analyzed"},
:action_css=>{:type=>"string", :index=>"not_analyzed"},
:action_text=>{:type=>"string", :index=>"not_analyzed"},
:action_path=>{:type=>"string", :index=>"not_analyzed"}},
@options={},
@type="user_action">,
@options={:host=>UserAction}>,
@response={"took"=>1, "timed_out"=>false, "_shards"=>{"total"=>4, "successful"=>4, "failed"=>0}, "hits"=>{"total"=>0, "max_score"=>nil, "hits"=>[]}}>
(END)

файл инициализатора имеет ничего, кроме URL-адреса elastichq.

Данные есть в elastichq, поэтому я должен получать результаты, но не могу их получить.

    user_action 1   AUzH9xKDueQ8OtBQuyQC    http://example.org/api/analytics/track
user_actions user_action 1 AUzIAUsvueQ8OtBQuyQg http://0.0.0.0:3000/tshirt/funnel_test2
user_actions user_action 1 AUzH7ay5ueQ8OtBQuyP2 http://example.org/api/analytics/track
user_actions user_action 1 AUzH-HAdueQ8OtBQuyQU http://0.0.0.0:3000/tshirt/test
user_actions user_action 1 AUzIJbCGueQ8OtBQuyQ4 http://example.org/api/analytics/track
user_actions user_action 1 AUzIJbCjueQ8OtBQuyQ5 http://example.org/api/analytics/track

Результаты скручивания Elastichq

curl -XGET "https://YYYYY:XXXXX@xxxx.qbox.io/user_actions/_mapping"
{
"user_actions": {
"mappings": {
"user_action": {
"properties": {
"action_css": { "type": "string" },
"action_path": { "type": "string" },
"action_text": { "type": "string" },
"action_type": { "type": "string" },
"created_at": { "format": "dateOptionalTime", "type": "date" },
"date": { "type": "string" },
"share_url": { "type": "string" },
"tag": { "type": "string" },
"updated_at": { "format": "dateOptionalTime", "type": "date" },
"user_agent": { "type": "string" },
"user_city": { "type": "string" },
"user_country": { "type": "string" },
"user_device": { "type": "string" },
"user_id": { "type": "long" },
"user_ip": { "type": "string" },
"user_referrer": { "type": "string" },
"user_visitid": { "type": "long" }
}
}
}
}
}

может ли кто-нибудь помочь мне получить работу по поиску URL-адресов?

спросил(а) 2021-01-19T13:01:53+03:00 6 месяцев, 1 неделя назад
1
Решение
78

Из elasticsearch curl в конце кажется, что ваше поле анализируется (не имеет not_analyzed flag). Возможно, попробуйте перестроить свой индекс с помощью нужного вам сопоставления.

ответил(а) 2021-01-19T13:01:53+03:00 6 месяцев, 1 неделя назад
64

Я сделал то, что не хотел делать. Создал индекс с его сопоставлением вручную с последующим пост-запросом, так что elasticsearch-rails не может создать его неправильно. Теперь все работает нормально

curl -XPOST https://xxxxxx.qbox.io/user_actions -d '{
"settings" : {
"number_of_shards" : 1
},
"mappings" : {
"user_action" : {
"_source" : { "enabled" : false },
"properties" : {
"action_path" : { "type" : "string", "index" : "not_analyzed" }
}
}
}
}'

ответил(а) 2021-01-19T13:01:53+03:00 6 месяцев, 1 неделя назад
45

Попробуйте сырой запрос:

total_views = UserAction.search :query=> {
:filtered=> {
:filter=> {
:term=> { "action_path.raw" => "http://0.0.0.0:3000/tshirt/test" }
}
}
}

ответил(а) 2021-01-19T13:01:53+03:00 6 месяцев, 1 неделя назад
45

Как правило, если вы хотите что-то искать, вы не должны оставлять его not_analyzed.

В этом случае, в частности, вам обязательно нужно попробовать анализатор ключевых слов, установив соответствующее сопоставление полей для keyword.

Пока вы ищете полную строку, т. "http://0.0.0.0:3000/tshirt/test", есть большой шанс, что анализатор ключевых слов сделает трюк.

ответил(а) 2021-01-19T13:01:53+03:00 6 месяцев, 1 неделя назад
Ваш ответ
Введите минимум 50 символов
Чтобы , пожалуйста,
Выберите тему жалобы:

Другая проблема