Improved search results for localized nickname match. Tweaked user search to rank...
authorIvan Tashkinov <ivantashkinov@gmail.com>
Wed, 8 Jul 2020 10:14:18 +0000 (13:14 +0300)
committerIvan Tashkinov <ivantashkinov@gmail.com>
Wed, 8 Jul 2020 10:14:18 +0000 (13:14 +0300)
lib/pleroma/user/search.ex
test/tasks/user_test.exs
test/user_search_test.exs

index 42ff1de786dd3a9675a2c9871f3905fcdd38719d..7ff1c7e24c912207577971299542f97ffdc0c757 100644 (file)
@@ -88,15 +88,21 @@ defmodule Pleroma.User.Search do
     |> Enum.join(" | ")
   end
 
+  # Considers nickname match, localized nickname match, name match; preferences nickname match
   defp trigram_rank(query, query_string) do
     from(
       u in query,
       select_merge: %{
         search_rank:
           fragment(
-            "similarity(?, trim(? || ' ' || coalesce(?, '')))",
+            "similarity(?, ?) + \
+              similarity(?, regexp_replace(?, '@.+', '')) + \
+              similarity(?, trim(coalesce(?, '')))",
             ^query_string,
             u.nickname,
+            ^query_string,
+            u.nickname,
+            ^query_string,
             u.name
           )
       }
index 9220d23fcbaf0a4d2167c822eb3f5f9a523cc6b9..7bb49b038a3cdfc2f6bc923b21202871d7ab2e7a 100644 (file)
@@ -464,17 +464,17 @@ defmodule Mix.Tasks.Pleroma.UserTest do
       moot = insert(:user, nickname: "moot")
       kawen = insert(:user, nickname: "kawen", name: "fediverse expert moon")
 
-      {:ok, user} = User.follow(user, kawen)
+      {:ok, user} = User.follow(user, moon)
 
       assert [moon.id, kawen.id] == User.Search.search("moon") |> Enum.map(& &1.id)
+
       res = User.search("moo") |> Enum.map(& &1.id)
-      assert moon.id in res
-      assert moot.id in res
-      assert kawen.id in res
-      assert [moon.id, kawen.id] == User.Search.search("moon fediverse") |> Enum.map(& &1.id)
+      assert Enum.sort([moon.id, moot.id, kawen.id]) == Enum.sort(res)
+
+      assert [kawen.id, moon.id] == User.Search.search("expert fediverse") |> Enum.map(& &1.id)
 
-      assert [kawen.id, moon.id] ==
-               User.Search.search("moon fediverse", for_user: user) |> Enum.map(& &1.id)
+      assert [moon.id, kawen.id] ==
+               User.Search.search("expert fediverse", for_user: user) |> Enum.map(& &1.id)
     end
   end
 
index f030523d3a9ac178fa7cda4d0df7980f873d160f..758822072dcb4e27d4fb966ae0600c04edacfe9e 100644 (file)
@@ -46,30 +46,53 @@ defmodule Pleroma.UserSearchTest do
       assert length(User.search("john", limit: 3, offset: 3)) == 2
     end
 
-    test "finds a user by full or partial nickname" do
+    defp clear_virtual_fields(user) do
+      Map.merge(user, %{search_rank: nil, search_type: nil})
+    end
+
+    test "finds a user by full nickname or its leading fragment" do
       user = insert(:user, %{nickname: "john"})
 
       Enum.each(["john", "jo", "j"], fn query ->
         assert user ==
                  User.search(query)
                  |> List.first()
-                 |> Map.put(:search_rank, nil)
-                 |> Map.put(:search_type, nil)
+                 |> clear_virtual_fields()
       end)
     end
 
-    test "finds a user by full or partial name" do
+    test "finds a user by full name or leading fragment(s) of its words" do
       user = insert(:user, %{name: "John Doe"})
 
       Enum.each(["John Doe", "JOHN", "doe", "j d", "j", "d"], fn query ->
         assert user ==
                  User.search(query)
                  |> List.first()
-                 |> Map.put(:search_rank, nil)
-                 |> Map.put(:search_type, nil)
+                 |> clear_virtual_fields()
       end)
     end
 
+    test "is not [yet] capable of matching by non-leading fragments (e.g. by domain)" do
+      user1 = insert(:user, %{nickname: "iamthedude"})
+      insert(:user, %{nickname: "arandom@dude.com"})
+
+      assert [] == User.search("dude")
+
+      # Matching by leading fragment works, though
+      user1_id = user1.id
+      assert ^user1_id = User.search("iam") |> List.first() |> Map.get(:id)
+    end
+
+    test "ranks full nickname match higher than full name match" do
+      nicknamed_user = insert(:user, %{nickname: "hj@shigusegubu.club"})
+      named_user = insert(:user, %{nickname: "xyz@sample.com", name: "HJ"})
+
+      results = User.search("hj")
+
+      assert [nicknamed_user.id, named_user.id] == Enum.map(results, & &1.id)
+      assert Enum.at(results, 0).search_rank > Enum.at(results, 1).search_rank
+    end
+
     test "finds users, considering density of matched tokens" do
       u1 = insert(:user, %{name: "Bar Bar plus Word Word"})
       u2 = insert(:user, %{name: "Word Word Bar Bar Bar"})