Git of dcc - anni/blob - test/pleroma/formatter_test.exs

   1 # Pleroma: A lightweight social networking server
   2 # Copyright © 2017-2022 Pleroma Authors <https://pleroma.social/>
   3 # SPDX-License-Identifier: AGPL-3.0-only
   4
   5 defmodule Pleroma.FormatterTest do
   6   alias Pleroma.Formatter
   7   alias Pleroma.User
   8   use Pleroma.DataCase
   9
  10   import Pleroma.Factory
  11
  12   setup_all do
  13     clear_config(Pleroma.Formatter)
  14     Tesla.Mock.mock_global(fn env -> apply(HttpRequestMock, :request, [env]) end)
  15     :ok
  16   end
  17
  18   describe ".add_hashtag_links" do
  19     test "turns hashtags into links" do
  20       text = "I love #cofe and #2hu"
  21
  22       expected_text =
  23         ~s(I love <a class="hashtag" data-tag="cofe" href="http://localhost:4001/tag/cofe" rel="tag ugc">#cofe</a> and <a class="hashtag" data-tag="2hu" href="http://localhost:4001/tag/2hu" rel="tag ugc">#2hu</a>)
  24
  25       assert {^expected_text, [], _tags} = Formatter.linkify(text)
  26     end
  27
  28     test "does not turn html characters to tags" do
  29       text = "#fact_3: pleroma does what mastodon't"
  30
  31       expected_text =
  32         ~s(<a class="hashtag" data-tag="fact_3" href="http://localhost:4001/tag/fact_3" rel="tag ugc">#fact_3</a>: pleroma does what mastodon't)
  33
  34       assert {^expected_text, [], _tags} = Formatter.linkify(text)
  35     end
  36   end
  37
  38   describe ".add_links" do
  39     test "turning urls into links" do
  40       text = "Hey, check out https://www.youtube.com/watch?v=8Zg1-TufF%20zY?x=1&y=2#blabla ."
  41
  42       expected =
  43         ~S(Hey, check out <a href="https://www.youtube.com/watch?v=8Zg1-TufF%20zY?x=1&y=2#blabla" rel="ugc">https://www.youtube.com/watch?v=8Zg1-TufF%20zY?x=1&y=2#blabla</a> .)
  44
  45       assert {^expected, [], []} = Formatter.linkify(text)
  46
  47       text = "https://mastodon.social/@lambadalambda"
  48
  49       expected =
  50         ~S(<a href="https://mastodon.social/@lambadalambda" rel="ugc">https://mastodon.social/@lambadalambda</a>)
  51
  52       assert {^expected, [], []} = Formatter.linkify(text)
  53
  54       text = "https://mastodon.social:4000/@lambadalambda"
  55
  56       expected =
  57         ~S(<a href="https://mastodon.social:4000/@lambadalambda" rel="ugc">https://mastodon.social:4000/@lambadalambda</a>)
  58
  59       assert {^expected, [], []} = Formatter.linkify(text)
  60
  61       text = "@lambadalambda"
  62       expected = "@lambadalambda"
  63
  64       assert {^expected, [], []} = Formatter.linkify(text)
  65
  66       text = "http://www.cs.vu.nl/~ast/intel/"
  67
  68       expected =
  69         ~S(<a href="http://www.cs.vu.nl/~ast/intel/" rel="ugc">http://www.cs.vu.nl/~ast/intel/</a>)
  70
  71       assert {^expected, [], []} = Formatter.linkify(text)
  72
  73       text = "https://forum.zdoom.org/viewtopic.php?f=44&t=57087"
  74
  75       expected =
  76         "<a href=\"https://forum.zdoom.org/viewtopic.php?f=44&t=57087\" rel=\"ugc\">https://forum.zdoom.org/viewtopic.php?f=44&t=57087</a>"
  77
  78       assert {^expected, [], []} = Formatter.linkify(text)
  79
  80       text = "https://en.wikipedia.org/wiki/Sophia_(Gnosticism)#Mythos_of_the_soul"
  81
  82       expected =
  83         "<a href=\"https://en.wikipedia.org/wiki/Sophia_(Gnosticism)#Mythos_of_the_soul\" rel=\"ugc\">https://en.wikipedia.org/wiki/Sophia_(Gnosticism)#Mythos_of_the_soul</a>"
  84
  85       assert {^expected, [], []} = Formatter.linkify(text)
  86
  87       text = "https://www.google.co.jp/search?q=Nasim+Aghdam"
  88
  89       expected =
  90         "<a href=\"https://www.google.co.jp/search?q=Nasim+Aghdam\" rel=\"ugc\">https://www.google.co.jp/search?q=Nasim+Aghdam</a>"
  91
  92       assert {^expected, [], []} = Formatter.linkify(text)
  93
  94       text = "https://en.wikipedia.org/wiki/Duff's_device"
  95
  96       expected =
  97         "<a href=\"https://en.wikipedia.org/wiki/Duff's_device\" rel=\"ugc\">https://en.wikipedia.org/wiki/Duff's_device</a>"
  98
  99       assert {^expected, [], []} = Formatter.linkify(text)
 100
 101       text = "https://pleroma.com https://pleroma.com/sucks"
 102
 103       expected =
 104         "<a href=\"https://pleroma.com\" rel=\"ugc\">https://pleroma.com</a> <a href=\"https://pleroma.com/sucks\" rel=\"ugc\">https://pleroma.com/sucks</a>"
 105
 106       assert {^expected, [], []} = Formatter.linkify(text)
 107
 108       text = "xmpp:contact@hacktivis.me"
 109
 110       expected = "<a href=\"xmpp:contact@hacktivis.me\" rel=\"ugc\">xmpp:contact@hacktivis.me</a>"
 111
 112       assert {^expected, [], []} = Formatter.linkify(text)
 113
 114       text =
 115         "magnet:?xt=urn:btih:7ec9d298e91d6e4394d1379caf073c77ff3e3136&tr=udp%3A%2F%2Fopentor.org%3A2710&tr=udp%3A%2F%2Ftracker.blackunicorn.xyz%3A6969&tr=udp%3A%2F%2Ftracker.ccc.de%3A80&tr=udp%3A%2F%2Ftracker.coppersurfer.tk%3A6969&tr=udp%3A%2F%2Ftracker.leechers-paradise.org%3A6969&tr=udp%3A%2F%2Ftracker.openbittorrent.com%3A80&tr=wss%3A%2F%2Ftracker.btorrent.xyz&tr=wss%3A%2F%2Ftracker.fastcast.nz&tr=wss%3A%2F%2Ftracker.openwebtorrent.com"
 116
 117       expected = "<a href=\"#{text}\" rel=\"ugc\">#{text}</a>"
 118
 119       assert {^expected, [], []} = Formatter.linkify(text)
 120     end
 121   end
 122
 123   describe "Formatter.linkify" do
 124     test "correctly finds mentions that contain the domain name" do
 125       _user = insert(:user, %{nickname: "lain"})
 126       _remote_user = insert(:user, %{nickname: "lain@lain.com", local: false})
 127
 128       text = "hey @lain@lain.com what's up"
 129
 130       {_text, mentions, []} = Formatter.linkify(text)
 131       [{username, user}] = mentions
 132
 133       assert username == "@lain@lain.com"
 134       assert user.nickname == "lain@lain.com"
 135     end
 136
 137     test "gives a replacement for user links, using local nicknames in user links text" do
 138       text = "@gsimg According to @archa_eme_, that is @daggsy. Also hello @archaeme@archae.me"
 139       gsimg = insert(:user, %{nickname: "gsimg"})
 140
 141       archaeme =
 142         insert(:user,
 143           nickname: "archa_eme_",
 144           uri: "https://archeme/@archa_eme_"
 145         )
 146
 147       archaeme_remote = insert(:user, %{nickname: "archaeme@archae.me"})
 148
 149       {text, mentions, []} = Formatter.linkify(text)
 150
 151       assert length(mentions) == 3
 152
 153       expected_text =
 154         ~s(<span class="h-card"><a class="u-url mention" data-user="#{gsimg.id}" href="#{gsimg.ap_id}" rel="ugc">@<span>gsimg</span></a></span> According to <span class="h-card"><a class="u-url mention" data-user="#{archaeme.id}" href="#{"https://archeme/@archa_eme_"}" rel="ugc">@<span>archa_eme_</span></a></span>, that is @daggsy. Also hello <span class="h-card"><a class="u-url mention" data-user="#{archaeme_remote.id}" href="#{archaeme_remote.ap_id}" rel="ugc">@<span>archaeme</span></a></span>)
 155
 156       assert expected_text == text
 157     end
 158
 159     test "gives a replacement for user links when the user is using Osada" do
 160       {:ok, mike} = User.get_or_fetch("mike@osada.macgirvin.com")
 161
 162       text = "@mike@osada.macgirvin.com test"
 163
 164       {text, mentions, []} = Formatter.linkify(text)
 165
 166       assert length(mentions) == 1
 167
 168       expected_text =
 169         ~s(<span class="h-card"><a class="u-url mention" data-user="#{mike.id}" href="#{mike.ap_id}" rel="ugc">@<span>mike</span></a></span> test)
 170
 171       assert expected_text == text
 172     end
 173
 174     test "gives a replacement for single-character local nicknames" do
 175       text = "@o hi"
 176       o = insert(:user, %{nickname: "o"})
 177
 178       {text, mentions, []} = Formatter.linkify(text)
 179
 180       assert length(mentions) == 1
 181
 182       expected_text =
 183         ~s(<span class="h-card"><a class="u-url mention" data-user="#{o.id}" href="#{o.ap_id}" rel="ugc">@<span>o</span></a></span> hi)
 184
 185       assert expected_text == text
 186     end
 187
 188     test "does not give a replacement for single-character local nicknames who don't exist" do
 189       text = "@a hi"
 190
 191       expected_text = "@a hi"
 192       assert {^expected_text, [] = _mentions, [] = _tags} = Formatter.linkify(text)
 193     end
 194
 195     test "given the 'safe_mention' option, it will only mention people in the beginning" do
 196       user = insert(:user)
 197       other_user = insert(:user)
 198       third_user = insert(:user)
 199       text = " @#{user.nickname} @#{other_user.nickname} hey dudes i hate @#{third_user.nickname}"
 200       {expected_text, mentions, [] = _tags} = Formatter.linkify(text, safe_mention: true)
 201
 202       assert mentions == [{"@#{user.nickname}", user}, {"@#{other_user.nickname}", other_user}]
 203
 204       assert expected_text ==
 205                ~s(<span class="h-card"><a class="u-url mention" data-user="#{user.id}" href="#{user.ap_id}" rel="ugc">@<span>#{user.nickname}</span></a></span> <span class="h-card"><a class="u-url mention" data-user="#{other_user.id}" href="#{other_user.ap_id}" rel="ugc">@<span>#{other_user.nickname}</span></a></span> hey dudes i hate <span class="h-card"><a class="u-url mention" data-user="#{third_user.id}" href="#{third_user.ap_id}" rel="ugc">@<span>#{third_user.nickname}</span></a></span>)
 206     end
 207
 208     test "given the 'safe_mention' option, it will still work without any mention" do
 209       text = "A post without any mention"
 210       {expected_text, mentions, [] = _tags} = Formatter.linkify(text, safe_mention: true)
 211
 212       assert mentions == []
 213       assert expected_text == text
 214     end
 215
 216     test "given the 'safe_mention' option, it will keep text after newlines" do
 217       user = insert(:user)
 218       text = " @#{user.nickname}\n hey dude\n\nhow are you doing?"
 219
 220       {expected_text, _, _} = Formatter.linkify(text, safe_mention: true)
 221
 222       assert expected_text =~ "how are you doing?"
 223     end
 224
 225     test "it can parse mentions and return the relevant users" do
 226       text =
 227         "@@gsimg According to @archaeme, that is @daggsy. Also hello @archaeme@archae.me and @o and @@@jimm"
 228
 229       o = insert(:user, %{nickname: "o"})
 230       _jimm = insert(:user, %{nickname: "jimm"})
 231       _gsimg = insert(:user, %{nickname: "gsimg"})
 232       archaeme = insert(:user, %{nickname: "archaeme"})
 233       archaeme_remote = insert(:user, %{nickname: "archaeme@archae.me"})
 234
 235       expected_mentions = [
 236         {"@archaeme", archaeme},
 237         {"@archaeme@archae.me", archaeme_remote},
 238         {"@o", o}
 239       ]
 240
 241       assert {_text, ^expected_mentions, []} = Formatter.linkify(text)
 242     end
 243
 244     test "it parses URL containing local mention" do
 245       _user = insert(:user, %{nickname: "lain"})
 246
 247       text = "https://example.com/@lain"
 248
 249       expected = ~S(<a href="https://example.com/@lain" rel="ugc">https://example.com/@lain</a>)
 250
 251       assert {^expected, [], []} = Formatter.linkify(text)
 252     end
 253
 254     test "it correctly parses angry face D:< with mention" do
 255       lain =
 256         insert(:user, %{
 257           nickname: "lain@lain.com",
 258           ap_id: "https://lain.com/users/lain",
 259           id: "9qrWmR0cKniB0YU0TA"
 260         })
 261
 262       text = "@lain@lain.com D:<"
 263
 264       expected_text =
 265         ~S(<span class="h-card"><a class="u-url mention" data-user="9qrWmR0cKniB0YU0TA" href="https://lain.com/users/lain" rel="ugc">@<span>lain</span></a></span> D:<)
 266
 267       expected_mentions = [
 268         {"@lain@lain.com", lain}
 269       ]
 270
 271       assert {^expected_text, ^expected_mentions, []} = Formatter.linkify(text)
 272     end
 273
 274     test "correctly parses mentions in html" do
 275       text = "<p>@lain hello</p>"
 276       lain = insert(:user, %{nickname: "lain"})
 277
 278       {text, mentions, []} = Formatter.linkify(text)
 279
 280       assert length(mentions) == 1
 281
 282       expected_text =
 283         ~s(<p><span class="h-card"><a class="u-url mention" data-user="#{lain.id}" href="#{lain.ap_id}" rel="ugc">@<span>lain</span></a></span> hello</p>)
 284
 285       assert expected_text == text
 286     end
 287
 288     test "correctly parses mentions on the last line of html" do
 289       text = "<p>Hello</p><p>@lain</p>"
 290       lain = insert(:user, %{nickname: "lain"})
 291
 292       {text, mentions, []} = Formatter.linkify(text)
 293
 294       assert length(mentions) == 1
 295
 296       expected_text =
 297         ~s(<p>Hello</p><p><span class="h-card"><a class="u-url mention" data-user="#{lain.id}" href="#{lain.ap_id}" rel="ugc">@<span>lain</span></a></span></p>)
 298
 299       assert expected_text == text
 300     end
 301   end
 302
 303   describe ".parse_tags" do
 304     test "parses tags in the text" do
 305       text = "Here's a #Test. Maybe these are #working or not. What about #漢字? And #は｡"
 306
 307       expected_tags = [
 308         {"#Test", "test"},
 309         {"#working", "working"},
 310         {"#は", "は"},
 311         {"#漢字", "漢字"}
 312       ]
 313
 314       assert {_text, [], ^expected_tags} = Formatter.linkify(text)
 315     end
 316
 317     test "parses tags in html" do
 318       text = "<p>This is a #test</p>"
 319
 320       expected_tags = [
 321         {"#test", "test"}
 322       ]
 323
 324       assert {_text, [], ^expected_tags} = Formatter.linkify(text)
 325     end
 326
 327     test "parses multiple tags in html" do
 328       text = "<p>#tag1 #tag2 #tag3 #tag4</p>"
 329
 330       expected_tags = [
 331         {"#tag1", "tag1"},
 332         {"#tag2", "tag2"},
 333         {"#tag3", "tag3"},
 334         {"#tag4", "tag4"}
 335       ]
 336
 337       assert {_text, [], ^expected_tags} = Formatter.linkify(text)
 338     end
 339
 340     test "parses tags on the last line of html" do
 341       text = "<p>This is a</p><p>#test</p>"
 342
 343       expected_tags = [
 344         {"#test", "test"}
 345       ]
 346
 347       assert {_text, [], ^expected_tags} = Formatter.linkify(text)
 348     end
 349
 350     test "parses multiple tags on multiple lines in html" do
 351       text =
 352         "<p>testing...</p><p>#tag1 #tag2 #tag3 #tag4</p><p>paragraph</p><p>#tag5 #tag6 #tag7 #tag8</p>"
 353
 354       expected_tags = [
 355         {"#tag1", "tag1"},
 356         {"#tag2", "tag2"},
 357         {"#tag3", "tag3"},
 358         {"#tag4", "tag4"},
 359         {"#tag5", "tag5"},
 360         {"#tag6", "tag6"},
 361         {"#tag7", "tag7"},
 362         {"#tag8", "tag8"}
 363       ]
 364
 365       assert {_text, [], ^expected_tags} = Formatter.linkify(text)
 366     end
 367   end
 368
 369   test "it escapes HTML in plain text" do
 370     text = "hello & world google.com/?a=b&c=d \n http://test.com/?a=b&c=d 1"
 371     expected = "hello &amp; world google.com/?a=b&c=d \n http://test.com/?a=b&c=d 1"
 372
 373     assert Formatter.html_escape(text, "text/plain") == expected
 374   end
 375 end