4ad6f0c9e45fbd5a695512e87080f9091b90ece6
[rails.git] / test / lib / utf8_test.rb
1 require "test_helper"
2
3 class UTF8Test < ActiveSupport::TestCase
4   def test_valid?
5     assert_equal true, UTF8.valid?("test")
6     assert_equal true, UTF8.valid?("vergrößern")
7     assert_equal true, UTF8.valid?("ルシステムにも対応します")
8     assert_equal true, UTF8.valid?("輕觸搖晃的遊戲")
9
10     assert_equal false, UTF8.valid?("\xC0")         # always invalid utf8
11     assert_equal false, UTF8.valid?("\xC2\x4a")     # 2-byte multibyte identifier, followed by plain ASCII
12     assert_equal false, UTF8.valid?("\xC2\xC2")     # 2-byte multibyte identifier, followed by another one
13     assert_equal false, UTF8.valid?("\x4a\x82")     # plain ASCII, followed by multibyte continuation
14     assert_equal false, UTF8.valid?("\x82\x82")     # multibyte continuations without multibyte identifier
15     assert_equal false, UTF8.valid?("\xe1\x82\x4a") # three-byte identifier, contination and (incorrectly) plain ASCII
16   end
17 end