settings/legacy_icu_tokenizer.yaml

   1 normalization:
   2     - ":: NFD ()"
   3     - "[[:Nonspacing Mark:] [:Cf:]] >"
   4     - ":: lower ()"
   5     - "ß > 'ss'" # German szet is unimbigiously equal to double ss
   6     - "[[:Punctuation:][:Space:]]+ > ' '"
   7     - ":: NFC ()"
   8 transliteration: icu_transliteration.rules
   9 compound_suffixes:
  10     # Danish
  11     - hal
  12     - hallen
  13     - hallerne
  14     # German
  15     - berg
  16     - brücke
  17     - fabrik
  18     - gasse
  19     - graben
  20     - haus
  21     - höhle
  22     - hütte
  23     - kapelle
  24     - kogel
  25     - markt
  26     - pfad
  27     - platz
  28     - quelle
  29     - spitze
  30     - stiege
  31     - strasse
  32     - teich
  33     - universität
  34     - wald
  35     - weg
  36     - wiese
  37     # Dutch
  38     - gracht
  39     - laan
  40     - markt
  41     - plein
  42     - straat
  43     - vliet
  44     - weg
  45     # Norwegian
  46     - vei
  47     - veien
  48     - veg
  49     - vegen
  50     - gate
  51     - gaten
  52     - gata
  53     - plass
  54     - plassen
  55     - sving
  56     - svingen
  57     # Finnish
  58     - alue
  59     - asema
  60     - aukio
  61     - kaari
  62     - katu
  63     - kuja
  64     - kylä
  65     - penger
  66     - polku
  67     - puistikko
  68     - puisto
  69     - raitti
  70     - ranta
  71     - rinne
  72     - taival
  73     - tie
  74     - tori
  75     - väylä
  76     # Swedish
  77     - väg
  78     - vägen
  79     - gatan
  80     - gata
  81     - gränd
  82     - gränden
  83     - stig
  84     - stigen
  85     - plats
  86     - platsen
  87 abbreviations:
  88     - acceso => acces
  89     - access => accs
  90     - acequia => aceq
  91     - air force base => afb
  92     - air national guard base => angb
  93     - alameda => alam
  94     - ale => al
  95     - alea => al
  96     - aleea => al
  97     - aleja => al
  98     - alejach => al
  99     - aleje => al
 100     - aleji => al
 101     - all => al
 102     - allee => al
 103     - alley => al
 104     - alleyway => alwy
 105     - ally => al
 106     - alqueria => alque
 107     - alue => al
 108     - aly => al
 109     - am => a
 110     - amble => ambl
 111     - an der => a d
 112     - andador => andad
 113     - angosta => angta
 114     - apartamentos => aptos
 115     - apartments => apts
 116     - apch => app
 117     - apeadero => apdro
 118     - approach => app
 119     - arboleda => arb
 120     - arcade => arc
 121     - arrabal => arral
 122     - arroyo => arry
 123     - arterial => artl
 124     - artery => arty
 125     - auf der => a d
 126     - aukio => auk
 127     - autopista => auto
 128     - autovia => autov
 129     - avd => av
 130     - avda => av
 131     - ave => av
 132     - avenida => av
 133     - avenue => av
 134     - avinguda => av
 135     - b dul => bd
 136     - back => bk
 137     - bad => b
 138     - bahnhof => bf
 139     - bajada => bjada
 140     - balneario => balnr
 141     - banan => ba
 142     - banda => b
 143     - barranco => branc
 144     - barranquil => bqllo
 145     - barriada => barda
 146     - barrio => bo
 147     - barro => bo
 148     - basin => basn
 149     - bda => b
 150     - bdge => bri
 151     - bdul => bd
 152     - bdwy => bway
 153     - beach => bch
 154     - berg => bg
 155     - bgm => bgm
 156     - bhf => bf
 157     - bldngs => bldgs
 158     - block => blk
 159     - blok => bl
 160     - bloque => blque
 161     - blv => bd
 162     - blvd => bd
 163     - boardwalk => bwlk
 164     - boulevard => bd
 165     - boundary => bdy
 166     - brace => br
 167     - brazal => brzal
 168     - brdg => bri
 169     - break => brk
 170     - bridge => bri
 171     - broadway => bway
 172     - broeder => br
 173     - brücke => br
 174     - buildings => bldgs
 175     - bul => bd
 176     - bulev => bd
 177     - bulevar => bd
 178     - bulevard => bd
 179     - bulevardu => bd
 180     - bulevardul => bd
 181     - bulievard => bd
 182     - bulvar => bl
 183     - bulvari => bl
 184     - burg => bg
 185     - burgemeester => bg
 186     - burgermeister => bgm
 187     - business => bus
 188     - buu dien => bd
 189     - bvd => bd
 190     - bypa => byp
 191     - bypass => byp
 192     - byway => bywy
 193     - c le => c
 194     - cadde => cd
 195     - caddesi => cd
 196     - calle => c
 197     - callej => cjon
 198     - calleja => cllja
 199     - callejon => cjon
 200     - callejuela => cjla
 201     - callizo => cllzo
 202     - calzada => czada
 203     - camino => cno
 204     - camino hondo => c h
 205     - camino nuevo => c n
 206     - camino viejo => c v
 207     - camping => campg
 208     - campo => c po
 209     - can cu khong quan => cckq
 210     - cantera => cantr
 211     - cantina => canti
 212     - canton => cant
 213     - cao dang => cd
 214     - caravan => cvn
 215     - carrer => c
 216     - carrera => cra
 217     - carrero => cro
 218     - carretera => ctra
 219     - carreterin => ctrin
 220     - carretil => crtil
 221     - carril => crril
 222     - caserio => csrio
 223     - cau ldhc bo => clb
 224     - caus => cway
 225     - causeway => cway
 226     - ce => cv
 227     - cen => ctr
 228     - center => ctr
 229     - centre => ctr
 230     - centreway => cnwy
 231     - cesta => c
 232     - chalet => chlet
 233     - chase => ch
 234     - che => ch
 235     - chemin => ch
 236     - cinturon => cint
 237     - circle => cir
 238     - circuit => cct
 239     - circunvalacion => ccvcn
 240     - circus => crcs
 241     - city => cty
 242     - cl => c
 243     - cllon => cjon
 244     - close => c
 245     - cmno => cno
 246     - cobertizo => cbtiz
 247     - colonia => col
 248     - commandant => cmdt
 249     - common => comm
 250     - community => comm
 251     - complejo => compj
 252     - concourse => con
 253     - cong truong => ct
 254     - cong ty => cty
 255     - cong ty co phyn => ctcp
 256     - cong vien => cv
 257     - cong vien van hoa => cvvh
 258     - conjunto => cjto
 259     - convento => cnvto
 260     - cooperativa => coop
 261     - copse => cps
 262     - corner => cnr
 263     - corral => crral
 264     - corralillo => crrlo
 265     - corredor => crrdo
 266     - corso => c so
 267     - corte => c te
 268     - cortijo => crtjo
 269     - costanilla => cstan
 270     - costera => coste
 271     - cottages => cotts
 272     - county => co
 273     - county route => cr
 274     - cours => crs
 275     - court => ct
 276     - courtyard => ctyd
 277     - cove => cv
 278     - creek => cr
 279     - cres => cr
 280     - crescent => cr
 281     - crest => crst
 282     - crk => cr
 283     - croft => cft
 284     - cross => crss
 285     - crossing => xing
 286     - crossroad => crd
 287     - crossway => cowy
 288     - crsg => xing
 289     - crt => ct
 290     - csac => cds
 291     - cswy => cway
 292     - cty cp => ctcp
 293     - cuadra => cuadr
 294     - cuesta => custa
 295     - cul de sac => cds
 296     - cutting => cutt
 297     - ddhi hoc => dh
 298     - ddhi lo => dl
 299     - dehesa => dhsa
 300     - demarcacion => demar
 301     - deviation => devn
 302     - diagonal => diag
 303     - diseminado => disem
 304     - distributor => dstr
 305     - doctor => dr
 306     - dokter => dr
 307     - doktor => d r
 308     - dolna => dln
 309     - dolne => dln
 310     - dolny => dln
 311     - dominee => ds
 312     - dorf => df
 313     - dotsient => dots
 314     - drive => dr
 315     - driveway => dvwy
 316     - druga => 2
 317     - drugi => 2
 318     - drugie => 2
 319     - drv => dr
 320     - drwy => dvwy
 321     - duong => d
 322     - duong sat => ds
 323     - duza => dz
 324     - duze => dz
 325     - duzy => dz
 326     - east => e
 327     - edificio => edifc
 328     - elbow => elb
 329     - empresa => empr
 330     - entrada => entd
 331     - entrance => ent
 332     - errepidea => err
 333     - escalera => esca
 334     - escalinata => escal
 335     - espalda => eslda
 336     - esplanade => esp
 337     - estacion => estcn
 338     - estate => est
 339     - estrada => estda
 340     - etorbidea => etorb
 341     - explanada => expla
 342     - expressway => exp
 343     - expy => exp
 344     - extension => ex
 345     - extramuros => extrm
 346     - extrarradio => extrr
 347     - fabrica => fca
 348     - fairway => fawy
 349     - faubourg => fg
 350     - fbrca => fca
 351     - ferry => fy
 352     - fire track => ftrk
 353     - firetrail => fit
 354     - follow => folw
 355     - fondamenta => f ta
 356     - footway => ftwy
 357     - foreshore => fshr
 358     - formation => form
 359     - fort => ft
 360     - freeway => fwy
 361     - front => frnt
 362     - frontage => frtg
 363     - frwy => fwy
 364     - fundacul => fdc
 365     - fundatura => fnd
 366     - ga => g
 367     - galeria => gale
 368     - gamla => gla
 369     - garden => gdn
 370     - gardens => gdn
 371     - gata => g
 372     - gatan => g
 373     - gate => g
 374     - gaten => g
 375     - gdns => gdn
 376     - gebroeders => gebr
 377     - generaal => gen
 378     - gienieral => ghien
 379     - glade => gl
 380     - gld => gl
 381     - glde => gl
 382     - glorieta => gta
 383     - gorna => gn
 384     - gorne => gn
 385     - gorny => gn
 386     - gracht => gr
 387     - grad => ghr
 388     - gran via => g v
 389     - grand => gr
 390     - granden => gr
 391     - grange => gra
 392     - granja => granj
 393     - green => gn
 394     - grn => gn
 395     - gro => gr
 396     - grosse => gr
 397     - grosser => gr
 398     - grosses => gr
 399     - ground => grnd
 400     - grove => gr
 401     - gt => g
 402     - gte => g
 403     - gully => gly
 404     - hauptbahnhof => hbf
 405     - heights => hts
 406     - heiligen => hl
 407     - hgts => hts
 408     - high school => hs
 409     - highroad => hrd
 410     - highway => hwy
 411     - hipodromo => hipod
 412     - hird => hrd
 413     - hospital => hosp
 414     - house => ho
 415     - hse => ho
 416     - i => 1
 417     - ii => 2
 418     - iii => 3
 419     - im => 1
 420     - impasse => imp
 421     - in => 1
 422     - in der => i d
 423     - industrial => ind
 424     - ingenieur => ir
 425     - interchange => intg
 426     - international => intl
 427     - intr => int
 428     - intrarea => int
 429     - island => is
 430     - jardin => jdin
 431     - jonkheer => jhr
 432     - junction => jnc
 433     - k s => ks
 434     - kaari => kri
 435     - kalea => k
 436     - kanunnik => kan
 437     - kapitan => kap
 438     - kardinaal => kard
 439     - katu => k
 440     - khach sdhn => ks
 441     - khu cong nghiep => kcn
 442     - khu du lich => kdl
 443     - khu nghi mat => knm
 444     - kleine => kl
 445     - kleiner => kl
 446     - kleines => kl
 447     - kolo => k
 448     - kolonel => kol
 449     - kolonia => kol
 450     - koning => kon
 451     - koningin => kon
 452     - kort e => k
 453     - kri => kri
 454     - kte => k
 455     - kuja => kj
 456     - kvartal => kv
 457     - kyla => kl
 458     - laan => ln
 459     - ladera => ldera
 460     - landing => ldg
 461     - lane => ln
 462     - laneway => lnwy
 463     - lange => l
 464     - largo => l go
 465     - lille => ll
 466     - line => ln
 467     - link => lk
 468     - lit => lt
 469     - little => lt
 470     - llanura => llnra
 471     - lookout => lkt
 472     - loop => lp
 473     - low => lr
 474     - lower => lr
 475     - luitenant => luit
 476     - lwr => lr
 477     - m te => mt
 478     - m tele => mt
 479     - maantee => mt
 480     - mala => ml
 481     - male => ml
 482     - malecon => malec
 483     - maly => ml
 484     - manor => mnr
 485     - mansions => mans
 486     - market => mkt
 487     - markt => mkt
 488     - mazowiecka => maz
 489     - mazowiecki => maz
 490     - mazowieckie => maz
 491     - meadows => mdws
 492     - meander => mr
 493     - medical => med
 494     - meester => mr
 495     - mercado => merc
 496     - mevrouw => mevr
 497     - mews => m
 498     - miasto => m
 499     - middle => mid
 500     - middle school => ms
 501     - mile => mi
 502     - military => mil
 503     - mirador => mrdor
 504     - mitropolit => mit
 505     - mkt => mkt
 506     - mndr => mr
 507     - mnt => mt
 508     - monasterio => mtrio
 509     - monseigneur => mgr
 510     - mont => mt
 511     - motorway => mwy
 512     - mount => mt
 513     - mountain => mtn
 514     - mtwy => mwy
 515     - muelle => muell
 516     - municipal => mun
 517     - muntele => mt
 518     - museum => mus
 519     - mw => m
 520     - na => n
 521     - namesti => nam
 522     - namestie => nam
 523     - national park => np
 524     - national recreation area => nra
 525     - national wildlife refuge area => nwra
 526     - nha hat => nh
 527     - nha thi dzu => ntd
 528     - nha tho => nt
 529     - nordre => ndr
 530     - norra => n
 531     - north => n
 532     - north east => ne
 533     - north west => n
 534     - northeast => ne
 535     - northwest => n
 536     - nowa => n
 537     - nowe => n
 538     - nowy => n
 539     - nucleo => ncleo
 540     - nw => n
 541     - oa => o
 542     - ob => o
 543     - obere => o
 544     - oberer => o
 545     - oberes => o
 546     - olv => olv
 547     - onze lieve vrouw e => olv
 548     - osiedle => os
 549     - osiedlu => os
 550     - ostra => o
 551     - outlook => otlk
 552     - p k => pk
 553     - p ta => pta
 554     - p zza => p za
 555     - palacio => palac
 556     - pantano => pant
 557     - parade => pde
 558     - paraje => praje
 559     - park => pk
 560     - parklands => pkld
 561     - parkway => pwy
 562     - parque => pque
 563     - particular => parti
 564     - partida => ptda
 565     - pas => ps
 566     - pasadizo => pzo
 567     - pasaje => psaje
 568     - paseo => po
 569     - paseo maritimo => psmar
 570     - pasillo => psllo
 571     - pass => ps
 572     - passage => ps
 573     - passatge => ptge
 574     - passeig => pg
 575     - pastoor => past
 576     - pathway => pway
 577     - penger => pgr
 578     - pfad => p
 579     - pgr => pgr
 580     - ph => p
 581     - phi truong => pt
 582     - phuong => p
 583     - phwy => pway
 584     - piata => pta
 585     - piaz => p za
 586     - piazza => p za
 587     - piazzale => p le
 588     - piazzetta => pta
 589     - pierwsza => 1
 590     - pierwsze => 1
 591     - pierwszy => 1
 592     - pike => pk
 593     - pko => pko
 594     - pkwy => pwy
 595     - pky => pwy
 596     - plac => pl
 597     - placa => pl
 598     - place => pl
 599     - placem => pl
 600     - placu => pl
 601     - plass => pl
 602     - plassen => pl
 603     - plateau => plat
 604     - plats => pl
 605     - platsen => pl
 606     - platz => pl
 607     - plaza => pl
 608     - plazoleta => pzta
 609     - plazuela => plzla
 610     - plein => pln
 611     - pln => pln
 612     - ploshchad => pl
 613     - plz => pl
 614     - plza => pl
 615     - pnt => pt
 616     - poblado => pbdo
 617     - pocket => pkt
 618     - point => pt
 619     - poligono => polig
 620     - poligono industrial => pgind
 621     - polku => p
 622     - ponte => p te
 623     - porta => pta
 624     - portal => prtal
 625     - portico => prtco
 626     - portillo => ptilo
 627     - prazuela => przla
 628     - precinct => pct
 629     - pres => pres
 630     - president => pres
 631     - prins => pr
 632     - prinses => pr
 633     - professor => prof
 634     - profiesor => prof
 635     - prolongacion => prol
 636     - promenade => prom
 637     - psge => ps
 638     - pueblo => pblo
 639     - puente => pnte
 640     - puerta => pta
 641     - puerto => pto
 642     - puistikko => pko
 643     - puisto => ps
 644     - punto kilometrico => pk
 645     - pza => pl
 646     - quadrangle => qdgl
 647     - quadrant => qdrt
 648     - quai => qu
 649     - quan => q
 650     - quay => qy
 651     - quays => qys
 652     - qucyng truong => qt
 653     - quelle => qu
 654     - quoc lo => ql
 655     - raitti => r
 656     - rambla => rbla
 657     - ramble => rmbl
 658     - rampla => rampa
 659     - range => rnge
 660     - ranta => rt
 661     - rdhp hat => rh
 662     - reach => rch
 663     - reservation => res
 664     - reserve => res
 665     - reservoir => res
 666     - residencial => resid
 667     - retreat => rtt
 668     - rhein => rh
 669     - ribera => rbra
 670     - ridge => rdge
 671     - ridgeway => rgwy
 672     - right of way => rowy
 673     - rincon => rcon
 674     - rinconada => rcda
 675     - rinne => rn
 676     - rise => ri
 677     - riv => r
 678     - river => r
 679     - riverway => rvwy
 680     - riviera => rvra
 681     - road => rd
 682     - roads => rds
 683     - roadside => rdsd
 684     - roadway => rdwy
 685     - ronde => rnde
 686     - rosebowl => rsbl
 687     - rotary => rty
 688     - rotonda => rtda
 689     - round => rnd
 690     - route => rt
 691     - rte => rt
 692     - rue => r
 693     - rvr => r
 694     - sa => s
 695     - saint => st
 696     - sainte => ste
 697     - salizada => s da
 698     - san => s
 699     - san bay => sb
 700     - san bay quoc te => sbqt
 701     - san van dong => svd
 702     - sanatorio => sanat
 703     - sankt => st
 704     - santa => sta
 705     - santuario => santu
 706     - sector => sect
 707     - sendera => sedra
 708     - sendero => send
 709     - serviceway => swy
 710     - shunt => shun
 711     - shwy => sh
 712     - siding => sdng
 713     - sielo => s
 714     - sint => st
 715     - slope => slpe
 716     - sodra => s
 717     - sok => sk
 718     - sokagi => sk
 719     - sokak => sk
 720     - sondre => sdr
 721     - soseaua => sos
 722     - sound => snd
 723     - south => s
 724     - south east => se
 725     - south west => sw
 726     - south-east => se
 727     - south-west => sw
 728     - southeast => se
 729     - southwest => sw
 730     - spl => sp
 731     - splaiul => sp
 732     - spodnja => sp
 733     - spodnje => sp
 734     - spodnji => sp
 735     - square => sq
 736     - srednja => sr
 737     - srednje => sr
 738     - srednji => sr
 739     - stara => st
 740     - stare => st
 741     - stary => st
 742     - state highway => sh
 743     - state route => sr
 744     - station => stn
 745     - stazione => staz
 746     - ste => ste
 747     - steenweg => stwg
 748     - sth => s
 749     - stig => st
 750     - stigen => st
 751     - store => st
 752     - str la => sdla
 753     - stra => st
 754     - straat => st
 755     - strada => st
 756     - strada comunale => sc
 757     - strada provinciale => sp
 758     - strada regionale => sr
 759     - strada statale => ss
 760     - stradela => sdla
 761     - strand => st
 762     - strasse => str
 763     - street => st
 764     - strip => strp
 765     - stwg => stwg
 766     - subida => sbida
 767     - subway => sbwy
 768     - sveta => sv
 769     - sveti => sv
 770     - svieti => sv
 771     - sving => sv
 772     - svingen => sv
 773     - svwy => swy
 774     - taival => tvl
 775     - tanav => tn
 776     - tce => ter
 777     - tcty => tct
 778     - terr => ter
 779     - terrace => ter
 780     - thanh pho => tp
 781     - thfr => thor
 782     - thi trzn => tt
 783     - thi xa => tx
 784     - thoroughfare => thor
 785     - tie => t
 786     - tieu hoc => th
 787     - tinh lo => tl
 788     - tollway => tlwy
 789     - tong cong ty => tct
 790     - tori => tr
 791     - torrente => trrnt
 792     - towers => twrs
 793     - township => twp
 794     - tpke => tpk
 795     - track => trk
 796     - trail => trl
 797     - trailer => trlr
 798     - transito => trans
 799     - transversal => trval
 800     - trasera => tras
 801     - travesia => trva
 802     - triangle => tri
 803     - trung hoc co so => thcs
 804     - trung hoc pho thong => thpt
 805     - trung tam => tt
 806     - trung tam thuong mdhi => tttm
 807     - trunkway => tkwy
 808     - trzeci => 3
 809     - trzecia => 3
 810     - trzecie => 3
 811     - tunnel => tun
 812     - turn => tn
 813     - turnpike => tpk
 814     - tvl => tvl
 815     - ulica => ul
 816     - ulice => ul
 817     - ulicy => ul
 818     - ulitsa => ul
 819     - underpass => upas
 820     - university => univ
 821     - untere => u
 822     - unterer => u
 823     - unteres => u
 824     - upper => up
 825     - upr => up
 826     - urbanizacion => urb
 827     - utca => u
 828     - v d => vd
 829     - va => v
 830     - vag => v
 831     - vagen => v
 832     - vale => v
 833     - van => v
 834     - van de => vd
 835     - varf => vf
 836     - varful => vf
 837     - vastra => v
 838     - vayla => vla
 839     - vdct => via
 840     - vecindario => vecin
 841     - vei => v
 842     - veien => v
 843     - velika => v
 844     - velike => v
 845     - veliki => v
 846     - veliko => v
 847     - vereda => vreda
 848     - via => v
 849     - viad => via
 850     - viaduct => via
 851     - viaducto => vcto
 852     - viale => v le
 853     - vicolo => v lo
 854     - vien bcyo tang => vbt
 855     - view => vw
 856     - villas => vlls
 857     - virf => vf
 858     - virful => vf
 859     - vista => vsta
 860     - viviendas => vvdas
 861     - vkhod => vkh
 862     - vla => vla
 863     - vliet => vlt
 864     - vlt => vlt
 865     - vn => v
 866     - vuon quoc gia => vqg
 867     - walk => wlk
 868     - walkway => wkwy
 869     - way => wy
 870     - west => w
 871     - wharf => whrf
 872     - wielka => wlk
 873     - wielki => wlk
 874     - wielkie => wlk
 875     - wielkopolska => wlkp
 876     - wielkopolski => wlkp
 877     - wielkopolskie => wlkp
 878     - wojewodztwie => woj
 879     - wojewodztwo => woj
 880     - yard => yd
 881     - zgornja => zg
 882     - zgornje => zg
 883     - zgornji => zg
 884     - zhilishchien komplieks => zh k
 885     - zum => z