lucene-java-3.4.0/lucene/contrib/icu/src/data/utr30/BasicFoldings.txt

   1 # Copyright 2001-2010 Unicode, Inc.
   2 #
   3 # Disclaimer
   4 #
   5 # This source code is provided as is by Unicode, Inc. No claims are
   6 # made as to fitness for any particular purpose. No warranties of any
   7 # kind are expressed or implied. The recipient agrees to determine
   8 # applicability of information provided. If this file has been
   9 # purchased on magnetic or optical media from Unicode, Inc., the
  10 # sole remedy for any claim will be exchange of defective media
  11 # within 90 days of receipt.
  12 #
  13 # Limitations on Rights to Redistribute This Code
  14 #
  15 # Unicode, Inc. hereby grants the right to freely use the information
  16 # supplied in this file in the creation of products supporting the
  17 # Unicode Standard, and to make copies of this file in any form
  18 # for internal or external distribution as long as this notice
  19 # remains attached.
  20
  21 ### Custom Normalization mappings for UTR#30
  22 ### (http://www.unicode.org/reports/tr30/tr30-4.html)
  23 ###
  24 ### Created from Unicode 5.2 UCD
  25 ###
  26
  27 ## Accent removal
  28 # See DiacriticFolding.txt
  29 ## Case Folding (done by cf)
  30 ## Canonical Duplicates Folding (done by cd)
  31 ## Dashes folding
  32 # [[:Dash:][:Pd:]]-2053(swung dash) > U+002D
  33 058A>002D
  34 05BE>002D
  35 1400>002D
  36 1806>002D
  37 2010..2015>002D
  38 2E17>002D
  39 2E1A>002D
  40 301C>002D
  41 3030>002D
  42 30A0>002D
  43 #2053>002D
  44 2212>002D
  45 # FE31,FE32,FE58,FE63,FF0D done by kd
  46
  47 ## Greek letterforms folding (done by kd)
  48 ## Hebrew alternates folding (done by kd)
  49 ## Jamo folding (done by kd)
  50 ## Math symbol folding (done by kd)
  51 ## Native digit folding
  52 # See NativeDigitFolding.txt
  53 ## Nobreak folding (done by kd)
  54 ## Overline Folding
  55 FE49..FE4C>203E
  56 ## Positional forms folding (done by kd)
  57 ## Small forms folding (done by kd)
  58 ## Space Folding
  59 # [:Zs:] > U+0020
  60 1680>0020
  61 180E>0020
  62 # 00A0, 2000..200A,202F,205F,3000 done by kd
  63 ## Spacing Accents folding (done by kd)
  64 ## Subscript folding (done by kd)
  65 ## Symbol folding (done by kd)
  66 ## Underline Folding
  67 2017>005E
  68 FE4D..FE4F>005E
  69 ## Diacritic Folding
  70 #
  71
  72 ## Vertical forms folding (done by kd)
  73 ## Han Radical Folding
  74 # See HanRadicalFolding.txt
  75 ## Letter Form Folding (done by kd)
  76 ## Superscript folding
  77 # Additions to kd:
  78 02C0>0294
  79 02C1>0295
  80 06E5>0648
  81 06E6>064A
  82 ## Suzhou Numeral Folding
  83 # Additions to kd:
  84 3021>4E00
  85 3022>4E8C
  86 3023>4E09
  87 3024>56DB
  88 3025>4E94
  89 3026>516D
  90 3027>4E03
  91 3028>516B
  92 3029>4E5D
  93 ## Width Folding (done by kd)
  94 # Punctuation Folding
  95 00AB>0022
  96 00BB>0022
  97 201C..201E>0022
  98 2018..201B>0027
  99 2032>0027
 100 2035>0027
 101 2039..203A>0027
 102 2045>005B
 103 2046>005D
 104 2E28>0028 0028
 105 2E29>0029 0029
 106 2052>0025
 107 204E>002A
 108 2044>002F
 109 204F>003B
 110 2038>005E
 111 2053>007E