国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > JavaScript > 正文

utf8的編碼算法 轉載

2019-11-21 02:23:29
字體:
來源:轉載
供稿:網友
unicode字符集是我們世界上最完善最全面的字符集,幾乎包含了世界上所有的字符。其實可以這么理解,unicode字符集是一張巨大的表格,把世界上各種語言的字符和標點符號都編排到里面,然后按照一定的順序給每個字符排號(很遺憾的是對于中文來說,這個順序不是按照漢語拼音的順序)。有了這張巨大的表格,世界上大部分字符就都有一個unicode內碼(整數)來對應。計算機就通過記錄字符的unicode碼來表示這個字符,然后交給操作系統,操作系統通過unicode碼到字符字體點陣的映射把這個內碼轉換成字體點陣顯示到我們的屏幕上。

         utf8是我們常用的編碼方式,在web開發中使用utf8編碼能完全解決字符集問題。其實utf8是unicode字符集的一種物理實現,它描述了如何高效的存儲unicode的內碼(就是上面說的字符在字符集的順序碼),RFC2044文檔(http: //www.ietf.org/rfc/rfc2044.txt?number=2044)描述了如何從一個內碼轉換成utf8格式的算法。英文不好沒關系,看這個轉換表就會馬上明白了:

   UCS-4 range (hex.)           UTF-8 octet sequence (binary)
   0000 0000-0000 007F   0xxxxxxx
   0000 0080-0000 07FF   110xxxxx 10xxxxxx
   0000 0800-0000 FFFF   1110xxxx 10xxxxxx 10xxxxxx
   0001 0000-001F FFFF   11110xxx 10xxxxxx 10xxxxxx 10xxxxxx
   0020 0000-03FF FFFF   111110xx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
   0400 0000-7FFF FFFF   1111110x 10xxxxxx ... 10xxxxxx

         上面的表格左邊是16進制表示的unicode內碼,最后一行的16進制數“7FFF FFFF”是utf8所能表示的內碼的最大值,換成10進制是這樣的一個數:2147483647(夠大吧:))[對不起,此文最初這兒寫錯了,已改正]。上面表格中右邊一列就是utf8的二進制格式,轉換規則可謂一目了然。我直接給出算法吧(js代碼):


    function toUtf8(code)
    {
     var iByte=0;
     var i=0;
     result="";
     while(code>0x7f)
     {
      iByte=code%0x40;
      code=(code-iByte)/0x40;
      result="%"+(iByte|0x80).toString(16).toUpperCase()+result;
      i++;
     }
     prefix=[0x0,0xc0,0xe0,0xf0,0xf8,0xfc];
     if(i>prefix.length)
     {
      i=5;
     }
     result=""+(code|prefix[i]).toString(16).toUpperCase()+result;
     return result;
    }
        


          例如字符"漢"的unicode是6C49,把這個unicode字符表示為一個大整數,然后轉變成多字節編碼110110001001001:
          觀察這個整數的二進制碼序列(110,110001,001001)
          從后往前取
          如果這個二進制序列只有后7位(小于128,也就是ascii字符)則直接取后7位二進制數形成一個utf8字符。
          上面的字符“漢”二進制序列大于7位,所以取后6位(1001001),加10形成一個utf8字節(10 001001 ,16進制89)。
          剩下的二進制序列(110,110001)從后向前取6位,加10形成一個utf8字節(10 110001,16進制B1)。
          剩下的二進制序列(110)從后向前取6位,由于不足6位,將這個數和1110000相或,得到字符11100110,16進制E6
          最后,就得到了utf8編碼,16進制表示為E6B189

           【應用領域】
           雖然這種標準算法大部分已經由開發工具提供商或者庫實現,但是我們依然會在某些時候需要自己實現這種算法:
           某些瀏覽器(ie5)不支持encodeURI函數,那么使用ajax提交漢字有兩種方案:
                 漢字字符經escape轉變成形如"%uXXXX"的字符,服務端使用上述算法將u后面的unicode序號轉變成utf8字符
                 使用上面的算法結合escape直接在客戶端實現encodeURI功能(推薦使用這種方案)

            實現json-rpc服務
            json轉變。對于php來說,現在有兩個開源項目JSON-PHP 和 PHP-JSON
            json-rpc是一種以json為數據格式的rpc協議,可以方便應用與ajax項目中,json-rpc.org是一個開源的實現。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 左云县| 阜新| 龙岩市| 茶陵县| 芒康县| 赞皇县| 沭阳县| 南城县| 万荣县| 丰县| 互助| 乐东| 溧水县| 陇川县| 惠来县| 搜索| 大化| 兴义市| 仁化县| 启东市| 尤溪县| 丰台区| 手游| 南丰县| 邵武市| 通渭县| 北川| 长宁县| 江油市| 根河市| 德钦县| 松潘县| 怀柔区| 泰兴市| 旺苍县| 东海县| 扎鲁特旗| 乾安县| 武安市| 襄城县| 盐城市|