字符串切分 utf-8(支持汉语、日文、韩文等,高效、)

原创
2016-07-25 09:08:02 970浏览
因为mb_substr、mb_strlen太过低效,故而采用了此段代码。

非原创,主要原理是根据UTF-8的编码特点
0xxxxxxx
110xxxxx 10xxxxxx
1110xxxx 10xxxxxx 10xxxxxx
11110xxx 10xxxxxx 10xxxxxx 10xxxxxx
111110xx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
1111110x 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx 10xxxxxx
来获取字符边界,从而确定一个字所占字节数,并处理成数组。


方便对字符操作比较频繁的用户,此函数效率比mb_substr高效10倍,我曾经写过一个「N万违禁词替换类」,在开发此类过程中,详细对比过这两者的效率,此函数明显胜出。
  1. function str_split_utf8($str) {
  2. // place each character of the string into and array
  3. $split = 1;
  4. $array = array(); $len = strlen($str);
  5. for ( $i = 0; $i < $len; ){
  6. $value = ord($str[$i]);
  7. if($value > 0x7F){
  8. if($value >= 0xC0 && $value <= 0xDF)
  9. $split = 2;
  10. elseif($value >= 0xE0 && $value <= 0xEF)
  11. $split = 3;
  12. elseif($value >= 0xF0 && $value <= 0xF7)
  13. $split = 4;
  14. elseif($value >= 0xF8 && $value <= 0xFB)
  15. $split = 5;
  16. elseif($value >= 0xFC)
  17. $split = 6;
  18. } else {
  19. $split = 1;
  20. }
  21. $key = '';
  22. for ( $j = 0; $j < $split; ++$j, ++$i ) {
  23. $key .= $str[$i];
  24. }
  25. $array[] = $key;
  26. }
  27. return $array;
  28. }
复制代码


声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn核实处理。
上一条:php+txt淘宝客超精简版sina_SAE专版 下一条:有效取得中文字符的长度和字符串

相关文章

查看更多