python字符串编码判断
来源:互联网 发布:php 开源 报表系统 编辑:程序博客网 时间:2024/04/29 22:19
def is_chinese(uchar): """判断一个unicode是否是汉字""" if uchar >= u'\u4e00' and uchar<=u'\u9fa5': return True else: return False def is_number(uchar): """判断一个unicode是否是数字""" if uchar >= u'\u0030' and uchar<=u'\u0039': return True else: return False def is_alphabet(uchar): """判断一个unicode是否是英文字母""" if (uchar >= u'\u0041' and uchar<=u'\u005a') or (uchar >= u'\u0061' and uchar<=u'\u007a'): return True else: return False def is_other(uchar): """判断是否非汉字,数字和英文字符""" if not (is_chinese(uchar) or is_number(uchar) or is_alphabet(uchar)): return True else: return False def B2Q(uchar): """半角转全角""" inside_code=ord(uchar) if inside_code<0x0020 or inside_code>0x7e: #不是半角字符就返回原来的字符 return uchar if inside_code==0x0020: #除了空格其他的全角半角的公式为:半角=全角-0xfee0 inside_code=0x3000 else: inside_code+=0xfee0 return unichr(inside_code) def Q2B(uchar): """全角转半角""" inside_code=ord(uchar) if inside_code==0x3000: inside_code=0x0020 else: inside_code-=0xfee0 if inside_code<0x0020 or inside_code>0x7e: #转完之后不是半角字符返回原来的字符 return uchar return unichr(inside_code) def stringQ2B(ustring): """把字符串全角转半角""" return "".join([Q2B(uchar) for uchar in ustring]) def uniform(ustring): """格式化字符串,完成全角转半角,大写转小写的工作""" return stringQ2B(ustring).lower() def string2List(ustring): """将ustring按照中文,字母,数字分开""" retList=[] utmp=[] for uchar in ustring: if is_other(uchar): if len(utmp)==0: continue else: retList.append("".join(utmp)) utmp=[] else: utmp.append(uchar) if len(utmp)!=0: retList.append("".join(utmp)) return retList if __name__=="__main__": #test Q2B and B2Q for i in range(0x0020,0x007F): print Q2B(B2Q(unichr(i))),B2Q(unichr(i)) #test uniform ustring=u'中国 人名a高频A' ustring=uniform(ustring) ret=string2List(ustring) print ret
转自:http://my.oschina.net/eonezhang/blog/125440
0 0
- python字符串编码判断
- Python判断文件和字符串编码类型
- Python判断字符串、文件字符编码
- Python判断字符串编码以及编码的转换
- python判断字符串编码——使用chardet判断字符串编码的方法
- 判断字符串的编码
- java判断字符串编码
- 判断字符串编码类型
- 判断字符串编码类型
- JAVA判断字符串编码
- Python 字符编码判断
- Python 字符编码判断
- Python 字符编码判断
- Python 字符编码判断
- Python 字符编码判断
- Python 字符编码判断
- Python字符串编码
- python字符串编码常见问题
- 记下来
- POJ 1426 Find The Multiple
- Java 安全模型学习(一)
- NSNotificaiton
- MAC下用eclipse编译cocos2d-x项目
- python字符串编码判断
- spring学习5- Container Extension Points(BeanPostProcessor 与BeanFactoryPostProcessor)
- UIView iOS 总结
- 安装sharepoint顺序
- scala-上界
- windows-PHP5安装配置指南(转载)
- 我们被我们的「正义」压倒
- 数字翻转
- mysql explain字段说明