2021年2月 – 刘荣星的博客

最近项目中使用load file导入文件到低版本MySQL中遇到卡住问题，最终问题为文本文件中某些行包含了emoji表情符号。所以使用python去掉这个emoji符号，然后再导出数据库。

需要安装如下模块：

安装完demoji模块后需要手动下载emoji json文件，如果服务器无法上网，可以本地电脑运行，然后提取这个codes.json文件上传到服务器对应的目录。

>>> import demoji
>>> demoji.download_codes()
Downloading emoji data ...
... OK (Got response in 0.14 seconds)
Writing emoji data to /Users/brad/.demoji/codes.json ...
... OK

代码如下：

#!/usr/bin/env python3
# -*- coding: UTF-8 -*-

import os
import demoji

file_path = "org_loadfile.txt"
final_fine = "loadfile.txt"

# 如果最终文件存在，则删除
if os.path.exists(final_fine):
    os.remove(final_fine)

with open(file_path, 'r') as file:
    for line in file:
        # print(demoji.replace(line, "__"))
        # 替换表情符号为 空
        rap_line = demoji.replace(line, "")
        # 写入文件
        with open(final_fine, 'a') as f:
            f.write(rap_line)

月度归档： 2021年2月

python3去除emoji表情符号