pycantonese

pycantonese

适用于粤语NLP的Python库

PyCantonese是一个专为粤语语言学和自然语言处理设计的Python库,具有语料库访问、粤拼转换、文本解析、分词和词性标注等功能。项目提供详细文档和快速入门,支持通过PyPI安装,并有活跃的社区持续优化。

PyCantonese粤语语言学自然语言处理语料库词性标注Github开源项目

PyCantonese 项目介绍

PyCantonese 是一个用于粤语语言学和自然语言处理(NLP)的 Python 库。该项目专注于处理粤语文本,为研究和开发提供多种工具。

功能特性

PyCantonese 当前实现的功能包括:

  • 语料库数据访问与搜索:提供对现有粤语语料库数据的访问和搜索功能,方便用户进行语言学研究。
  • 注音转换工具:支持粤语拼音Jyutping的解析与转换,使得处理中文罗马化拼音更加简单。
  • 粤语文本解析:提供对粤语文本的解析能力,帮助用户更好地理解和使用粤语语言数据。
  • 停用词:包括常用的粤语停用词列表,以提升自然语言处理任务的准确性。
  • 分词功能:能够对粤语文本进行分词,识别词语边界。
  • 词性标注:提供词汇的词性标注能力,帮助解析和理解句子结构。

下载与安装

用户可以通过以下命令,下载并安装 PyCantonese 的最新稳定版本:

$ pip install --upgrade pycantonese

若想更深入了解 PyCantonese,可以访问项目的快速入门页面。

咨询服务

对于希望在使用 PyCantonese 上获得专业支持的团队,无论是学术界还是商业界,均可以获取提供的自由职业咨询与培训服务。具体详情可以联系项目负责人 Jackson L. Lee。

项目支持

如果您发现 PyCantonese 对您的工作有帮助并希望支持项目,请考虑“请我喝杯咖啡”,这对项目有很大帮助。

项目链接

  • 源代码和开发动态均托管在 GitHub。
  • 若发现 Bug,可以在项目的 Bug 追踪器上提交问题。
  • 项目在社交媒体上也有存在,用户可以关注以获取最新资讯。

如何引用

在文献或者项目中引用 PyCantonese 的方式由以下格式提供:

@inproceedings{lee-etal-2022-pycantonese, title = "PyCantonese: Cantonese Linguistics and NLP in Python", author = "Lee, Jackson L. and Chen, Litong and Lam, Charles and Lau, Chaak Ming and Tsui, Tsz-Him", booktitle = "Proceedings of The 13th Language Resources and Evaluation Conference", month = june, year = "2022", publisher = "European Language Resources Association", language = "English", }

许可证

PyCantonese 采用 MIT 许可证。HKCanCor 数据集和 rime-cantonese 数据也包含在项目中,分别具有 CC BY 和 CC BY 4.0 许可,这些数据用于词切分及角色到Jyutping转换功能。

感谢

感谢下列资源和个人对 PyCantonese 的支持:

  • 资源:HKCanCor 和 rime-cantonese,这些资源以宽松的许可证加入到项目中。
  • 贡献者:许多贡献者为项目提供了代码、问题报告及反馈,这些贡献提升了项目的质量。

开发环境设置

最新开发中的代码可以从 GitHub 获取。开发者可以通过克隆项目仓库及安装所需环境来开始开发。测试及样式检查同样可以通过使用 pytestflake8black 工具来进行。

通过科学和系统化的方法,PyCantonese 提供了一个强大的平台,用于处理和研究粤语,使得语言学研究者和开发者能够更加方便地使用和开发粤语自然语言处理工具。

编辑推荐精选

博思AIPPT

博思AIPPT

AI一键生成PPT,就用博思AIPPT!

博思AIPPT,新一代的AI生成PPT平台,支持智能生成PPT、AI美化PPT、文本&链接生成PPT、导入Word/PDF/Markdown文档生成PPT等,内置海量精美PPT模板,涵盖商务、教育、科技等不同风格,同时针对每个页面提供多种版式,一键自适应切换,完美适配各种办公场景。

AI办公办公工具AI工具博思AIPPTAI生成PPT智能排版海量精品模板AI创作热门
潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

讯飞绘文

讯飞绘文

选题、配图、成文,一站式创作,让内容运营更高效

讯飞绘文,一个AI集成平台,支持写作、选题、配图、排版和发布。高效生成适用于各类媒体的定制内容,加速品牌传播,提升内容营销效果。

热门AI辅助写作AI工具讯飞绘文内容运营AI创作个性化文章多平台分发AI助手
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
商汤小浣熊

商汤小浣熊

最强AI数据分析助手

小浣熊家族Raccoon,您的AI智能助手,致力于通过先进的人工智能技术,为用户提供高效、便捷的智能服务。无论是日常咨询还是专业问题解答,小浣熊都能以快速、准确的响应满足您的需求,让您的生活更加智能便捷。

imini AI

imini AI

像人一样思考的AI智能体

imini 是一款超级AI智能体,能根据人类指令,自主思考、自主完成、并且交付结果的AI智能体。

下拉加载更多