gensim的word2vec的简单使用

2024-05-26 15:18
文章标签 简单 使用 word2vec gensim

本文主要是介绍gensim的word2vec的简单使用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

from gensim.models import Word2Vec as wtv
import jiebas1 = "刘新宇是一个自然语言处理算法工程师"
s2 = "他从事算法方面的工作很多年"
s3 = "刘新宇是一名非常资深的算法工程师"sentences = [jieba.lcut(s1),jieba.lcut(s2),jieba.lcut(s3)]
print(sentences)model = wtv(sentences,min_count=1)print("this is the summary of the model:")
print(model)words = list(model.wv.vocab)
print('this is the vocabulary for our corpus:')
print(words)print("the vector for the word singer:")
print(model['资深'])w1 = ['资深']
print(model.wv.most_similar(positive=w1,topn=5))

  结果:

[['刘新宇', '是', '一个', '自然语言', '处理', '算法', '工程师'], ['他', '从事', '算法', '方面', '的', '工作', '很多年'], ['刘新宇', '是', '一名', '非常', '资深', '的', '算法', '工程师']]
this is the summary of the model:
Word2Vec(vocab=16, size=100, alpha=0.025)
this is the vocabulary for our corpus:
['刘新宇', '是', '一个', '自然语言', '处理', '算法', '工程师', '他', '从事', '方面', '的', '工作', '很多年', '一名', '非常', '资深']
the vector for the word singer:
[-3.7734744e-03  2.6095781e-04 -3.1862229e-03  4.2619775e-03-4.5439765e-07 -1.8814839e-03 -1.9608627e-03 -4.3091276e-032.0104370e-03  2.4313631e-03  3.6958823e-04 -4.6373094e-03-3.8697310e-03 -1.3030261e-03  3.4550454e-03  3.6497047e-04-3.0894275e-03  2.7997990e-04  2.4094102e-03  3.7222090e-03-3.3406885e-03  3.8989806e-03 -1.9044009e-03 -1.2546520e-03-2.7420574e-03  1.9589183e-03  4.6422374e-03  2.2412005e-03-4.5687910e-03 -3.0045302e-03 -7.5545040e-04 -1.9913551e-03-5.4244912e-04  3.4368648e-03  3.1319596e-03  3.5465839e-034.0631965e-04 -8.0981071e-04 -4.5625023e-03  1.8198669e-03-2.3173515e-03  1.3505023e-03  4.2371401e-03  4.9272538e-03-2.1169472e-03  4.2408700e-03  3.7939013e-03 -1.9469961e-03-1.0268842e-03 -3.4248799e-03 -4.0382403e-03 -8.0300641e-04-4.3166843e-03  4.0071514e-03 -5.1711878e-04 -1.0944011e-03-9.2390249e-04 -2.0183630e-03 -1.1692114e-04  3.7988871e-033.0223508e-03 -2.7847637e-03 -2.0709957e-03 -3.2283876e-03-7.3188142e-04  6.4730411e-06  2.4504904e-03 -1.8213416e-03-7.2910590e-04 -3.1336993e-03 -2.1612353e-03  3.4241637e-039.4859622e-04 -1.1737887e-03 -4.3117562e-03 -2.7182067e-03-6.3206785e-04  3.5696046e-03 -2.9301932e-03  9.1675809e-041.7115782e-03  1.6887123e-03  4.1562999e-03  3.1984923e-032.4283223e-04  4.2053428e-03  2.4675422e-03  2.9653152e-034.8725074e-03  3.6773803e-03  3.8778691e-03  7.9092768e-043.6476396e-03 -1.1947335e-03 -2.0735445e-03  2.1955518e-03-1.3067436e-03 -2.5959394e-03  4.0679227e-04  7.9005008e-04]
[('工作', 0.1197129413485527), ('非常', 0.08151963353157043), ('一个', 0.061945877969264984), ('的', 0.05767860636115074), ('他', 0.03252919763326645)]
C:/Users/user/Desktop/pycharm_test/test_gensim.py:21: DeprecationWarning: Call to deprecated `__getitem__` (Method will be removed in 4.0.0, use self.wv.__getitem__() instead).print(model['资深'])

  Word2vec可调整的参数如下:

  def __init__(self, sentences=None, corpus_file=None, size=100, alpha=0.025, window=5, min_count=5,max_vocab_size=None, sample=1e-3, seed=1, workers=3, min_alpha=0.0001,sg=0, hs=0, negative=5, ns_exponent=0.75, cbow_mean=1, hashfxn=hash, iter=5, null_word=0,trim_rule=None, sorted_vocab=1, batch_words=MAX_WORDS_IN_BATCH, compute_loss=False, callbacks=(),max_final_vocab=None):

  

这篇关于gensim的word2vec的简单使用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1004833

相关文章

如何使用celery进行异步处理和定时任务(django)

《如何使用celery进行异步处理和定时任务(django)》文章介绍了Celery的基本概念、安装方法、如何使用Celery进行异步任务处理以及如何设置定时任务,通过Celery,可以在Web应用中... 目录一、celery的作用二、安装celery三、使用celery 异步执行任务四、使用celery

使用Python绘制蛇年春节祝福艺术图

《使用Python绘制蛇年春节祝福艺术图》:本文主要介绍如何使用Python的Matplotlib库绘制一幅富有创意的“蛇年有福”艺术图,这幅图结合了数字,蛇形,花朵等装饰,需要的可以参考下... 目录1. 绘图的基本概念2. 准备工作3. 实现代码解析3.1 设置绘图画布3.2 绘制数字“2025”3.3

Jsoncpp的安装与使用方式

《Jsoncpp的安装与使用方式》JsonCpp是一个用于解析和生成JSON数据的C++库,它支持解析JSON文件或字符串到C++对象,以及将C++对象序列化回JSON格式,安装JsonCpp可以通过... 目录安装jsoncppJsoncpp的使用Value类构造函数检测保存的数据类型提取数据对json数

python使用watchdog实现文件资源监控

《python使用watchdog实现文件资源监控》watchdog支持跨平台文件资源监控,可以检测指定文件夹下文件及文件夹变动,下面我们来看看Python如何使用watchdog实现文件资源监控吧... python文件监控库watchdogs简介随着Python在各种应用领域中的广泛使用,其生态环境也

Python中构建终端应用界面利器Blessed模块的使用

《Python中构建终端应用界面利器Blessed模块的使用》Blessed库作为一个轻量级且功能强大的解决方案,开始在开发者中赢得口碑,今天,我们就一起来探索一下它是如何让终端UI开发变得轻松而高... 目录一、安装与配置:简单、快速、无障碍二、基本功能:从彩色文本到动态交互1. 显示基本内容2. 创建链

基于Qt开发一个简单的OFD阅读器

《基于Qt开发一个简单的OFD阅读器》这篇文章主要为大家详细介绍了如何使用Qt框架开发一个功能强大且性能优异的OFD阅读器,文中的示例代码讲解详细,有需要的小伙伴可以参考一下... 目录摘要引言一、OFD文件格式解析二、文档结构解析三、页面渲染四、用户交互五、性能优化六、示例代码七、未来发展方向八、结论摘要

springboot整合 xxl-job及使用步骤

《springboot整合xxl-job及使用步骤》XXL-JOB是一个分布式任务调度平台,用于解决分布式系统中的任务调度和管理问题,文章详细介绍了XXL-JOB的架构,包括调度中心、执行器和Web... 目录一、xxl-job是什么二、使用步骤1. 下载并运行管理端代码2. 访问管理页面,确认是否启动成功

使用Nginx来共享文件的详细教程

《使用Nginx来共享文件的详细教程》有时我们想共享电脑上的某些文件,一个比较方便的做法是,开一个HTTP服务,指向文件所在的目录,这次我们用nginx来实现这个需求,本文将通过代码示例一步步教你使用... 在本教程中,我们将向您展示如何使用开源 Web 服务器 Nginx 设置文件共享服务器步骤 0 —

Java中switch-case结构的使用方法举例详解

《Java中switch-case结构的使用方法举例详解》:本文主要介绍Java中switch-case结构使用的相关资料,switch-case结构是Java中处理多个分支条件的一种有效方式,它... 目录前言一、switch-case结构的基本语法二、使用示例三、注意事项四、总结前言对于Java初学者

Golang使用minio替代文件系统的实战教程

《Golang使用minio替代文件系统的实战教程》本文讨论项目开发中直接文件系统的限制或不足,接着介绍Minio对象存储的优势,同时给出Golang的实际示例代码,包括初始化客户端、读取minio对... 目录文件系统 vs Minio文件系统不足:对象存储:miniogolang连接Minio配置Min