Langchain编程中常见Python库讲解【1】

2024-08-25 09:28

本文主要是介绍Langchain编程中常见Python库讲解【1】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

本文罗列部分依赖的python库代码举例
strsimpy, pytz, python-magic-bin, python-decouple, pyreadline3, pyclipper, pathlib, mpmath, jieba, flatbuffers, filetype, faiss-cpu, brotli, zipp, wrapt, win32-setctime, websockets, watchdog, validators, urllib3, typing-extensions, tornado, toolz, toml, tenacity, tabulate, sympy, soupsieve, socksio, sniffio, smmap, six, simplejson
常见用法

依赖全文参考上一篇https://blog.csdn.net/Climbman/article/details/141509558

jieba 库示例(中文分词)

import jiebatext = "我爱自然语言处理"
words = jieba.cut(text)
print(list(words))

validators 库示例(数据验证)

import validatorsemail = "test@example.com"
is_valid_email = validators.email(email)
print(is_valid_email)

urllib3 库示例(发送 HTTP 请求)

import urllib3http = urllib3.PoolManager()
response = http.request('GET', 'https://www.example.com')
print(response.data)

toml 库示例(解析 TOML 格式文件)

import tomldata = """
[tool.poetry]
name = "myproject"
version = "0.1.0"
"""
parsed_data = toml.loads(data)
print(parsed_data)

sympy 库示例(符号计算)

import sympyx = sympy.Symbol('x')
expression = x**2 + 2*x + 1
print(sympy.simplify(expression))

以下是更多库的简单示例代码:

tenacity 库示例(重试机制)

import tenacity
import random@tenacity.retry(wait=tenacity.wait_fixed(2), stop=tenacity.stop_after_attempt(3))
def some_function_with_possible_failure():random_number = random.randint(1, 10)if random_number < 5:raise ValueError("Random number is too small.")else:return "Success!"try:result = some_function_with_possible_failure()print(result)
except Exception as e:print(f"Failed after retries: {e}")

tabulate 库示例(格式化表格输出)

from tabulate import tabulatedata = [["Name", "Age"], ["Alice", 25], ["Bob", 30]]
print(tabulate(data))

socksio 库(假设是 socket 相关库)示例

import socksiosock = socksio.Socket()
sock.connect(("example.com", 80))
sock.send(b"GET / HTTP/1.1\r\nHost: example.com\r\n\r\n")
response = sock.recv(1024)
print(response)
sock.close()

sniffio 库(假设用于网络嗅探)示例

import sniffioasync def some_async_function():current_async_backend = sniffio.current_async_library()print(f"Current async library: {current_async_backend}")sniffio.run(some_async_function())

smmap 库(假设用于内存映射文件)示例

import smmapwith open("large_file.txt", "r") as f:mm = smmap.mmap(f.fileno(), 0, access=mmap.ACCESS_READ)# 可以像处理字节串一样处理这个内存映射对象print(mm.read(10))mm.close()

six 库示例(用于 Python 2 和 3 的兼容性)

from six import add_metaclassclass MyMeta(type):pass@add_metaclass(MyMeta)
class MyClass:passprint(MyClass)

simplejson 库示例(JSON 处理)

import simplejson as jsondata = {"name": "John", "age": 30}
json_data = json.dumps(data)
print(json_data)parsed_data = json.loads(json_data)
print(parsed_data)

flatbuffers 库示例(高效的跨语言序列化库)

假设你有一个定义好的 FlatBuffers schema 文件 MySchema.fbs,内容如下:

namespace my.namespace;table Person {name: string;age: int;
}

生成 Python 绑定后,可以这样使用:

import flatbuffers
from my_package import Personbuilder = flatbuffers.Builder(0)
name = builder.CreateString('Alice')
Person.PersonStart(builder)
Person.PersonAddName(builder, name)
Person.PersonAddAge(builder, 30)
person = Person.PersonEnd(builder)
builder.Finish(person)
buf = builder.Output()parsed_person = Person.Person.GetRootAsPerson(buf)
print(parsed_person.Name())
print(parsed_person.Age())

filetype 库示例(文件类型检测)

import filetypekind = filetype.guess('image.jpg')
if kind is not None:print(f'File extension: {kind.extension}')print(f'File MIME type: {kind.mime}')

faiss-cpu 库示例(高效的相似性搜索库)

import numpy as np
import faissd = 64  # 向量维度
nb = 1000  # 数据库大小
nq = 10  # 查询数量np.random.seed(1234)
xb = np.random.random((nb, d)).astype('float32')
xq = np.random.random((nq, d)).astype('float32')index = faiss.IndexFlatL2(d)
index.add(xb)D, I = index.search(xq, 5)  # 返回每个查询向量的最近 5 个邻居的距离和索引
print(D)
print(I)

brotli 库示例(压缩和解压缩数据)

import brotlidata = b'Hello, world!'
compressed_data = brotli.compress(data)
decompressed_data = brotli.decompress(compressed_data)
print(decompressed_data)

zipp 库示例(操作 ZIP 归档文件)

import zipparchive = zipp.Path('archive.zip')
archive.write_text('file1.txt', 'Content of file 1')
archive.write_text('file2.txt', 'Content of file 2')for file in archive.iterdir():print(file.name)

wrapt 库示例(装饰器相关库)

import wrapt@wrapt.decorator
def my_decorator(wrapped, instance, args, kwargs):print('Before function call')result = wrapped(*args, **kwargs)print('After function call')return result@my_decorator
def my_function():print('Inside function')my_function()

win32-setctime 库示例(在 Windows 上设置文件创建时间)

import win32file
import win32con
import osfile_path = 'test_file.txt'
with open(file_path, 'w') as f:f.write('Some content')creation_time = 1629459200  # 时间戳
handle = win32file.CreateFile(file_path, win32con.GENERIC_WRITE, 0, None, win32con.OPEN_EXISTING, 0, None)
win32file.SetFileTime(handle, creation_time, None, None)
handle.close()

websockets 库示例(WebSockets 通信)

import asyncio
import websocketsasync def echo(websocket, path):async for message in websocket:await websocket.send(message)start_server = websockets.serve(echo, 'localhost', 8765)asyncio.get_event_loop().run_until_complete(start_server)
asyncio.get_event_loop().run_forever()

watchdog 库示例(文件系统监控)

import time
from watchdog.observers import Observer
from watchdog.events import FileSystemEventHandlerclass MyHandler(FileSystemEventHandler):def on_created(self, event):print(f'File created: {event.src_path}')def on_modified(self, event):print(f'File modified: {event.src_path}')if __name__ == "__main__":event_handler = MyHandler()observer = Observer()observer.schedule(event_handler, path='.', recursive=False)observer.start()try:while True:time.sleep(1)except KeyboardInterrupt:observer.stop()observer.join()

strsimpy 库(假设是字符串相似度计算库)示例

# 假设 strsimpy 有一个函数 calculate_similarity 用于计算字符串相似度
from strsimpy import calculate_similaritystr1 = "hello world"
str2 = "hi world"
similarity = calculate_similarity(str1, str2)
print(similarity)

pytz 库示例(时区处理)

import pytz
from datetime import datetimetz = pytz.timezone('America/New_York')
now = datetime.now(tz)
print(now)

python-magic-bin 库示例(文件类型识别)

import magicfile_path = 'test.txt'
file_type = magic.from_file(file_path)
print(file_type)

python-decouple 库示例(配置文件读取)

假设你有一个配置文件 .env,内容如下:

MY_VARIABLE=some_value

from decouple import configmy_variable = config('MY_VARIABLE')
print(my_variable)

pyreadline3 库示例(增强命令行交互)

import pyreadline3# 假设可以用它来实现更好的命令行输入提示
line = pyreadline3.Completer().complete('print(', 0)
print(line)

pyclipper 库示例(多边形裁剪库)

from pyclipper import PyclipperOffsetcoordinates = [(0, 0), (5, 0), (5, 5), (0, 5)]
clipper_offset = PyclipperOffset()
offset_coordinates = clipper_offset.Execute(coordinates, 2)
print(offset_coordinates)

pathlib 库示例(路径操作)

from pathlib import Pathfile_path = Path('/home/user/documents/test.txt')
if file_path.exists():print(file_path.name)
else:print('File does not exist.')

mpmath 库示例(高精度数学计算)

from mpmath import mpmp.dps = 50
pi = mp.pi
print(pi)

toolz 库示例(函数式编程工具)

from toolz import compose, partialdef add(a, b):return a + badd_five = partial(add, b=5)
double_result = compose(lambda x: x * 2, add_five)print(double_result(3))

tornado 库示例(异步网络框架)

import tornado.ioloop
import tornado.webclass MainHandler(tornado.web.RequestHandler):def get(self):self.write("Hello, Tornado!")def make_app():return tornado.web.Application([(r"/", MainHandler),])if __name__ == "__main__":app = make_app()app.listen(8888)tornado.ioloop.IOLoop.current().start()

这篇关于Langchain编程中常见Python库讲解【1】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1105167

相关文章

Python通用唯一标识符模块uuid使用案例详解

《Python通用唯一标识符模块uuid使用案例详解》Pythonuuid模块用于生成128位全局唯一标识符,支持UUID1-5版本,适用于分布式系统、数据库主键等场景,需注意隐私、碰撞概率及存储优... 目录简介核心功能1. UUID版本2. UUID属性3. 命名空间使用场景1. 生成唯一标识符2. 数

Python办公自动化实战之打造智能邮件发送工具

《Python办公自动化实战之打造智能邮件发送工具》在数字化办公场景中,邮件自动化是提升工作效率的关键技能,本文将演示如何使用Python的smtplib和email库构建一个支持图文混排,多附件,多... 目录前言一、基础配置:搭建邮件发送框架1.1 邮箱服务准备1.2 核心库导入1.3 基础发送函数二、

Java 方法重载Overload常见误区及注意事项

《Java方法重载Overload常见误区及注意事项》Java方法重载允许同一类中同名方法通过参数类型、数量、顺序差异实现功能扩展,提升代码灵活性,核心条件为参数列表不同,不涉及返回类型、访问修饰符... 目录Java 方法重载(Overload)详解一、方法重载的核心条件二、构成方法重载的具体情况三、不构

Python包管理工具pip的升级指南

《Python包管理工具pip的升级指南》本文全面探讨Python包管理工具pip的升级策略,从基础升级方法到高级技巧,涵盖不同操作系统环境下的最佳实践,我们将深入分析pip的工作原理,介绍多种升级方... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I

基于Python实现一个图片拆分工具

《基于Python实现一个图片拆分工具》这篇文章主要为大家详细介绍了如何基于Python实现一个图片拆分工具,可以根据需要的行数和列数进行拆分,感兴趣的小伙伴可以跟随小编一起学习一下... 简单介绍先自己选择输入的图片,默认是输出到项目文件夹中,可以自己选择其他的文件夹,选择需要拆分的行数和列数,可以通过

Python中反转字符串的常见方法小结

《Python中反转字符串的常见方法小结》在Python中,字符串对象没有内置的反转方法,然而,在实际开发中,我们经常会遇到需要反转字符串的场景,比如处理回文字符串、文本加密等,因此,掌握如何在Pyt... 目录python中反转字符串的方法技术背景实现步骤1. 使用切片2. 使用 reversed() 函

Python中将嵌套列表扁平化的多种实现方法

《Python中将嵌套列表扁平化的多种实现方法》在Python编程中,我们常常会遇到需要将嵌套列表(即列表中包含列表)转换为一个一维的扁平列表的需求,本文将给大家介绍了多种实现这一目标的方法,需要的朋... 目录python中将嵌套列表扁平化的方法技术背景实现步骤1. 使用嵌套列表推导式2. 使用itert

使用Docker构建Python Flask程序的详细教程

《使用Docker构建PythonFlask程序的详细教程》在当今的软件开发领域,容器化技术正变得越来越流行,而Docker无疑是其中的佼佼者,本文我们就来聊聊如何使用Docker构建一个简单的Py... 目录引言一、准备工作二、创建 Flask 应用程序三、创建 dockerfile四、构建 Docker

Python使用vllm处理多模态数据的预处理技巧

《Python使用vllm处理多模态数据的预处理技巧》本文深入探讨了在Python环境下使用vLLM处理多模态数据的预处理技巧,我们将从基础概念出发,详细讲解文本、图像、音频等多模态数据的预处理方法,... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核