深入理解 IPFS - DHT 网络(1)

2023-12-26 13:38
文章标签 深入 理解 网络 ipfs dht

本文主要是介绍深入理解 IPFS - DHT 网络(1),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在前面的文章中,我们说过,DHT(分布式哈希表)是 IPFS 一个重要的组成部分,接下来我们会分别从应用,原理两个方面来分析 DHT。

IPFS 的网络层源码在 libp2p 中,本文用 go-libp2p 做分析。

我们假设一个场景应用,有两个节点名字分别叫 earth 和 mars,然后他们分别加入了 DHT 网络,接下来他们需要找到对方,并能够互相发送消息。

 (一)初始化节点

首先我们需要初始化节点

1
2
3
4
ctx := context.Background()
listenAddresses, _ := multiaddr.NewMultiaddr("/ip4/127.0.0.1/tcp/8004")
host, _ := libp2p.New(ctx, libp2p.ListenAddrs([]multiaddr.Multiaddr{listenAddresses}...))
fmt.Println("host->", host.ID())

其实初始化就一行 libp2p.New(),可自定义参数,比如上面我们定义了监听地址和端口 /ip4/127.0.0.1/tcp/8004, 等同于 127.0.0.1:8004 不过自解释性更强。

再举个例子,/ip4/1.2.3.4/tcp/4321/p2p/QmcEPrat8ShnCph8WjkREzt5CPXF2RwhYxYBALDcLC1iV6 结尾有个 PeerId QmcEPrat8ShnCph8WjkREzt5CPXF2RwhYxYBALDcLC1iV6

那么不仅仅可以通过 ip + port 寻址,通过 PeerId 也可以直接定位到节点。

初始化后我们生成了一个节点,节点 ID 以 btc58encode 编码:QmcEPrat8ShnCph8WjkREzt5CPXF2RwhYxYBALDcLC1iV6,也就是上文的 PeerID。

接下来我们需要给 8004 监听的端口配置 handler

1
2
3
4
5
func handleStream(stream network.Stream) {log.Println("Got a new stream!", stream)
}host.SetStreamHandler(protocol.ID('/chat/1.0'), handleStream)

handleStream 这个函数的逻辑跟普通的 socket 编程一样,拿到 stream 往里读写数据就行,这里不细讲。

(二)加入 DHT 网络

节点建立完成后,接下来就需要加入 DHT 网络了。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
// 加入 dht 网络
kademliaDHT, err := dht.New(ctx, host)
if err != nil {panic(err)
}
// 设置状态为 bootstrap 模式
if err = kademliaDHT.Bootstrap(ctx); err != nil {panic(err)
}var wg sync.WaitGroup
// connect 到 bootstrap 节点
for _, peerAddr := range dht.DefaultBootstrapPeers {peerinfo, _ := peer.AddrInfoFromP2pAddr(peerAddr)wg.Add(1)go func() {defer wg.Done()if err := host.Connect(ctx, *peerinfo); err !=nil {log.Println(err)} else {log.Println("Connection established with bootstrap node:", *peerinfo)}}()
}
wg.Wait()

不管是比特币,以太坊,还是早前的 BT 网络,任何新节点加入网络都需要种子 (bootstrap) 节点作为起点,然后扩展自己的路由表,完成初始化动作。

(三)广而告之

1
2
3
4
5
6
// 广而告之
nodeName := "mars"
log.Println("Announcing ourselves...")
routingDiscovery := discovery.NewRoutingDiscovery(kademliaDHT)
discovery.Advertise(ctx, routingDiscovery, nodeName)
log.Println("Successfully announced!")

回到我们开头的场景,假设我们初始化一个节点名叫 mars,我们加入 DHT 网络后,需要让所有节点都知道我是 mars 节点 。

这里先简单介绍下,原理下篇文章再分析。nodeName 其实最后被转换为一个内容的 hash,节点通过 Advertise 这个方法告诉其他节点,它拥有这个 hash,然后其他节点就会记住,更新自己的路由表。等到有请求去做这个内容的寻址时,就会告诉对方谁有这个内容,或者谁和这个内容更接近。

(四)寻找节点
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
findName := "earth"
log.Println("Searching for other peers...")
peerChan, err := routingDiscovery.FindPeers(ctx, findName)
if err != nil {panic(err)
}
for peer := range peerChan {fmt.Println("found peer", peer.ID)if peer.ID == host.ID() {continue}stream, _ := host.NewStream(ctx, peer.ID, protocol.ID("/chat/1.0.0"))rw := bufio.NewReadWriter(bufio.NewReader(stream), bufio.NewWriter(stream))go readData(rw)go writeData(rw)
}

FindPeers 内在实现逻辑其实是找 earth 这个 hash 的地址,找到就和他建立一个双工的连接,正好和前面 handleStream 实现了服务端和客户端的通信。

(五)演示

 (六) 完善

上面的例子有个问题是,谁都可以宣称自己是 mars 节点,通信双方没法信任,所以这种模式适用聊天室的 channel 场景。通过将内容寻址改成节点寻址,就可找到可信通信方,当然前提是你知道你要通信的节点 ID。

代码如下:

1
2
findID, err := peer.Decode("QmcZf59bWwK5XFi76CZX8cbJ4BhTzzA3gU1ZjYZcYW3dw1")
kademliaDHT.FindPeer(ctx, findID)

这篇关于深入理解 IPFS - DHT 网络(1)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/539619

相关文章

Linux中压缩、网络传输与系统监控工具的使用完整指南

《Linux中压缩、网络传输与系统监控工具的使用完整指南》在Linux系统管理中,压缩与传输工具是数据备份和远程协作的桥梁,而系统监控工具则是保障服务器稳定运行的眼睛,下面小编就来和大家详细介绍一下它... 目录引言一、压缩与解压:数据存储与传输的优化核心1. zip/unzip:通用压缩格式的便捷操作2.

从原理到实战深入理解Java 断言assert

《从原理到实战深入理解Java断言assert》本文深入解析Java断言机制,涵盖语法、工作原理、启用方式及与异常的区别,推荐用于开发阶段的条件检查与状态验证,并强调生产环境应使用参数验证工具类替代... 目录深入理解 Java 断言(assert):从原理到实战引言:为什么需要断言?一、断言基础1.1 语

一文深入详解Python的secrets模块

《一文深入详解Python的secrets模块》在构建涉及用户身份认证、权限管理、加密通信等系统时,开发者最不能忽视的一个问题就是“安全性”,Python在3.6版本中引入了专门面向安全用途的secr... 目录引言一、背景与动机:为什么需要 secrets 模块?二、secrets 模块的核心功能1. 基

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

深入解析 Java Future 类及代码示例

《深入解析JavaFuture类及代码示例》JavaFuture是java.util.concurrent包中用于表示异步计算结果的核心接口,下面给大家介绍JavaFuture类及实例代码,感兴... 目录一、Future 类概述二、核心工作机制代码示例执行流程2. 状态机模型3. 核心方法解析行为总结:三

Linux网络配置之网桥和虚拟网络的配置指南

《Linux网络配置之网桥和虚拟网络的配置指南》这篇文章主要为大家详细介绍了Linux中配置网桥和虚拟网络的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 一、网桥的配置在linux系统中配置一个新的网桥主要涉及以下几个步骤:1.为yum仓库做准备,安装组件epel-re

python如何下载网络文件到本地指定文件夹

《python如何下载网络文件到本地指定文件夹》这篇文章主要为大家详细介绍了python如何实现下载网络文件到本地指定文件夹,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下...  在python中下载文件到本地指定文件夹可以通过以下步骤实现,使用requests库处理HTTP请求,并结合o

Linux高并发场景下的网络参数调优实战指南

《Linux高并发场景下的网络参数调优实战指南》在高并发网络服务场景中,Linux内核的默认网络参数往往无法满足需求,导致性能瓶颈、连接超时甚至服务崩溃,本文基于真实案例分析,从参数解读、问题诊断到优... 目录一、问题背景:当并发连接遇上性能瓶颈1.1 案例环境1.2 初始参数分析二、深度诊断:连接状态与

spring IOC的理解之原理和实现过程

《springIOC的理解之原理和实现过程》:本文主要介绍springIOC的理解之原理和实现过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、IoC 核心概念二、核心原理1. 容器架构2. 核心组件3. 工作流程三、关键实现机制1. Bean生命周期2.

MySQL数据库约束深入详解

《MySQL数据库约束深入详解》:本文主要介绍MySQL数据库约束,在MySQL数据库中,约束是用来限制进入表中的数据类型的一种技术,通过使用约束,可以确保数据的准确性、完整性和可靠性,需要的朋友... 目录一、数据库约束的概念二、约束类型三、NOT NULL 非空约束四、DEFAULT 默认值约束五、UN