【大家的项目】一个实验性的纯rust hdfs 客户端

MikeLoveRust

发布于 2024-01-05 15:02:40

1800

发布于 2024-01-05 15:02:40

文章被收录于专栏：Rust语言学习交流Rust语言学习交流

rust 社区基本没有纯 rust 实现的 hdfs 客户端, 在使用前需要下载依赖和配置环境变量, 所以我实现了一个不依赖 java 的 hdfs client 端 hdfs-client.

有如下特性

依赖简单, 使用方便
FileReader 实现了 Read + Seek, 使用方法普通 std::fs::File 类似
FileWriter 支持 create 和 append 模式和 Write trait
支持 checksum 校验

示例代码如下

use std::io::Read;
use hdfs_client::HDFS;

fn main() {
    let mut fs = HDFS::connect("127.0.0.1:9000", "root").unwrap();
    let mut fd = fs.open("/test/hello.txt").unwrap();
    let mut content = String::new();
    fd.read_to_string(&mut content).unwrap();
    println!("{content}");
}

欢迎试用和提建议.

本文参与腾讯云自媒体同步曝光计划，分享自微信公众号。

原始发表：2024-01-01，如有侵权请联系 cloudcommunity@tencent.com 删除

rust