ODPS的Java连接(2)

2024-05-26 18:08
文章标签 java 连接 odps

本文主要是介绍ODPS的Java连接(2),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

maven

<dependency><groupId>com.aliyun.odps</groupId><artifactId>odps-jdbc</artifactId><version>3.0.1</version>
</dependency>

正文

package org.apache.dolphinscheduler.common.utils;import com.aliyun.odps.*;
import com.aliyun.odps.account.Account;
import com.aliyun.odps.account.AliyunAccount;
import com.aliyun.odps.data.Record;
import com.aliyun.odps.task.SQLTask;import java.util.ArrayList;
import java.util.HashMap;
import java.util.List;
import java.util.Map;public class OdpsUtil {/*** odps连接* @param endPoint 地址* @param accessId 用户名* @param accessKey 密码* @param project 数据库名称* @return*/public static Odps getConn(String endPoint, String accessId, String accessKey, String project) {Account account = new AliyunAccount(accessId, accessKey);Odps odps = new Odps(account);odps.setEndpoint(endPoint);odps.setDefaultProject(project);return odps;}/*** 获取OPDS的tables* @param stmt opds已连接对象* @return*/public ArrayList<Map<String, String>> showTables(Odps stmt) {ArrayList<Map<String, String>> tablelist = new ArrayList<>();Tables tables = stmt.tables();for (Table table : tables) {Map<String, String> tableInfo = new HashMap<>();tableInfo.put("tableName", table.getName());tableInfo.put("remarks", table.getComment());tablelist.add(tableInfo);}return tablelist;}/*** 获取OPDS的字段colunmn的信息* @param stmt opds 已连接对象* @param tablename 表的名称* @return* @throws OdpsException*/public ArrayList<Map<String, String>> showTableFields(Odps stmt, String tablename) throws OdpsException {ArrayList<Map<String, String>> tableFieldlist = new ArrayList<>();Table t = stmt.tables().get(tablename);t.reload();TableSchema schema = t.getSchema();List<Column> columns = schema.getColumns();for (Column column : columns) {Map<String, String> fieldInfo = new HashMap<>();fieldInfo.put("columnName", column.getName());fieldInfo.put("remarks", column.getComment());tableFieldlist.add(fieldInfo);}return tableFieldlist;}/*** 获取表的数据预览* @param stmt* @param tablename* @throws OdpsException*/public void getTableData(Odps stmt, String tablename) throws OdpsException {String sql = "select * from " + tablename + " limit 5;";Instance i = SQLTask.run(stmt, sql);i.waitForSuccess();List<Record> records = SQLTask.getResult(i);for (Record r : records) {String fielddata1 = r.getString(1);String fielddata = r.getString("name");}}}

这篇关于ODPS的Java连接(2)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1005198

相关文章

Java实现MD5加密的四种方式

《Java实现MD5加密的四种方式》MD5是一种广泛使用的哈希算法,其输出结果是一个128位的二进制数,通常以32位十六进制数的形式表示,MD5的底层实现涉及多个复杂的步骤和算法,本文给大家介绍了Ja... 目录MD5介绍Java 中实现 MD5 加密方式方法一:使用 MessageDigest方法二:使用

Java中的runnable 和 callable 区别解析

《Java中的runnable和callable区别解析》Runnable接口用于定义不需要返回结果的任务,而Callable接口可以返回结果并抛出异常,通常与Future结合使用,Runnab... 目录1. Runnable接口1.1 Runnable的定义1.2 Runnable的特点1.3 使用Ru

Java中Runnable和Callable的区别和联系及使用场景

《Java中Runnable和Callable的区别和联系及使用场景》Java多线程有两个重要的接口,Runnable和Callable,分别提供一个run方法和call方法,二者是有较大差异的,本文... 目录一、Runnable使用场景二、Callable的使用场景三、关于Future和FutureTa

Spring 中 BeanFactoryPostProcessor 的作用和示例源码分析

《Spring中BeanFactoryPostProcessor的作用和示例源码分析》Spring的BeanFactoryPostProcessor是容器初始化的扩展接口,允许在Bean实例化前... 目录一、概览1. 核心定位2. 核心功能详解3. 关键特性二、Spring 内置的 BeanFactory

Spring组件初始化扩展点BeanPostProcessor的作用详解

《Spring组件初始化扩展点BeanPostProcessor的作用详解》本文通过实战案例和常见应用场景详细介绍了BeanPostProcessor的使用,并强调了其在Spring扩展中的重要性,感... 目录一、概述二、BeanPostProcessor的作用三、核心方法解析1、postProcessB

Java导入、导出excel用法步骤保姆级教程(附封装好的工具类)

《Java导入、导出excel用法步骤保姆级教程(附封装好的工具类)》:本文主要介绍Java导入、导出excel的相关资料,讲解了使用Java和ApachePOI库将数据导出为Excel文件,包括... 目录前言一、引入Apache POI依赖二、用法&步骤2.1 创建Excel的元素2.3 样式和字体2.

Java实现将Markdown转换为纯文本

《Java实现将Markdown转换为纯文本》这篇文章主要为大家详细介绍了两种在Java中实现Markdown转纯文本的主流方法,文中的示例代码讲解详细,大家可以根据需求选择适合的方案... 目录方法一:使用正则表达式(轻量级方案)方法二:使用 Flexmark-Java 库(专业方案)1. 添加依赖(Ma

Spring Boot拦截器Interceptor与过滤器Filter详细教程(示例详解)

《SpringBoot拦截器Interceptor与过滤器Filter详细教程(示例详解)》本文详细介绍了SpringBoot中的拦截器(Interceptor)和过滤器(Filter),包括它们的... 目录Spring Boot拦截器(Interceptor)与过滤器(Filter)详细教程1. 概述1

SpringBoot利用dynamic-datasource-spring-boot-starter解决多数据源问题

《SpringBoot利用dynamic-datasource-spring-boot-starter解决多数据源问题》dynamic-datasource-spring-boot-starter是一... 目录概要整体架构构想操作步骤创建数据源切换数据源后续问题小结概要自己闲暇时间想实现一个多租户平台,

Java反转字符串的五种方法总结

《Java反转字符串的五种方法总结》:本文主要介绍五种在Java中反转字符串的方法,包括使用StringBuilder的reverse()方法、字符数组、自定义StringBuilder方法、直接... 目录前言方法一:使用StringBuilder的reverse()方法方法二:使用字符数组方法三:使用自