THRIFT

基于Thrift的分布式Hive数据源连接器

基于Thrift的分布式Hive数据源连接器文章目录基于Thrift的分布式Hive数据源连接器问题产生原因解决思路实现代码一：分布式内存集合工具类代码二：创建一个可序列化的共享集合，该集合的主要目的就是在各个实例之间传输
天心有情·2023-08-12 01:18

解决pyhive连接时出现thrift.transport.TTransport.TTransportException: Could not connect to any of…的问题

问题描述：使用pyhive在本地连接hive时，发现使用conn=hive.connect(host=qy_host,port=10000,auth=“CUSTOM”,database=‘default’,…username=qy_user,password=qy_pw)无法连接，qy_host无论是localhost还是服务器的ip都提示上述错误。问题解决：首先，进入hive输入sethive.
Nancy_张·2023-08-10 20:16

envoy源码阅读与dubbo集成

看实现，基本上是把thrift协议抄了一遍，envoy对非http底层的协议支持还是比较麻烦的，重复造了很多轮子。dubbo协议集成router未完成事项添加ratelimit添加超时添加重试
fstMoon·2023-08-10 08:19

RPC之thrift

path=/thrift/0.11.0/thrift-0.11.0.tar.gz安装之前需要解决依赖问题:https://thrift.apache.org/docs/install/debiansudoapt-getinstallautomakebisonflexg
liangxifeng833·2023-08-09 20:24

jmeter测试rpc接口-使用dubbo框架调用【杭州多测师_王sir】

wsdl结尾2.基于RPC架构，基于dubbo协议，thrift协议。SpringCloud微服务。3.基于RestFul架构，基于json规范。
多测师_王sir·2023-08-09 08:12

配置Hive远程服务详细步骤

（1）修改hive-site.xml，在文件中添加以下内容：hive.metastore.event.db.notification.api.authfalseHiveServer2Thrift接口的端口号
飘羽·2023-08-07 10:30

spark内的thriftserver / beeline

启动thriftserver默认端口10000sbin下.
Yagami_·2023-08-02 14:48

访问 Hive 的元数据存储（MetaStore）的API方式

访问Hive的元数据存储（MetaStore）的API方式访问Hive的元数据存储（MetaStore）是通过Hive的ThriftAPI来实现的。
墨卿风竹·2023-08-02 11:24

RPC

像调用本地方法一样基于tcp/udp/http传输协议Eg:阿里HSF,Dubbo,Thrift,gRPCDubboRPC负载均衡服务注册发现RMIRMI（RemoteMethodInvocation）
响响月月·2023-07-31 03:45

flink采用thrift读取tablets一个天坑

原先的配置[INFO]StarRocksSourceBeReader[openScanparams.mem_limit8589934592B][INFO]StarRocksSourceBeReader[openScanparams.query-timeout-s600s][INFO]StarRocksSourceBeReader[openScanparams.keep-alive-min100mi
AskHarries·2023-07-30 19:04

如何优雅的停掉Server

这里笔者以ThriftServe为列子。看看Thrift源码里面的一段停掉Server代码：func(p*TSimpleServ
carlSQ·2023-07-29 18:26

使用gcc-13.1.0编译安装thrift-0.18.1

/configure--prefix=/usr/local/thrift-0.18.1--with-boost=/usr/local/boost--with-libevent=/usr/local/libevent
一见·2023-07-28 03:41

Java实现Thrift实例

Java实现Thrift实例前提需要先下载编译器http://archive.apache.org/dist/thrift/,分为Linux版和Windows，具体编译器的版本跟thriftlib包的版本是相同配套的
顧棟·2023-07-27 20:11

php语言实践例子,gRPC最佳入门实践，Golang/Python/PHP多语言讲解

谷歌出品Thrift。Apache出品Dubbo。阿里出品，也是一个微服务框架看官方文档的介绍，有以下4点特性：使用ProtocalBuffers这个强大的结构数据序列化工具grpc可以跨语言使
weixin_39984661·2023-07-27 08:51

深度思考rpc框架面经

这个协议可以是自定义的二进制格式，也可以是像JSON-RPC、gRPC、Thrift等标准化的协议。序列化和反序列化（Serialization/Des
xxx_520s·2023-07-27 01:58

JVM系统优化实践（22）：GC生产环境案例（五）

笔者曾经经历过的一次OOM就是基于Thrift框架封装出来的一个RPC框架导致的宕机。也就是当服务A更新后，服务B宕机了。通过查看GC日志，发现是JVM堆抛出的OOM。
湘王·2023-07-25 14:27

Dubbo入门实战最全攻略（基于 Spring Boot 实现）

/2协议之上，具有更好的穿透性与通用性，支持基于IDL的服务定义集成了业界主流的大部分协议，使得用户可以在Dubbo框架范围内使用这些通信协议，这些协议包括rest、hessian2、jsonrpc、thrift
软件测试潇潇·2023-07-23 15:38

HIVE架构和原理

WebUI：是指可通过浏览器访问Hive2.thriftserver:hive的可选组件，此组件是一个软件架构服务，允许客户端使用包括Java，C+
（YSY_YSY）·2023-07-22 06:18

接口测试的流程和步骤，主要测试哪些方面，测试工具，测试用例，以及测试框架

其中接口协议分为HTTP,WebService,Dubbo,Thrift,Socket等类型，测试类型又主要分为功能测试，性能测试，稳定性测试，安全性测试等。
阿里测试君·2023-07-21 18:12

seatunnel-2.3.2 doris数据同步到hive(cdh-6.3.2)首次运行踩坑记录

java.lang.NoClassDefFoundError:org/apache/hadoop/hive/metastore/api/MetaException2、java.lang.NoClassDefFoundError:org/apache/thrift
小雏菊的成长·2023-07-19 15:13

Flink Direct Reader访问Hive ACID表被ranger授权限制

如果你正在使用Flink的DirectReader来访问HiveACID表，并且受到Ranger授权限制，无法读取表的数据，可能是因为DirectReader不经过Hive的Thrift接口，而是直接读取
贾斯汀玛尔斯·2023-07-19 13:07

flink通过thrift服务无法读取开启ranger鉴权的Hive ACID表的原因

Flink通过Thrift服务无法读取开启Ranger鉴权的HiveACID表的原因可能是由于以下几个因素导致的：Ranger鉴权配置：Ranger是一个用于数据访问控制和权限管理的工具，常用于对Hive
贾斯汀玛尔斯·2023-07-19 13:31

负载均衡算法介绍

背景负载均衡的概念实在太普遍了，从Nginx、Haproxy到Dubbo、Thrift、Hessian等到处都能看到，就不多介绍了。
XHLeee·2023-07-19 01:17

解决：Required field ‘filesAdded‘ is unset! Struct:InsertEventRequestData(filesAdded:null)

解决：org.apache.thrift.TApplicationException:Requiredfield‘filesAdded’isunset!
墨卿风竹·2023-07-18 23:44

Hive Metastore、Hive server和thrift

HiveMetastoreHiveMetastore(HMS)是ApacheHive项目的一个关键组件，用于管理Hive表和分区的元数据信息。HMS是一个基于数据库的服务，它存储了Hive表的模式、列和分区信息，以及表的位置和其他相关属性。HMS充当了Hive和底层存储系统（如HadoopHDFS）之间的中介，它维护了Hive表的元数据信息，包括表的结构、模式、列类型和分区信息。当用户执行Hive
贾斯汀玛尔斯·2023-07-17 20:48

centos7 thrift安装实录

centos7.2thrift安装实录本文出自阿哥论坛：http://it.agoit.com/thread-468535-1-1.html安装步骤：1.安装centos需要的扩展yuminstall-yautomakelibtoolflexbisonpkgconfiggcc-c
angleit·2023-07-17 16:04

使用thrift编写C++服务器、客户端

在上一节《Linux下编译thrift》中，我们成功编译出了thrift的库文件，本节我们来编写thrift的C++服务器，客户端。
cuijiecheng2018·2023-07-17 14:05

SparkSQL

/sbin/start-thriftserver.sh\--hiveconfhive.server2.thrift.port=10016\--hi
February13·2023-07-16 10:55

GO中微服务管理（上）

1.1、为什么要使用服务发现设想下，我们写了一些通过RESTAPI或者ThriftAPI调用某个服务的代码，为了发起这个请求，代码需要知道服务实例的网络地址(IP地址和端口号）。
墨烦信息·2023-07-14 16:26

面试Dubbo ，却问我和Springcloud有什么区别？

前言一、RPC框架的概念1.什么是RPC框架2.RPC和普通通信的区别二、常用RPC框架1.Dubbo2.gRPC3.Thrift4.Feign三、dubbo与Springcloud1.Dubbo的模型
战斧·2023-07-14 08:35

thrift服务(for Python/Java)的简易搭建步骤（不求甚解版）

##定义好thrift文件，作为C/S的契约[^1]xxx.thrift*注意：以下代码都是手动混淆过的，仅大致示意写法，不保证内容正确*```thriftnamespacejavacom.x1.x2.
·2023-06-24 05:43

服务发现——需求与模式

1915:10:49[TOC]前言从自成一体的单体应用到分布式应用,演进出了面向服务架构服务发现的本质在于让服务之间发现彼此,这是服务提供方与服务消费方完成消费的前提在微服务架构下,无论是使用Dubbo,Thrift
i蝸居年華_谢谢谢·2023-06-20 21:44

kafka和flume的对比

比如agent采用RPC（Thrift-RPC）、text（文件）等，storage指定用hdfs做。（2）kafka做日志缓存应该是更为
crazyhacking·2023-06-20 00:17

Kafka与Flume

比如agent采用RPC（Thrift-RPC）、text（文件）等，storage指定用HDFS做。Kafka做日志缓存应该是更为
K. Bob·2023-06-20 00:16

go的encoding/json标准库

如果你对性能要求比较高，但又不想使用msgpack/pb/thrift之类的，那么可以考虑使用ffjson/easyjson来优化性能。【笔记来源：http://blog.stu
fugeit·2023-06-19 18:33

微服务系统中的服务发现机制

我们可以想象一下，当我们需要远程的访问RESTAPI或者ThriftAPI时，我们必须得知道服务的网
·2023-06-19 09:50

如何动态的测试Thrift服务

RPC协议与Thrift框架RPC（RemoteProcedureCall，远程过程调用）是一种通信协议，用于不同的进程或计算机之间进行通信和交互。
软件质量保障·2023-06-17 08:52

StarRocks案例5: hive外表报错starrocks [42000][1064] hdfsOpenFile failed

然后根据官网的的命令创建了hiveresourceCREATEEXTERNALRESOURCE“hive0”PROPERTIES(“type”=“hive”,“hive.metastore.uris”=“thrift
只是甲·2023-06-16 18:15

IDEA由于大小超过限制导致无法识别java文件

背景：thrift生成的Java文件无法识别IDEA无法识别java文件由于大小超过限制导致导入异常。
鲸落ж·2023-06-16 13:55

接口自动化测试【完整版】

其中接口协议分为HTTP,WebService,Dubbo,Thrift,Socket等类型，测试类型又主要分为功能测试，性能测试，稳定性测试，安全性测试等。
测试大圣·2023-06-16 01:28

elasticsearch学习总结——API 规范

elasticsearch的RESTAPI支持JSONOverHTTP,thrift和memcached。多重索引大部分涉及到索引的API都支持跨索引类别（indices）的操作，同时也支持通配符。
天天吃饭·2023-06-15 12:27

跨语言RPC框架Thrift入门

文章目录一、Thrift介绍二、IDL语法详解基本数据类型特殊数据类型集合容器枚举类型常量、类型别名struct类型异常servicenamespaceinclude参考一、Thrift介绍Thrift
TracyCoder123·2023-06-14 21:12

pip 安装 jqdatasdk 时的问题

gcc-pthread-Wno-unused-result-Wsign-compare-DNDEBUG-g-fwrapv-O3-Wall-fPIC-I/home/pyln/37_env/include-I/usr/python-3-7-2/include/python3.7m-cthriftpy
EnweTu·2023-06-13 07:28

Kyuubi基本安装与使用指南

您还可以阅读文章《Kyuubi与SparkThriftServer的全面对比分析》了解Kyuubi与SparkThriftServer的异同点。安装包下载进
BigDataToAI·2023-06-13 01:10

Hadoop Distributed System (HDFS) 写入和读取流程

目前HDFS支持的使用接口除了Java的还有，Thrift、C、FUSE、WebDAV、HTTP等。HDFS是以block-sizedchunk组织其文件内
小小哭包·2023-06-11 13:43

protobuf rpc java_RPC框架实现(一) Protobuf的rpc实现

比如protobuf、thrift等等。服务发现。指服务提供者更新接口后，服务使用者如何知道该接口更新。Protobuf协议使用的是预编译方式，dubbo中使用的是zk作为媒介。负载均衡。
青山布衣·2023-06-11 03:06

了解 API 协议：SOAP、REST、JSON-RPC、gRPC、GraphQL、Thrift

KnowyourAPIprotocols:SOAPvs.RESTvs.JSON-RPCvs.gRPCvs.GraphQLvs.Thrift曾几何时——特别是在2000年代初期——只有两个真正的API协议是大多数开发人员必须知道的
allway2·2023-06-10 15:20

Netty的高性能之道

1.背景最近看到gitHub上有一个开源项目，通过使用Netty4+Thrift压缩二进制编解码技术，他们实现了10WTPS（1K的复杂POJO对象）的跨节点远程服务调用。
ZNineSun·2023-06-10 05:07

你对RPC框架了解多少？

RPC框架是一套用于独立进程之间通信的框架，常见的实现方式有DUBBO、THRIFT、gRPC等。RPC框架具有高性能、高可靠性、高并发等优点，广泛应用于分布式系统中，比如微服务架构。
垫脚摸太阳·2023-06-10 01:17

protobuf/thrift解析enum导致的大坑

背景：今天升级服务器时发生了一个生产事故，原因是因为pb的枚举类型无法向后兼容引起的，服务端写到pb的数据和客户端解析出来的pb竟然不一样，大惊失色之下写下这篇关于pb/thrift解析enum不当导致的大坑的血泪文章事情来龙去脉
lixia0417mul2·2023-06-09 15:37
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他