Bulk

GraphX与GraphLab、Pregel的对比

分布式批同步BSPPregel、GraphLab、GraphX都是基于BSP（BulkSynchronousParallel）模式，即整体同步并行。
llllqb·2020-08-23 23:41

DPDK RING

bulk模式批量入队和出队。Burst模式批量入队和出队。与链式链表相比的优势：cache命中率高，无需动态分配内存。生产者与消费者之间无锁。
zjr_blog·2020-08-23 22:13

redis.clients.jedis.exceptions.JedisDataException: ERR Protocol error: invalid bulk length

今天调式时发现一个问题：redis.clients.jedis.exceptions.JedisDataException:ERRProtocolerror:invalidbulklength。
what_we_are·2020-08-23 21:03

HBase多表 bulkLoad

hbase中快速导入大数据量可以使用bulkload但是官方只有单表的load的相关案例.经过查看一些源码MultiTableHFileOutputFormat可以支持多表bulkloadexamplepackagecom.cc.example
Muroidea·2020-08-23 19:54

Mysql千万级别数据批量插入只需简单三步

IT自由职业者2017-03-0509:40第一步：配置my.ini文件文件中配置bulk_insert_buffer_size=120M或者更大将insert语句的长度设为最大。
师太，老衲把持不住了·2020-08-23 19:17

ambari hbase 调优

hbase-site.xml   #Todo        dfs.domain.socket.path     /var/lib/hadoop-hdfs/dn_socket      #Todo        hbase.bulkload.staging.dir
mnasd·2020-08-23 17:03

ES 批量Bulk操作存储数据到ES数据丢失解决

privatestaticvoidoutput(SearchHit[]hits){BulkRequestBuilderprepareBulk=writeClient.prepareBulk();for(
join_null·2020-08-23 17:22

Elasticsearch问题集

1、org.springframework.data.elasticsearch.ElasticsearchException:Bulkindexinghasfailures.UseElasticsearchException.getFailedDocuments
tony乐天·2020-08-23 12:11

Embulk 安装和配置

Embulk开源的批量数据加载器，用来在不同数据库、存储设备、文件格式以及云服务间转移数据，支持：自动识别输入的文件格式并行和分布式执行处理保证事务控制一致性数据恢复可以使用输入和输出插件组合来定义一个批量数据加载器支持输入输出源需要安装插件安装环境要求
Alex90·2020-08-23 12:42

ElasticSearch系列——使用term filter来搜索数据

搜索隐藏的帖子（4）根据发帖日期搜索帖子（5）查看分词（6）根据帖子ID搜索帖子（7）重建索引ElasticSearch系列——主目录（1）准备插入一些测试帖子数据POST/forum/article/_bulk
superbfiy·2020-08-23 08:00

es第二篇：Document APIs

单文档API有：IndexAPI、GetAPI、DeleteAPI、UpdateAPI，多文档API有：MultiGetAPI、BulkAPI、DeleteByQueryAPI、UpdateByQueryAPI
weixin_34198453·2020-08-23 08:28

第三周项目四

*作者：李中意*完成日期：2014年3月13日*版本号：v1.0*/#includeusingnamespacestd;classBulk{private:doublelength;doublewidth
李中意·2020-08-23 03:18

Flink Dataset Api（四）迭代操作

一、bulkIteration迭代算法在很多数据分析领域会用到，比如机器学习或者图计算。为了从大数据中抽取有用信息，这个时候往往会需要在处理的过程中用到迭代计算。
嘻哈吼嘿呵·2020-08-23 02:48

JAVA8新特性—Stream（一）

Java8中的Stream是对集合（Collection）对象功能的增强，它专注于对集合对象进行各种非常便利、高效的聚合操作（aggregateoperation），或者大批量数据操作(bulkdataoperation
赫灵·2020-08-23 00:38

Logstash——Logstash将数据推送至Elasticsearch

可配置参数字段参数类型说明actionstring要执行的Elasticsearch动作api_keypassword使用ElasticsearchAPI密钥进行身份验证,需要启动SSLbulk_pathstrin
大·风·2020-08-22 17:43

百万级数据插入方法效率对比

第1种：insertinto效率比较慢，但是insertintoselect会优于其他的先select后插入的第2种表值参数批量插入，这个是针对SQL2008以上版本的，速度更快些使用事务和SqlBulkCopy
【蓦然回首】·2020-08-22 17:28

SQL Server 高性能写入的一些总结

本文目录代码中的问题数据库性能开销使用存储过程使用数据库事务使用SqlBulk
JK_Rush·2020-08-22 01:21

Spark源码阅读-HHbase-BulkPut

/***AsimpleabstractionovertheHBaseContext.foreachPartitionmethod.**ItallowadditionsupportforausertotakeRDD*andgenerateputsandsendthemtoHBase.*ThecomplexityofmanagingtheHConnectionis*removedfromthedeve
pcqlegend·2020-08-22 01:42

kettle加载到oracle之oracle批量加载-Oracle Bulk Loader

注：OracleBulkLoader组件其实用的就是OracleSQLLoader，可在windows和linux等环境使用。
Dragon online·2020-08-21 22:55

队列加载类 BulkLoader的使用

下载地址http://code.google.com/p/bulk-loader/publicclassTestBulkLoaderextendsSprite{privatevarloader:BulkLoader
weixin_33909059·2020-08-21 22:40

oracle bulk load

FirstcreatetypesinoracleDROPTYPECINBELLINP.D_TABLE;CREATEORREPLACETYPECINBELLINP.d_tableistableofDate;/DROPTYPECINBELLINP.I_TABLE;CREATEORREPLACETYPECINBELLINP.i_tableistableofnumber(10);/DROPTYPECINB
intrepid2008·2020-08-21 19:49

Elasticsearch中批量添加索引的总结

当我们阅读bulkapi后发现需要去掉json的可视格式化格式。我们需要在body中写的内容，去掉换行，然后按照下方的格式进行访问。
JulyTail·2020-08-21 19:43

Using the Oracle Bulk Loader-1

UsingtheBulkLoaderinORACLETheORACLESQL*Loaderisafacilitythatallowsyoutopopulatedatabasetablesfromflatfiles.Tousethisfacility
iteye_1650·2020-08-21 17:39

Using the Oracle Bulk Loader -2

OverviewTousetheOraclebulkloader,youneedacontrolfile,whichspecifieshowdatashouldbeloadedintothedatabase
iteye_1650·2020-08-21 17:39

Oracle中的动态SQL的execute immediate 的各种语法

executeimmediate'selecta.dummyfromdual'intov_dummy;多条记录：executeimmediate'selectdbms_random.value(0,1)fromdualconnectbyrownum<=10'bulkcollectintov_dummy
_-LI川江-_·2020-08-21 16:40

Spark读取ElasticSearch数据优化

使用的是ElasticSearch原生的bulkProcessor。查询方面一般在kibana敲敲查询代码就够了。但是某天还是需要用到这个组件，特此记录下。
小鸡·2020-08-21 15:03

Spark读取ElasticSearch数据优化

使用的是ElasticSearch原生的bulkProcessor。查询方面一般在kibana敲敲查询代码就够了。但是某天还是需要用到这个组件，特此记录下。
小鸡·2020-08-21 13:38

ES相关操作

8importtimeimportxlrdfromelasticsearchimportElasticsearch_index='school'_type='name'es_url='127.0.0.1'es=Elasticsearch(es_url)defbulk_es
weixin_42696066·2020-08-21 11:37

Flink教程-flink 1.11 流式数据ORC格式写入file

文章目录StreamingFileSink简介写入orc工厂类向量化操作构造OrcBulkWriterFactory实例讲解构造source构造OrcBulkWriterFactory构造StreamingFileSink
大数据技术与应用实战·2020-08-21 07:41

并行计算与机器学习

重要概念通信：sharingmemory&messagepassing架构：client-server&peer-to-peerSynchronization：bulksynchronous&asynchronousParallelism
汀桦坞·2020-08-21 07:17

HBase原理--BulkLoad

在实际生产环境中，有这样一种场景：用户数据位于HDFS中，业务需要定期将这部分海量数据导入HBase系统，以执行随机查询更新操作。这种场景如果调用写入API进行处理，极有可能会给RegionServer带来较大的写入压力：•引起RegionServer频繁flush，进而不断compact、split，影响集群稳定性。•引起RegionServer频繁GC，影响集群稳定性。•消耗大量CPU资源、带
小明的数据脚印·2020-08-21 04:05

sqlmap学习笔记

默认1）目标:必须提供这些选项中的至少一个来定义目标-uURL,--url=URL目标URL-dDIRECT用于直接数据库连接-lLOGFILE从Burp或WebScarab代理日志文件中解析目标-mBULKFILE
521G2·2020-08-21 01:29

利用SqlBulkCopy快速大量导入数据

一个比较好的解决方案，就是采用SqlBulkCopy来处理存储数据。
厦门卜数信息科技有限公司·2020-08-21 00:20

sstableloader工具使用及原理解析

sstableloader是cassandra提供的bulkload工具，可以将sstable文件导入到集群中。本文详细介绍其用法和实现原理。
阿里云云栖号·2020-08-20 22:57

sstableloader工具使用及原理解析

sstableloader是cassandra提供的bulkload工具，可以将sstable文件导入到集群中。本文详细介绍其用法和实现原理。
阿里云云栖号·2020-08-20 22:57

ElasticSearch入门之Bulk, Serach操作

批量索引和删除BulkRequestBuilderbulkRequest=client.prepareBulk();for(inti=500;i<1000;i++){//业务对象Stringjson=ESUtils.toJson
zhouzhou_java·2020-08-20 20:58

django批量插入数据到mariadb报错

1.django使用bulk_create批量插入数据报错，报错内容（我插入的列表长度为3000+）BrokenPipeError:[Errno32]Brokenpipepymysql.err.OperationalError
运维青年·2020-08-20 20:48

方法 | Elasticsearch Jest 批量操作bug 根因定位排查

1、背景使用Jest进行批量插入数据的时候，偶尔会出现如下的bugOneormoreoftheitemsintheBulkrequestfailed,checkBulkResult.getItems()
铭毅天下·2020-08-20 20:36

Java高级教程之ElasticSearch-5：ElasticSearch批量记录增加和查询

批量添加记录的接口为_bulk，需要文件account.json，使用参数--data-binary发送二进制文件数据:curl-H"Content-Type:application/json"-XPOST"localhost
weixin_41239710·2020-08-20 19:22

java操作elasticsearch实现批量添加数据（bulk）

java操作elasticsearch实现批量添加主要使用了bulk代码如下：//bulk批量操作(批量添加)@Testpublicvoidtest7()throwsIOException{//1、指定
weixin_34204057·2020-08-20 19:36

java+elasticsearch批量导入数据

废话不多说直接上代码BulkProcessorbulkProcessor=BulkProcessor.builder(client,newBulkProcessor.Listener(){publicvoidbeforeBulk
小威xiaowei2·2020-08-20 18:36

STM32 USB 程序将BULK EP改成双缓冲机制后，接收OUT数据的速度从原先的500KB/S

STM32USB程序将BULKEP改成双缓冲机制后，接收OUT数据的速度从原先的500KB/S，收藏前天测试自己编写的USB驱动程序时候发现从主机到STM32的OUT传输（主机到设备）速率竟然只有最高33KB
cainiao413·2020-08-20 15:51

ElasticSearch批量操作(java)

批量添加索引*@throwsIOException*/publicvoidbatchAddIndex(){//创建es客户端Clientclient=elasticClientUtil.getClient();BulkRequestBuilderbulkRequest
于华_·2020-08-20 15:15

Java API批量操作Elasticsearch

1.批量创建索引/***批量添加索引*@throwsIOException*/@TestpublicvoidbatchAddIndex()throwsIOException{BulkRequestBuilderbulkRequest
林老师带你学编程·2020-08-20 14:06

3500个TNBC单细胞转录组数据重处理

文章：ATargetableEGFR-DependentTumor-InitiatingPrograminBreastCancer,因为bulk测序无法解决问题，所以作者选择了单细胞转录组测序策略：TounderstandfunctionalpropertiesassociatedwithheterogeneousEGFRexpressioninanunbiasedmanner
生信技能树·2020-08-20 10:08

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki1·2020-08-20 08:37

Hotspot 偏向锁BiasedLocking 源码解析

目录1、定义2、init3、init方法补充说明4、revoke_bias5、bulk_revoke_or_rebias_at_safepoint6、revoke_and_rebias7、VM_RevokeBias
孙大圣666·2020-08-20 07:09

usb_bulk_msg 说明

usb_bulk_msg接口函数的定义如下：intusb_bulk_msg(structusb_device*usb_dev,unsignedintpipe,void*data,intlen,int*actual_length
笑看江湖路6·2020-08-20 06:10

synchronized锁的验证 [无锁-」偏向锁-」轻量级锁-」重量级锁-」无锁过程]

UseBiasedLocking#关闭偏向锁延迟-XX:BiasedLockingStartupDelay=0#查看所有的JVM参数-XX:+PrintFlagsFinal#设置重偏向阈值-XX:BiasedLockingBulkRebiasThreshold
Null_越努力越幸运·2020-08-20 06:58

深入解读 ADO.NET2.0的十大最新特性

以下便是ADO.NET新增的特性：1.批量复制操作(BulkCopyOperation)将数据从一个数据源批量复制到另一个数据源是ADO.NET2.0的一个新特性。
suilam·2020-08-20 01:01
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他