Tokens

小脚本bat

windos备份自动压缩文件程序@echooffsetlocal::获取当前日期并将其转换为适合作为文件名的格式（年月日）for/f"tokens=1-3delims=-/"%%ain('echo%date
securitor·2023-11-26 10:37

BERT|add tokens后tokenizer一直加载中...

情况是：我用add_tokens()方法添加自己的新词后，BertTokenizer.from_pretrained(model)一直处于加载中。
柯薇求何·2023-11-23 14:11

页面渲染的流程

DOM节点树中节点与HTML文档中内容一一对应，DOM树构建过程：读取html文档，将字节转换成字符，确定tokens（标签），再将tokens转换成节点，以节点构建DOM树。2、解析CS
咕噜签名分发·2023-11-23 02:24

根据四角坐标生成KML文件

BOX.bat@echooffchcp65001>nul2>nulsettab=for/f"delims=,tokens=1-9"%%iin(TXT\KML.txt)do(@echo%%i@echo^>
肖哥哥·2023-11-22 20:40

通过bat脚本控制Oracle服务启动停止

echo当前Oracle服务状态：for/f"skip=3tokens=4"%%iin('scquery
村口老师傅·2023-11-21 15:19

【stack题解】逆波兰表达式求值 | 用队列实现栈

逆波兰表达式求值力扣（LeetCode）官网-全球极客挚爱的技术成长平台给你一个字符串数组tokens，表示一个根据逆波兰表示法表示的算术表达式。请你计算该表达式。返回一个表示表达式值的整数。
掉毛小公鸡1234567·2023-11-21 13:48

代码审计之-正则表达式过滤不严格导致的漏洞

demo1我们先来看个例子在www目录下创建/tmp/tokens/shell.phpclearToken($data);break;case'create':$this->createToken($data
jing！·2023-11-20 11:02

Elasticsearch 应用

:前端部分Kibana的开发工具IK分词器粗粒度#请求,通过【ik_smart】最粗粒度划分GET_analyze{"analyzer":"ik_smart","text":"中国共产党"}#返回{"tokens
是个吃不饱的人·2023-11-20 01:21

采用流式输出搭建chatgpt网站，无需搭建js服务，逐字输出，加快响应速度

无需搭建js服务，方便把已有的非流式代码改为流式代码，提高响应速度反向代理访问接口，据说这样被openai屏蔽的可能性更小浏览器指纹统计用户页面可以自定义设置tokens长度，gpt创造力指数具有代码高亮显示
兴象·2023-11-20 00:46

ICCV2021 | Tokens-to-Token ViT:在ImageNet上从零训练Vision Transformer

前言本文介绍一种新的tokens-to-tokenVisionTransformer(T2T-ViT)，T2T-ViT将原始ViT的参数数量和MAC减少了一半，同时在ImageNet上从头开始训练时实现了
CV技术指南(公众号)·2023-11-19 13:17

idea easyYapi插件导入yapi接口使用及踩坑记录

otherSettings--->EasyApimac系统路径：Preferences--->otherSettings--->EasyApi配置如下：注：图中server对应的信息是:yapi的地址注：tokens
qq_27770043·2023-11-19 10:14

Vue3 模板编译原理

众所周知，基本所有的现代编译器，整个编译过程可以分为三个阶段：Parsing(解析)、Transformation(转换)、CodeGeneration(代码生成)第一阶段：解析字符模板生成tokens
像朝阳一样·2023-11-19 05:12

使用MLC-LLM将RWKV 3B模型跑在Android手机上

0x0.前言这篇文章主要是填一下MLC-LLM部署RWKVWorld系列模型实战（3B模型MacM2解码可达26tokens/s）这里留下来的坑，这篇文章里面介绍了如何使用MLC-LLM在A100/MacM2
just_sort·2023-11-18 22:03

错误：CUDA error: device-side assert triggered CUDA kernel errors

对llama扩充中文词表后直接增量预训练，忘记设置--modules_to_saveembed_tokens,lm_head,所以导致向量维度不一致，出现下面的错误。
hj_caas·2023-11-16 17:02

力扣刷题第二十三天--栈与队列

内容一、逆波兰表达式求值150.逆波兰表达式求值给你一个字符串数组tokens，表示一个根据逆波兰表示法表示的算术表达式。请你计算该表达式。返回一个表示表达式值的整数。
T.BS·2023-11-16 04:50

ElasticSearch IK分词器配置远程词典

结果{"tokens":[{"token":"我","start_o
不秃头的小黄人·2023-11-15 15:22

如何使用git从github拉取自己的私有仓库(Token方式、本地秘钥方式)

拉取自己的私有仓库HTTPSSSHHTTPS创建TOKEN在GitHub个人主页，点击右上角头像，选择“Setting”选择“Developersettings”选择“Personalaccesstokens”下的“Tokens
Night-Breeze晚风·2023-11-15 15:32

github clone 私人仓库报错

点击头像，选择settings>Developersettings>Personalaccesstokens,点击generatenewtokens，生成新的tokens后复制。
logomanwolf·2023-11-15 15:01

部署百川大语言模型Baichuan2

Baichuan2是百川智能推出的新一代开源大语言模型，采用2.6万亿Tokens的高质量语料训练。在多个权威的中文、英文和多语言的通用、领域benchmark上取得同尺寸最佳的效果。
培根芝士·2023-11-15 05:00

力扣刷题篇之栈与队列篇3

从零开始的力扣刷题生活-力扣（LeetCode）一、表达式求值150.逆波兰表达式求值-力扣（LeetCode）方法一，用栈classSolution{publicintevalRPN(String[]tokens
阿如村保安·2023-11-14 23:40

每日一题：逆波兰表达式求值（后缀表达式）

这个题比较难理解的就是逆波兰表达式是什么东西，上面我贴了定义，这个题本身不难，只需要运用迭代器逐个访问，当为数字是存入栈中，是算符时就要取数出来进行运算，先取出的是右操作数，取出来以后用stoi来转化为整型intevalRPN(vector&tokens
十年磨一剑，霜刃未曾试·2023-11-14 06:37

在亚马逊云科技Amazon SageMaker上使用vLLM框架进行Rolling Batch推理优化的部署实践

一方面推理输出的响应时间（时延）越短，客户端的体验越好；一方面同样的时间GenAI应用能推理生成的tokens数量越多，则意味着同样资源开销下吞吐量更大，其性价比更高。
视界说·2023-11-12 14:42

2023.11.7: OpenAI DevDay总结

NewModel：ChatGPT4.0turbo更长的context：支持长达128000个tokens的context更好的控制方案：更有利于API调用JSONModeFunctioncallingReproducibleoutputs
PinkGranite·2023-11-12 13:35

Llama2通过llama.cpp模型量化 Windows&Linux本地部署

在数万亿的tokens上训练的模型，并表明可以专门使用公开可用的数据集来训练最先进的模型，而无需求助于专有和不可访问的数据集。
早安不安·2023-11-12 07:53

超过73K Tokens的数据支持依然不太好！

本文原文来自DataLearnerAI官方网站：GPT-4-Turbo的128K长度上下文性能如何？超过73KTokens的数据支持依然不太好！|数据学习者官方网站(Datalearner)https://www.datalearner.com/blog/1051699526438975GPT-4Turbo是OpenAI最新发布的号称性能超过当前GPT-4的模型。在新版本的ChatGPT中已经可以
数据学习（Datalearner）·2023-11-11 04:58

Implement JSON Web Tokens Authentication in ASP.NET Web API and Identity 2.1 Part 3 (by TAISEER)

http://bitoftech.net/2015/02/16/implement-oauth-json-web-tokens-authentication-in-asp-net-web-api-and-identity
weixin_30398227·2023-11-11 01:44

Leetcode150. 逆波兰表达式求值

遍历字符串数组tokens，根据当前字符串token决定操作：若token是1个算符（“+”、“-”、""或“/”），取出栈里的前2个数字x和y，得到x+y、y-x、xy、y/x其中之一，再压入栈顶。
UestcXiye·2023-11-10 21:18

ElasticSearch使用IK分词器自定义分词不起作用

问题ElasticSearch安装IK分词器后，写了一个自己的自定义分词但是配置之后使用GET_analyze{"analyzer":"ik_max_word","text":"超级挖槽"}结果{"tokens
Nigtunt·2023-11-09 15:28

ElasticSearch下ik分词器的下载安装和自定义词库的创建

概述一个tokenizer（分词器）接收一个字符流，将之分割为独立的tokens（词元，通常是独立的单词），然后输出tokens流。ES提供了很多内置的分词器（标准分词器）。
goku_liu·2023-11-09 14:49

深度学习-Embedding(词嵌入)

将文本分割后的单词/字符/n-gram称为token，将tokens
夏都美少年·2023-11-05 06:26

WebGoat靶场JWT tokens四五关通关教程（JWT token安全）

WebGoat靶场JWTtokens四五关通关教程一、JWTtokens第四关1.本关要求：尝试更改您收到的令牌，并通过更改令牌成为一个管理用户，一旦您是管理员重置投票1.1点击选择用户登录1.2点击reset抓包分析1.3将token解密并修改token二、JWTtokens第五关1.假设我们有以下令牌，尝试找出密钥并提交一个新密钥，用户名更改为WebGoat1.1首先分析一下题目1.2将tok
No_1_is_me·2023-11-05 05:16

力扣：150. 逆波兰表达式求值（Python3）

题目：给你一个字符串数组tokens，表示一个根据逆波兰表示法表示的算术表达式。请你计算该表达式。返回一个表示表达式值的整数。注意：有效的算符为'+'、'-'、'*'和'/'。
恽劼恒·2023-11-05 01:40

代码随想录算法训练营第11天 | 20. 有效的括号 1047. 删除字符串中的所有相邻重复项 150. 逆波兰表达式求值

=0)returnfalse;for(inti=0;i&tokens){stackresult;for(inti=0;i<tokens.size();i++){if(tokens[i]=="+"||tokens
吱吱吱··2023-11-05 00:46

jwt 详解、session、token

cookie和session的区别传统的session认证基于session认证所暴露的问题基于token的鉴权机制传统方式——基于服务器的验证基于服务器验证方式暴露的一些问题基于Token的验证原理Tokens
阿莹yes·2023-11-04 21:42

【Linux】 passwd命令使用

语法passwd[选项][用户名]passwd命令-Linux手册页著者克里斯蒂安·加夫顿命令选项及作用执行令passwd--help执行命令结果参数-k,--keep-tokens保持身份验证令牌不过期
程序员食堂·2023-11-04 12:44

【HBZ分享】ES分词器的拆分规则 及 算法

分词器、Whitespace分词器、IK分词等，还支持自定义分词器(比如一些小国家的语言需要自定义分词器)ES默认就是Standard分词器分词器在分词时的过程标记化：分词器第一步是将文本拆分成单个标记(tokens
hbz-·2023-11-04 01:30

python-jenkins 小结

="/":url=url+"/"host_name=[xforxinapi_tokens.key
一只老梨花·2023-11-03 10:16

[文献阅读]——AMBERT: A PRE-TRAINED LANGUAGE MODEL WITH MULTI-GRAINED TOKENIZATION

目录引言相关工作模型预训练微调两个变体实验拓展阅读引言细粒度方法和粗粒度方法各自的优缺点:细粒度:作为词汇单元是不完整的但更容易去学习（更少的tokentypes和更多的tokens）不存在分词的错误粗粒度
Muasci·2023-11-02 22:59

算法通关村第四关|黄金挑战|表达式问题

newArrayDeque();charpreSign='+';intnum=0;intn=s.length();for(inti=0;istack=newStack<>();for(Stringtoken:tokens
星不易·2023-11-02 10:43

使用Personal access tokens以避免Windows下每次git push都需要输入账号密码

通过"github->account->settings->Developersettings->Personalaccesstokens"处，点击Generatenewtoken。因为只是需要gitpush之类的操作，所以勾选repo选项，即可。随后token生成成功，然后再在本地gitbash中进行gitpush，账号还是原来的github账号，密码改为填写刚刚生成的token即可。之后就不会
老杜振熙·2023-11-01 20:28

阅读笔记-SoViT Mind visual tokens for vision transformer

Introduction这篇文章的出发点包含两方面：1.ViT是纯transformer的结构，剔除了CNN中具有的一些归纳偏置，使其必须依赖较大规模的数据集去学习这种偏置，从而对于中心规模scratch训练得到的模型性能远低于CNN结构。2.在ViT方法，以及基于ViT的系列方法中，都引入了一个classtoken，利用encoder输出的classtoken的特征进行分类，但忽略了每个patc
熙熙江湖·2023-11-01 08:02

adb logcat根据包名过滤log

Androidstudio中过滤日志非常好用，支持根据包名过滤下面通过命令行来实现：Window:adbshellps|findstr"package">temp.txt&&for/f"tokens=2
ReminderFish·2023-11-01 05:16

batch loop func

,"C,3")doecho%%i::for/l%%xin(1,1,100)doecho%%xFOR%%GIN("aa,1","bb,2","cc,3","dd,4")DO(@echo%%GFor/F"tokens
橙姜·2023-10-30 21:31

面试经典 150 题 4 —（栈）— 150. 逆波兰表达式求值

150.逆波兰表达式求值方法classSolution{public:intevalRPN(vector&tokens){stacknums;intresult=0;for(stringtoken:tokens
BreezeChasingDrizzle·2023-10-30 19:07

栈与队列篇 150. 逆波兰表达式求值 (难度 中等)

示例1：输入：tokens=[“2”,“1”,“+”,“3”,“*”]输出：9解释：该算式转化为常见的中缀算术表达式为：((2
1998@小谷谷·2023-10-30 19:03

LeetCode精选TOP面试题150.逆波兰表达式求值

exampleinput:tokens={"2","1","+","3","*"}output:9note:该算式转化为常见的中缀算术表达式为：((2+1)*3)=9input:
whtli·2023-10-30 19:30

[力扣] 150. 逆波兰表达式求值

示例1：输入：tokens
折本咲焰·2023-10-30 19:00

top面试150.逆波兰表达式求值

classSolution{public:intevalRPN(vector&tokens){vectornumStack(tokens.size()/2+1,0);intindex=0;for(inti
北城望戈·2023-10-30 19:59

算法刷题-栈与队列

算法刷题-栈与队列150.逆波兰表达式求值给你一个字符串数组tokens，表示一个根据逆波兰表示法表示的算术表达式。请你计算该表达式。返回一个表示表达式值的整数。
重生之我是cxk·2023-10-29 23:34

JWT认证(System.IdentityModel.Tokens.Jwt)

用到的命名空间usingMicrosoft.AspNetCore.Authentication.JwtBearer;usingMicrosoft.IdentityModel.Tokens;usingSystem.IdentityModel.Tokens.Jwt
风神.NET·2023-10-29 12:56
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他