Lexer

写 Highlight.js 插件的一些尝试

或者说花的心思不够多吧.Highlight.js的文档和代码示例还是比较不错的,只是..写CodeMirror和Pygments的插件时,全局传递的状态非常有用,CoderMirror只有一个状态,而Pygments和Lexer
题叶·2014-01-21 00:00

程序中，调用Bison和Flex结合的小例子（类似完成语法树）

接前面的例子：程序中，调用Bison和Flex结合的小例子要做出存储语法树结构的全局变量：1[root@lex~]#cd/soft/total 2[root@lextotal]#ls 3lexer.llex.yy.cmyparsermyparser.cmyparser.hparser.yy.tab.cy.tab.h
Chinamming·2013-11-26 22:00

在用lexer和parser提取文章中的图片链接时遇到的问题

1：注意两种方式的区别①：Lexer le=new Lexer(content);           
Thomas会Coding·2013-11-01 19:00

全文索引快的原因以及contains与like查找区别比较

1、中文分词器Chinese_vgram_lexer的属性mixed_case_ascii7可以用来设置是否要区分英文字母的大小写，默认是不区分大小写的，即你在查询中输入“T”还是“t”，都能查到字母t
haiross·2013-10-31 10:00

Oracle模糊查询之（5.1认识全文索引之什么是分词[lexer]）oracle Text 全文检索功能对中文分词的支持情况

前言：什么叫分词，即把需要模糊查询的字段的字符串数据进行”全分词“，即把所有可能分词都枚举出来，比如abc,可以分成a,ab,abc,b,bc,c。所有的分词结果都可以在表DR$索引名$I中看到。http://hi.baidu.com/lewutian下面例子在XE中测试通过。准备工作：CREATE  TABLEissues(   ID        NUMBER,   summary      
haiross·2013-10-23 17:00

Java开发工具IntelliJ IDEA如何定义语法高亮和颜色设置页面

1定义syntaxhighlighterpackagecom.simpleplugin; importcom.intellij.lexer.FlexAdapter; importcom.intellij.lexer.Lexer
luiyue921·2013-10-11 17:00

Java开发工具IntelliJ IDEA定义语法高亮和颜色设置页面代码图解

1定义syntaxhighlighterpackagecom.simpleplugin;importcom.intellij.lexer.FlexAdapter;importcom.intellij.lexer.Lexer
答应不爱你·2013-10-11 11:00

IntelliJ IDEA如何定义语法高亮和颜色设置页面

1定义syntaxhighlighterpackagecom.simpleplugin;importcom.intellij.lexer.FlexAdapter;importcom.intellij.lexer.Lexer
房价会降吗·2013-10-11 11:00

IntelliJ IDEA如何定义语法高亮和颜色设置页面

1定义syntaxhighlighter packagecom.simpleplugin; importcom.intellij.lexer.FlexAdapter; importcom.intellij.lexer.Lexer
房价会降吗·2013-10-11 11:00

IntelliJ IDEA如何定义语法高亮和颜色设置页面

1定义syntaxhighlighterpackagecom.simpleplugin;importcom.intellij.lexer.FlexAdapter;importcom.intellij.lexer.Lexer
房价会降吗·2013-10-11 11:00

Lexer and parser generators (ocamllex, ocamlyacc)

Chapter12Lexerandparsergenerators(ocamllex,ocamlyacc)Thischapterdescribestwoprogramgenerators:ocamllex,thatproducesalexicalanalyzerfromasetofregularexpressionswithassociatedsemanticactions,andocamlyac
cuishengli·2013-09-29 17:00

全文检索

BEGIN CTX_DDL.CREATE_PREFERENCE('ADDRESS_CHINESE_LEXER','CHINESE_LEXER'); CTX_DDL.CREATE_PREFERENCE('
zy8643954·2013-09-18 17:00

全文索引

DROP INDEX IDX_SYS_USER_FULLNAME FORCE; --创建词法分析器 BEGIN CTX_DDL.CREATE_PREFERENCE ('USER_LEXER',
lumingming1987·2013-06-26 13:00

用ANTLR3实现规则解析----2-grammar概览

一、开始我们的grammar文件让我们开始第一个antlr的grammar文件，最常见antlr grammar是一个结合词法分析规则(lexer)、语法分析规则（parser）的表达式。
wfp458113181wfp·2013-06-23 23:00

[WebKit] JavaScriptCore解析--基础篇(三)从脚本代码到JIT编译的代码实现

从JSScript到ByteCode首先说明Lexer,Parser和ByteCode的生成都是由ProgramExecutable初始化过程完成的。
HorkyChen·2013-05-23 00:00

Go 源码阅读笔记 text/template/parse

treelex.go要点itemType常量表次序规则：itemKeyword用来分界词法中的关键字和其他词法元素，参见下列实现func(iitem)String()stringfunclexIdentifier(l*lexer
喻恒春·2013-05-17 13:00

C#词法分析器之转换DFA详解

Dfa类的代码如下所示：复制代码代码如下:namespaceCyjb.Compiler.Lexer{classDfa{//在当前DFA中创建一个新状态。DfaStateNewState
·2013-05-03 10:50

GNU Flex 基础

Flex是一个用C语言编写的词法(Lexer)分析工具，Bison是语法(Parser)分析工具，他们是Lex&Yacc的GNU代替品。
那闯·2013-04-28 15:42

CacheFlush, ctiTrampoline, ctiVMThrowTrampoline & ctiOpThrowNotCaught

CacheFlush,ctiTrampoline,ctiVMThrowTrampoline&ctiOpThrowNotCaughtJS--Lexer-->Token--bison-->Node--emitBytecode
talking12391239·2013-03-07 11:00

Oracle数据库全文索引设置步骤简介(中文词法分析器)

对于utf8字符集的数据库有一个新的汉语分析器chinese_lexer，效率有了很大改善。现将验证并整理过的怎么样进行oracle全文索引设置的文档发给大家，适用于8i、9i各平台版本。
lichangzai·2013-01-28 10:00

ANTLR中基类Parser和Lexer的出处

这也提醒了我ANTLR中基类Parser和Lexer的出处。
zongquanliu·2013-01-06 18:29

oracle 全文检索示例

感谢作者，原文地址：http://www.iteye.com/topic/1118055 大致内容： 一、创建分析器 basic_lexer：只能根据空格和标点来进行拆分。
yhef·2012-11-21 10:00

简易USER_LEXER

USER_LEXERによる Simple 2-Gram Lexer (検索対象がVARCHAR2列) Oracle Text の USER_LEXER による Simple 2-Gram Lexer
NoWhy·2012-10-22 17:00

再读simpledb 之 SQL语句解析（2）

在（1）里面提到，lexer作为一个工具，完成了对SQL字符串的切割，将语句转化成一个tokens数组。
·2012-09-12 23:00

hive源码解析（2）之编译前序

    Antlr提供了一种语言工具框架ü    定义标示符，关键字（词法分析）ü    定义表达式(语法分析)ü    可以将文本转换成抽象语法树（AST)ü    树的解析（树分析器） （1）词法分析器Lexerü
lpxuan151009·2012-09-07 20:00

HTMLParser1.6 源代码阅读

org.htmlparser.lexer包，是主要的进行html解析的包。
·2012-07-17 11:00

htmlparser lexer解析网页源代码

有时候我们在解析网页源代码时需要的不是整个页面的源代码，而是其中的文本内容，这时可以使用htmlparser这个开源工具来进行相应的操作。下面是一个例子，这个例子比较简单，主要是理解这个工具中的一些类的作用：publicstaticStringhtml2Text(){ ConnectionManagermanager; Lexerlexer; Nodenode; manager=Page.getC
uohzoaix·2012-07-11 10:00

git提交修改时服务器发出的邮件没有diff信息

ascii'codeccan'tdecodebyte0xc5inposition91: ordinalnotinrange(128) (file"/usr/lib/python2.6/site-packages/Pygments-1.3.1-py2.6.egg/pygments/lexer.py
zhbpd·2012-06-19 15:00

浏览器了解（三）CSS解析

CSS词法分析（Lexer）CSS的词法分析通过flex来实现，可以在Tokenizer.cpp中找到定义的token2.      
zillachan·2012-04-12 19:23

tokenize和tokenizer到底怎么翻译？

在编写词法分析器(Lexer)或语法分析器(Parser)的时候，除了Lexer和Parser这两个词会经常使用外，tokenize和tokenizer也会经常出现，基本上所有涉及到词法解析的源码都会用到
iteye_5013·2012-03-28 10:35

tokenize和tokenizer到底怎么翻译？

 在编写词法分析器(Lexer)或语法分析器(Parser)的时候，除了Lexer和Parser这两个词会经常使用外，tokenize和tokenizer也会经常出现，基本上所有涉及到词法解析的源码都会用到
Tonyguxu·2012-03-28 10:00

Oracle全文索引设置步骤

对于utf8字符集的数据库有一个新的汉语分析器chinese_lexer，效率有了很大改善。现将验证并整理过的如何进行oracle全文索引设置的文档发给大家，适用于8i、9i各平台版本。
晨曦之光·2012-03-09 16:00

词法分析与语法分析简介

进行语法分析的程序或者函数叫作词法分析器（Lexicalanalyzer，简称Lexer），也叫扫描器（Scanner）。词法分析器一般以函数的形式存在，供语法分析器调用。
upkevin·2012-02-15 14:39

研究 JLex(6) （最后）

2.7）输出lexer程序  在构造好DFA之后，产生出相应的lexer程序本身并不复杂，我们所谓的研究是要看看产生的各个数据结构在最终产生的lexer程序(也称driver)中是什么。
刘军兴·2012-02-09 10:00

研究 JLex(2)

具体写的方法参见jlex的用户手册：http://www.cs.princeton.edu/~appel/modern/java/JLex/current/manual.html2）运行JLex以该文件为输入，生成lexer
刘军兴·2012-02-08 10:00

在ubuntu上编译gcc会到的问题及解决方法

2.undefined reference to `lexer_lin
wsql·2012-02-07 09:00

研究 JLex(1)

ALexicalAnalyzerGeneratorforJava),Web站点是http://www.cs.princeton.edu/~appel/modern/java/JLex/研究学习java版的lexer
刘军兴·2012-02-03 13:00

Antlr编译与解释

词法解析 (Lexer)： 解析出最小的单元(atom)： 5、32、4、8  和符号(symbols) +  （ - ）* 2.
discolt·2012-01-10 14:00

实现一个Number,float的词法解析器

   packagecompiler.lexer; importjava.text.CharacterIterator; importjava.text.StringCharacterIterator
javaG·2011-12-31 17:00

实现一个Number,float的词法解析器

阅读更多packagecompiler.lexer;importjava.text.CharacterIterator;importjava.text.StringCharacterIterator;publicclassNumberFloat
javaG·2011-12-31 17:00

实现一个Number,float的词法解析器

   packagecompiler.lexer; importjava.text.CharacterIterator; importjava.text.StringCharacterIterator
javaG·2011-12-31 17:00

C99 表达式 + Lexer部分 Grammar

/*============================================================================ Name       :CExpression.g Author     :luqi Version    :0.1 Copyright  :Yourcopyrightnotice Description:C99-Expression-hav
·2011-11-30 18:00

C99 词法部分 Antlr Grammar

Name       :CTokens.g Author     :luqi Version    :0.1 Copyright  :Yourcopyrightnotice Description:C99-Lexer-havetested
·2011-11-30 18:00

词法分析器

进行语法分析的程序或者函数叫作词法分析器（Lexicalanalyzer，简称Lexer），也叫扫描器（Scanner）。词法分析器一般以函数的形式存在，供语法分析器调用。
ZCSYLJ·2011-09-22 16:00

lexer html解析一个js过滤的改进

问题描述，使用htmlparser的lexer解析器进行页面解析时发现类似如下的页面会有问题：for(i=0;i解析后代码变成了：for(i=0;i通过lexer代码发现，实际上只要js代码改成：就不会有问题了
edwardpro1·2011-09-22 11:28

lexer html解析一个js过滤的改进

阅读更多问题描述，使用htmlparser的lexer解析器进行页面解析时发现类似如下的页面会有问题：for(i=0;i解析后代码变成了：for(i=0;i通过lexer代码发现，实际上只要js代码改成
edwardpro·2011-09-22 11:00

lexer html解析一个js过滤的改进

问题描述，使用htmlparser的lexer解析器进行页面解析时发现类似如下的页面会有问题：     <script> for(i=0;i<a;i++){
edwardpro·2011-09-22 11:00

Oracle 全文检索设置

 Oracle建立全文检索chinese_vgram_lexer类型 oracle数据库对全文检索的支持功能必须在本机装有oracle客户端的前提下使用。      
wang122188·2011-08-19 09:00

Antlr 和文本处理【源于网络】

Antlr根据这些文法，自动生成词法分析器（Lexer）、语法分析器（Parser）和树分析器（TreePars
晓星·2011-08-15 17:47

Antlr 和文本处理【源于网络】

Antlr根据这些文法，自动生成词法分析器（Lexer）、语法分析器（Parser）和树分析器（TreePars
cmyx2008love·2011-08-15 17:00
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他