lexical-analysis

    7熱

    3答えて

    FLEX：一度に複数のトークンを返す方法はありますか？

    フレックスでは、正規表現の1つの一致に対して複数のトークンを返す必要があります。これを行う方法はありますか？
    regex flex-lexer lexical-analysis 2009-02-22

    5熱

    1答えて

    Rubyでタブ区切りのテキスト行を解析するには？

    Rubyのeachの機能がちょっと混乱しています。私はテキスト行を持っている場合、eachループは、個々の文字ではなくスペースで区切られた単語を私に与えます。 だから、タブ文字で区切られた文字列のセクションを取得する最良の方法は何ですか。現時点では、私は持っています： line.split.each do |word| ... end しかしそれは間違いです。
    ruby parsing delimiter lexical-analysis tab-delimited 2009-03-03

    14熱

    10答えて

    実世界のアプリケーションでレクサー/パーサーを効果的に使用したことがありますか？

    最近、私はANTLRの学習を始めました。私は、レクサー/パーサーを一緒に使用してプログラミング言語を構築できることを知っています。 DSLやプログラミング言語以外に、実際の問題を解決するために、レクサー/パーサーツール（およびナレッジ）を直接的または間接的に使用したことがありますか？平均的なプログラマがレクサーやパーサの知識なしにこれらの問題を解決することは可能でしょうか？
    parsing compiler-construction tokenize lexical-analysis 2009-03-14

    1熱

    4答えて

    正規表現の代わりに構文ハイライトを使用するにはどうすればよいですか？

    これを編集してVimで編集している間、私はその構文強調表示（いくつかのファイルタイプ）にいくつかの欠陥があることがよくあります。私は現時点では事例を覚えていないが、確かに誰かがそうするだろう。通常、いくつかのケースではひどくハイライトされた文字列と、算術演算子とブール演算子といくつかの小さなものから構成されています。 これで、vimはそのちょっとしたもの（独自のフレーバー）に正規表現を使用します。
    regex parsing editor syntax-highlighting lexical-analysis 2009-05-04

    1熱

    1答えて

    YaccではなくLexでエラー状態を処理していますか？

    私は、ユーザーが A75PsN A75PS を入力した場合、ユーザは、私が A75PKN のようなものを言う場合、それは でもマッチします [aA][0-9]{2,2}[pP][sS][nN]? { return TOKEN; } のようなlexの正規表現を持っていると仮定それがエラーになり、「キャラクターKが認識されず、S私は、私は周りを取得することができますどのように意味のあるエ
    parsing lex flex-lexer lexical-analysis 2009-08-14

    1熱

    2答えて

    BisonはCの文字列リテラルを適切に認識していないようです

    私の問題は、flex-bison scanner-parserを使ってコード化した問題を実行しようとしていることです。私のプログラムは、ユーザーの入力（私の場合、私が設計しているデータベースシステムのクエリ）、lexと解析を行い、対応するアクションを実行します。実際には、私のパーサー・コードが、私がそれをフィードしている文字列リテラルを正しく解釈していないことが起こります。 は、ここに私のコードで
    c++ parsing bison flex-lexer lexical-analysis 2009-03-30

    3熱

    4答えて

    コンパイラは、解析中にどこでほとんどの時間を費やしますか？

    私はSebesta bookを読んで、コンパイラはほとんどの時間をソースコードのレキシングに費やしています。したがって、構文解析ツールとは異なり、レクサーを最適化する必要があります。 これが当てはまる場合、一般的な構文解析に比べて、字句解析の段階に時間がかかるのはなぜですか？ 私は構文解析によって派生プロセスを意味します。
    language-agnostic parsing compiler-construction lexical-analysis 2009-07-09

    5熱

    3答えて

    Lex/Flexの開始状態

    私は、パーサージェネレータにFlexとBisonを使用していますが、スキャナの開始状態に問題があります。私がコメントに対処するために排他的なルールを使用していますが、この文法は引用されたトークンと一致していないよう ： %x COMMENT // { BEGIN(COMMENT); } <COMMENT>[^\n] ; <COMMENT>\n { BEGIN(INITIAL)
    parsing bison lex lexical-analysis flex-lexer 2009-07-15

    10熱

    7答えて

    構文解析の意味テキストからの意味

    これは幅広い話題ですが、私は理想的にはPythonの中で、テキストから意味を解析する上で優れたプライマーを探しています。私は、ユーザーが行った場合、行うことを探しているものの一例として、のようなブログ記事：は 軽量何、 「マニー・ラミレスがヒューストン・アストロズに対してドジャースのための彼のリターン今日になります」 /文から名詞を得る簡単な方法？まず、適切な名詞に限定したいと思いますが、それだけ
    python parsing nlp lexical-analysis 2009-07-17

    2熱

    2答えて

    フレックス（語彙スキャナー）を使ってUTF-8文字を読む方法は？

    flexはUTF-8入力をサポートしていないようです。スキャナがASCII以外の文字を検出すると、スキャナはEOFであるかのようにスキャンを停止します。 フレックスでUTF-8文字を強制的に使用する方法はありますか？私はそれが実際にUTF-8の文字にマッチすることを望んでいません。パターン。 提案がありますか？ EDIT 最も簡単な解決策は次のようになります。 '' [\ x00- \ XFF]
    utf-8 lexical-analysis flex-lexer 2009-05-28
最新の質問