Contents

# encoding: UTF-8

# Copyright 2012 Twitter, Inc
# http://www.apache.org/licenses/LICENSE-2.0

module TwitterCldr
  module Tokenizers
    class Token
      attr_accessor :value, :type

      def initialize(options = {})
        options.each_pair do |key, val|
          self.send("#{key.to_s}=", val)
        end
      end

      def to_s
        @value
      end

      def to_hash
        { :value => @value, :type => @type }
      end
    end
  end
end

Version data entries

28 entries across 28 versions & 1 rubygems

Version	Path
twitter_cldr-3.0.4	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-3.0.3	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-3.0.2	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-3.0.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.4.3	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-3.0.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-3.0.0.beta1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.4.2	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.4.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.4.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.2.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.1.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.1.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.0.2	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.0.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-2.0.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-1.9.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-1.9.0	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-1.8.1	lib/twitter_cldr/tokenizers/token.rb
twitter_cldr-1.8.0	lib/twitter_cldr/tokenizers/token.rb