File Coverage

blib/lib/PPI/Token.pm
Criterion Covered Total %
statement 150 157 95.5
branch 14 26 53.8
condition n/a
subroutine 53 53 100.0
pod 6 8 75.0
total 223 244 91.3


line stmt bran cond sub pod time code
1             package PPI::Token;
2              
3             =pod
4              
5             =head1 NAME
6              
7             PPI::Token - A single token of Perl source code
8              
9             =head1 INHERITANCE
10              
11             PPI::Token
12             isa PPI::Element
13              
14             =head1 DESCRIPTION
15              
16             C is the abstract base class for all Tokens. In PPI terms, a "Token" is
17             a L that directly represents bytes of source code.
18              
19             =head1 METHODS
20              
21             =cut
22              
23 65     65   385 use strict;
  65         121  
  65         1801  
24 65     65   680 use Params::Util qw{_INSTANCE};
  65         5308  
  65         2256  
25 65     65   680 use PPI::Element ();
  65         94  
  65         717  
26 65     65   561 use PPI::Exception ();
  65         103  
  65         1983  
27              
28             our $VERSION = '1.276';
29              
30             our @ISA = 'PPI::Element';
31              
32             # We don't load the abstracts, they are loaded
33             # as part of the inheritance process.
34              
35             # Load the token classes
36 65     65   23450 use PPI::Token::BOM ();
  65         146  
  65         1349  
37 65     65   25160 use PPI::Token::Whitespace ();
  65         171  
  65         1578  
38 65     65   23320 use PPI::Token::Comment ();
  65         143  
  65         1831  
39 65     65   22352 use PPI::Token::Pod ();
  65         138  
  65         1454  
40 65     65   22225 use PPI::Token::Number ();
  65         160  
  65         1497  
41 65     65   22942 use PPI::Token::Number::Binary ();
  65         159  
  65         1534  
42 65     65   21505 use PPI::Token::Number::Octal ();
  65         146  
  65         1503  
43 65     65   22489 use PPI::Token::Number::Hex ();
  65         150  
  65         1557  
44 65     65   22307 use PPI::Token::Number::Float ();
  65         130  
  65         1642  
45 65     65   22741 use PPI::Token::Number::Exp ();
  65         164  
  65         1725  
46 65     65   23142 use PPI::Token::Number::Version ();
  65         155  
  65         1738  
47 65     65   23747 use PPI::Token::Word ();
  65         153  
  65         1974  
48 65     65   21229 use PPI::Token::DashedWord ();
  65         135  
  65         1880  
49 65     65   21866 use PPI::Token::Symbol ();
  65         147  
  65         2057  
50 65     65   21729 use PPI::Token::ArrayIndex ();
  65         154  
  65         1955  
51 65     65   22764 use PPI::Token::Magic ();
  65         143  
  65         2182  
52 65     65   23447 use PPI::Token::Quote::Single ();
  65         139  
  65         2145  
53 65     65   22837 use PPI::Token::Quote::Double ();
  65         171  
  65         2200  
54 65     65   23140 use PPI::Token::Quote::Literal ();
  65         153  
  65         2315  
55 65     65   22674 use PPI::Token::Quote::Interpolate ();
  65         153  
  65         2262  
56 65     65   23241 use PPI::Token::QuoteLike::Backtick ();
  65         137  
  65         2242  
57 65     65   21763 use PPI::Token::QuoteLike::Command ();
  65         152  
  65         2309  
58 65     65   22862 use PPI::Token::QuoteLike::Regexp ();
  65         145  
  65         2417  
59 65     65   22282 use PPI::Token::QuoteLike::Words ();
  65         149  
  65         2518  
60 65     65   22397 use PPI::Token::QuoteLike::Readline ();
  65         143  
  65         2448  
61 65     65   22489 use PPI::Token::Regexp::Match ();
  65         131  
  65         2525  
62 65     65   22096 use PPI::Token::Regexp::Substitute ();
  65         135  
  65         2628  
63 65     65   22049 use PPI::Token::Regexp::Transliterate ();
  65         141  
  65         2624  
64 65     65   22000 use PPI::Token::Operator ();
  65         163  
  65         2922  
65 65     65   21278 use PPI::Token::Cast ();
  65         144  
  65         2807  
66 65     65   22655 use PPI::Token::Structure ();
  65         144  
  65         2986  
67 65     65   21730 use PPI::Token::Label ();
  65         144  
  65         3015  
68 65     65   24276 use PPI::Token::HereDoc ();
  65         139  
  65         3640  
69 65     65   20934 use PPI::Token::Separator ();
  65         185  
  65         3027  
70 65     65   21042 use PPI::Token::Data ();
  65         154  
  65         3400  
71 65     65   25315 use PPI::Token::End ();
  65         154  
  65         3283  
72 65     65   23362 use PPI::Token::Prototype ();
  65         169  
  65         3334  
73 65     65   22846 use PPI::Token::Attribute ();
  65         172  
  65         3344  
74 65     65   379 use PPI::Token::Unknown ();
  65         112  
  65         49132  
75              
76              
77              
78              
79              
80             #####################################################################
81             # Constructor and Related
82              
83             sub new {
84 364253 50   364253 0 1376482 bless { content => (defined $_[1] ? "$_[1]" : '') }, $_[0];
85             }
86              
87             sub set_class {
88 34126     34126 0 42009 my $self = shift;
89             # @_ or throw Exception("No arguments to set_class");
90 34126 50       72156 my $class = substr( $_[0], 0, 12 ) eq 'PPI::Token::' ? shift : 'PPI::Token::' . shift;
91              
92             # Find out if the current and new classes are complex
93 34126 50       103442 my $old_quote = (ref($self) =~ /\b(?:Quote|Regex)\b/o) ? 1 : 0;
94 34126 50       69797 my $new_quote = ($class =~ /\b(?:Quote|Regex)\b/o) ? 1 : 0;
95              
96             # No matter what happens, we will have to rebless
97 34126         48258 bless $self, $class;
98              
99             # If we are changing to or from a Quote style token, we
100             # can't just rebless and need to do some extra thing
101             # Otherwise, we have done enough
102 34126 50       96141 return $class if ($old_quote - $new_quote) == 0;
103              
104             # Make a new token from the old content, and overwrite the current
105             # token's attributes with the new token's attributes.
106 0         0 my $token = $class->new( $self->{content} );
107 0         0 %$self = %$token;
108              
109             # Return the class as a convenience
110 0         0 return $class;
111             }
112              
113              
114              
115              
116              
117             #####################################################################
118             # PPI::Token Methods
119              
120             =pod
121              
122             =head2 set_content $string
123              
124             The C method allows you to set/change the string that the
125             C object represents.
126              
127             Returns the string you set the Token to
128              
129             =cut
130              
131             sub set_content {
132 1     1 1 4 $_[0]->{content} = $_[1];
133             }
134              
135             =pod
136              
137             =head2 add_content $string
138              
139             The C method allows you to add additional bytes of code
140             to the end of the Token.
141              
142             Returns the new full string after the bytes have been added.
143              
144             =cut
145              
146 1     1 1 5 sub add_content { $_[0]->{content} .= $_[1] }
147              
148             =pod
149              
150             =head2 length
151              
152             The C method returns the length of the string in a Token.
153              
154             =cut
155              
156 7     7 1 122 sub length { CORE::length($_[0]->{content}) }
157              
158              
159              
160              
161              
162             #####################################################################
163             # Overloaded PPI::Element methods
164              
165             sub content {
166 1193205     1193205 1 2887591 $_[0]->{content};
167             }
168              
169             # You can insert either a statement, or a non-significant token.
170             sub insert_before {
171 1     1 1 3 my $self = shift;
172 1 50       9 my $Element = _INSTANCE(shift, 'PPI::Element') or return undef;
173 1 50       10 if ( $Element->isa('PPI::Structure') ) {
    50          
174 0         0 return $self->__insert_before($Element);
175             } elsif ( $Element->isa('PPI::Token') ) {
176 1         4 return $self->__insert_before($Element);
177             }
178 0         0 '';
179             }
180              
181             # As above, you can insert a statement, or a non-significant token
182             sub insert_after {
183 1     1 1 3 my $self = shift;
184 1 50       11 my $Element = _INSTANCE(shift, 'PPI::Element') or return undef;
185 1 50       7 if ( $Element->isa('PPI::Structure') ) {
    50          
186 0         0 return $self->__insert_after($Element);
187             } elsif ( $Element->isa('PPI::Token') ) {
188 1         3 return $self->__insert_after($Element);
189             }
190 0         0 '';
191             }
192              
193              
194              
195              
196              
197             #####################################################################
198             # Tokenizer Methods
199              
200             sub __TOKENIZER__on_line_start() { 1 }
201             sub __TOKENIZER__on_line_end() { 1 }
202             sub __TOKENIZER__on_char() { 'Unknown' }
203              
204              
205              
206              
207              
208             #####################################################################
209             # Lexer Methods
210              
211             sub __LEXER__opens {
212             ref($_[0]) eq 'PPI::Token::Structure'
213             and
214 46136 50   46136   238484 $_[0]->{content} =~ /(?:\(|\[|\{)/
215             }
216              
217             sub __LEXER__closes {
218             ref($_[0]) eq 'PPI::Token::Structure'
219             and
220 187140 100   187140   989432 $_[0]->{content} =~ /(?:\)|\]|\})/
221             }
222              
223             1;
224              
225             =pod
226              
227             =head1 SUPPORT
228              
229             See the L in the main module.
230              
231             =head1 AUTHOR
232              
233             Adam Kennedy Eadamk@cpan.orgE
234              
235             =head1 COPYRIGHT
236              
237             Copyright 2001 - 2011 Adam Kennedy.
238              
239             This program is free software; you can redistribute
240             it and/or modify it under the same terms as Perl itself.
241              
242             The full text of the license can be found in the
243             LICENSE file included with this module.
244              
245             =cut