]> git.lizzy.rs Git - rust.git/blob - src/macros.rs
Support compact macros 2.0 representation
[rust.git] / src / macros.rs
1 // Copyright 2015 The Rust Project Developers. See the COPYRIGHT
2 // file at the top-level directory of this distribution and at
3 // http://rust-lang.org/COPYRIGHT.
4 //
5 // Licensed under the Apache License, Version 2.0 <LICENSE-APACHE or
6 // http://www.apache.org/licenses/LICENSE-2.0> or the MIT license
7 // <LICENSE-MIT or http://opensource.org/licenses/MIT>, at your
8 // option. This file may not be copied, modified, or distributed
9 // except according to those terms.
10
11 // Format list-like macro invocations. These are invocations whose token trees
12 // can be interpreted as expressions and separated by commas.
13 // Note that these token trees do not actually have to be interpreted as
14 // expressions by the compiler. An example of an invocation we would reformat is
15 // foo!( x, y, z ). The token x may represent an identifier in the code, but we
16 // interpreted as an expression.
17 // Macro uses which are not-list like, such as bar!(key => val), will not be
18 // reformatted.
19 // List-like invocations with parentheses will be formatted as function calls,
20 // and those with brackets will be formatted as array literals.
21
22 use std::collections::HashMap;
23 use syntax::ast;
24 use syntax::codemap::{BytePos, Span};
25 use syntax::parse::new_parser_from_tts;
26 use syntax::parse::parser::Parser;
27 use syntax::parse::token::{BinOpToken, DelimToken, Token};
28 use syntax::print::pprust;
29 use syntax::symbol;
30 use syntax::tokenstream::{Cursor, ThinTokenStream, TokenStream, TokenTree};
31 use syntax::util::ThinVec;
32
33 use codemap::SpanUtils;
34 use comment::{contains_comment, remove_trailing_white_spaces, FindUncommented};
35 use expr::{rewrite_array, rewrite_call_inner};
36 use rewrite::{Rewrite, RewriteContext};
37 use shape::{Indent, Shape};
38 use utils::{format_visibility, mk_sp};
39
40 const FORCED_BRACKET_MACROS: &[&str] = &["vec!"];
41
42 // FIXME: use the enum from libsyntax?
43 #[derive(Clone, Copy, PartialEq, Eq, Debug)]
44 enum MacroStyle {
45     Parens,
46     Brackets,
47     Braces,
48 }
49
50 #[derive(Debug, Clone, Copy, PartialEq, Eq)]
51 pub enum MacroPosition {
52     Item,
53     Statement,
54     Expression,
55     Pat,
56 }
57
58 impl MacroStyle {
59     fn opener(&self) -> &'static str {
60         match *self {
61             MacroStyle::Parens => "(",
62             MacroStyle::Brackets => "[",
63             MacroStyle::Braces => "{",
64         }
65     }
66 }
67
68 #[derive(Debug)]
69 pub enum MacroArg {
70     Expr(ast::Expr),
71     Ty(ast::Ty),
72     Pat(ast::Pat),
73 }
74
75 impl Rewrite for MacroArg {
76     fn rewrite(&self, context: &RewriteContext, shape: Shape) -> Option<String> {
77         match *self {
78             MacroArg::Expr(ref expr) => expr.rewrite(context, shape),
79             MacroArg::Ty(ref ty) => ty.rewrite(context, shape),
80             MacroArg::Pat(ref pat) => pat.rewrite(context, shape),
81         }
82     }
83 }
84
85 fn parse_macro_arg(parser: &mut Parser) -> Option<MacroArg> {
86     macro_rules! parse_macro_arg {
87         ($macro_arg: ident, $parser: ident) => {
88             let mut cloned_parser = (*parser).clone();
89             match cloned_parser.$parser() {
90                 Ok(x) => {
91                     if parser.sess.span_diagnostic.has_errors() {
92                         parser.sess.span_diagnostic.reset_err_count();
93                     } else {
94                         // Parsing succeeded.
95                         *parser = cloned_parser;
96                         return Some(MacroArg::$macro_arg((*x).clone()));
97                     }
98                 }
99                 Err(mut e) => {
100                     e.cancel();
101                     parser.sess.span_diagnostic.reset_err_count();
102                 }
103             }
104         }
105     }
106
107     parse_macro_arg!(Expr, parse_expr);
108     parse_macro_arg!(Ty, parse_ty);
109     parse_macro_arg!(Pat, parse_pat);
110
111     None
112 }
113
114 pub fn rewrite_macro(
115     mac: &ast::Mac,
116     extra_ident: Option<ast::Ident>,
117     context: &RewriteContext,
118     shape: Shape,
119     position: MacroPosition,
120 ) -> Option<String> {
121     let context = &mut context.clone();
122     context.inside_macro = true;
123     if context.config.use_try_shorthand() {
124         if let Some(expr) = convert_try_mac(mac, context) {
125             context.inside_macro = false;
126             return expr.rewrite(context, shape);
127         }
128     }
129
130     let original_style = macro_style(mac, context);
131
132     let macro_name = match extra_ident {
133         None => format!("{}!", mac.node.path),
134         Some(ident) => {
135             if ident == symbol::keywords::Invalid.ident() {
136                 format!("{}!", mac.node.path)
137             } else {
138                 format!("{}! {}", mac.node.path, ident)
139             }
140         }
141     };
142
143     let style = if FORCED_BRACKET_MACROS.contains(&&macro_name[..]) {
144         MacroStyle::Brackets
145     } else {
146         original_style
147     };
148
149     let ts: TokenStream = mac.node.stream();
150     if ts.is_empty() && !contains_comment(context.snippet(mac.span)) {
151         return match style {
152             MacroStyle::Parens if position == MacroPosition::Item => {
153                 Some(format!("{}();", macro_name))
154             }
155             MacroStyle::Parens => Some(format!("{}()", macro_name)),
156             MacroStyle::Brackets => Some(format!("{}[]", macro_name)),
157             MacroStyle::Braces => Some(format!("{}{{}}", macro_name)),
158         };
159     }
160
161     let mut parser = new_parser_from_tts(context.parse_session, ts.trees().collect());
162     let mut arg_vec = Vec::new();
163     let mut vec_with_semi = false;
164     let mut trailing_comma = false;
165
166     if MacroStyle::Braces != style {
167         loop {
168             match parse_macro_arg(&mut parser) {
169                 Some(arg) => arg_vec.push(arg),
170                 None => return Some(context.snippet(mac.span).to_owned()),
171             }
172
173             match parser.token {
174                 Token::Eof => break,
175                 Token::Comma => (),
176                 Token::Semi => {
177                     // Try to parse `vec![expr; expr]`
178                     if FORCED_BRACKET_MACROS.contains(&&macro_name[..]) {
179                         parser.bump();
180                         if parser.token != Token::Eof {
181                             match parse_macro_arg(&mut parser) {
182                                 Some(arg) => {
183                                     arg_vec.push(arg);
184                                     parser.bump();
185                                     if parser.token == Token::Eof && arg_vec.len() == 2 {
186                                         vec_with_semi = true;
187                                         break;
188                                     }
189                                 }
190                                 None => return Some(context.snippet(mac.span).to_owned()),
191                             }
192                         }
193                     }
194                     return Some(context.snippet(mac.span).to_owned());
195                 }
196                 _ => return Some(context.snippet(mac.span).to_owned()),
197             }
198
199             parser.bump();
200
201             if parser.token == Token::Eof {
202                 trailing_comma = true;
203                 break;
204             }
205         }
206     }
207
208     match style {
209         MacroStyle::Parens => {
210             // Format macro invocation as function call, forcing no trailing
211             // comma because not all macros support them.
212             rewrite_call_inner(
213                 context,
214                 &macro_name,
215                 &arg_vec.iter().map(|e| &*e).collect::<Vec<_>>()[..],
216                 mac.span,
217                 shape,
218                 context.config.width_heuristics().fn_call_width,
219                 trailing_comma,
220             ).map(|rw| match position {
221                 MacroPosition::Item => format!("{};", rw),
222                 _ => rw,
223             })
224         }
225         MacroStyle::Brackets => {
226             let mac_shape = shape.offset_left(macro_name.len())?;
227             // Handle special case: `vec![expr; expr]`
228             if vec_with_semi {
229                 let (lbr, rbr) = if context.config.spaces_within_parens_and_brackets() {
230                     ("[ ", " ]")
231                 } else {
232                     ("[", "]")
233                 };
234                 // 6 = `vec!` + `; `
235                 let total_overhead = lbr.len() + rbr.len() + 6;
236                 let nested_shape = mac_shape.block_indent(context.config.tab_spaces());
237                 let lhs = arg_vec[0].rewrite(context, nested_shape)?;
238                 let rhs = arg_vec[1].rewrite(context, nested_shape)?;
239                 if !lhs.contains('\n') && !rhs.contains('\n')
240                     && lhs.len() + rhs.len() + total_overhead <= shape.width
241                 {
242                     Some(format!("{}{}{}; {}{}", macro_name, lbr, lhs, rhs, rbr))
243                 } else {
244                     Some(format!(
245                         "{}{}\n{}{};\n{}{}\n{}{}",
246                         macro_name,
247                         lbr,
248                         nested_shape.indent.to_string(context.config),
249                         lhs,
250                         nested_shape.indent.to_string(context.config),
251                         rhs,
252                         shape.indent.to_string(context.config),
253                         rbr
254                     ))
255                 }
256             } else {
257                 // If we are rewriting `vec!` macro or other special macros,
258                 // then we can rewrite this as an usual array literal.
259                 // Otherwise, we must preserve the original existence of trailing comma.
260                 if FORCED_BRACKET_MACROS.contains(&macro_name.as_str()) {
261                     context.inside_macro = false;
262                     trailing_comma = false;
263                 }
264                 // Convert `MacroArg` into `ast::Expr`, as `rewrite_array` only accepts the latter.
265                 let sp = mk_sp(
266                     context
267                         .codemap
268                         .span_after(mac.span, original_style.opener()),
269                     mac.span.hi() - BytePos(1),
270                 );
271                 let arg_vec = &arg_vec.iter().map(|e| &*e).collect::<Vec<_>>()[..];
272                 let rewrite = rewrite_array(arg_vec, sp, context, mac_shape, trailing_comma)?;
273
274                 Some(format!("{}{}", macro_name, rewrite))
275             }
276         }
277         MacroStyle::Braces => {
278             // Skip macro invocations with braces, for now.
279             indent_macro_snippet(context, context.snippet(mac.span), shape.indent)
280         }
281     }
282 }
283
284 pub fn rewrite_macro_def(
285     context: &RewriteContext,
286     indent: Indent,
287     def: &ast::MacroDef,
288     ident: ast::Ident,
289     vis: &ast::Visibility,
290     span: Span,
291 ) -> Option<String> {
292     let snippet = Some(remove_trailing_white_spaces(context.snippet(span)));
293
294     let mut parser = MacroParser::new(def.stream().into_trees());
295     let parsed_def = match parser.parse() {
296         Some(def) => def,
297         None => return snippet,
298     };
299
300     let mut result = if def.legacy {
301         String::from("macro_rules!")
302     } else {
303         format!("{}macro", format_visibility(vis))
304     };
305
306     result += " ";
307     result += &ident.name.as_str();
308
309     let multi_branch_style = def.legacy || parsed_def.branches.len() != 1;
310
311     let mac_indent = if multi_branch_style {
312         result += " {";
313         indent.block_indent(context.config)
314     } else {
315         indent
316     };
317
318     let mac_indent_str = mac_indent.to_string(context.config);
319
320     for branch in parsed_def.branches {
321         // Only attempt to format function-like macros.
322         if branch.args_paren_kind != DelimToken::Paren {
323             // FIXME(#1539): implement for non-sugared macros.
324             return snippet;
325         }
326
327         let args = format!("({})", format_macro_args(branch.args)?);
328
329         if multi_branch_style {
330             result += "\n";
331             result += &mac_indent_str;
332             result += &args;
333             result += " =>";
334         } else {
335             result += &args;
336         }
337
338         result += " {\n";
339
340         // The macro body is the most interesting part. It might end up as various
341         // AST nodes, but also has special variables (e.g, `$foo`) which can't be
342         // parsed as regular Rust code (and note that these can be escaped using
343         // `$$`). We'll try and format like an AST node, but we'll substitute
344         // variables for new names with the same length first.
345
346         let old_body = context.snippet(branch.body).trim();
347         let (body_str, substs) = match replace_names(old_body) {
348             Some(result) => result,
349             None => return snippet,
350         };
351
352         // We'll hack the indent below, take this into account when formatting,
353         let mut config = context.config.clone();
354         let body_indent = mac_indent.block_indent(&config);
355         let new_width = config.max_width() - body_indent.width();
356         config.set().max_width(new_width);
357         config.set().hide_parse_errors(true);
358
359         // First try to format as items, then as statements.
360         let new_body = match ::format_snippet(&body_str, &config) {
361             Some(new_body) => new_body,
362             None => match ::format_code_block(&body_str, &config) {
363                 Some(new_body) => new_body,
364                 None => return snippet,
365             },
366         };
367
368         // Indent the body since it is in a block.
369         let indent_str = body_indent.to_string(&config);
370         let mut new_body = new_body
371             .trim_right()
372             .lines()
373             .fold(String::new(), |mut s, l| {
374                 if !l.is_empty() {
375                     s += &indent_str;
376                 }
377                 s + l + "\n"
378             });
379
380         // Undo our replacement of macro variables.
381         // FIXME: this could be *much* more efficient.
382         for (old, new) in &substs {
383             if old_body.find(new).is_some() {
384                 debug!(
385                     "rewrite_macro_def: bailing matching variable: `{}` in `{}`",
386                     new, ident
387                 );
388                 return snippet;
389             }
390             new_body = new_body.replace(new, old);
391         }
392
393         result += &new_body;
394
395         result += &mac_indent_str;
396         result += "}";
397         if def.legacy {
398             result += ";";
399         }
400         result += "\n";
401     }
402
403     if multi_branch_style {
404         result += &indent.to_string(context.config);
405         result += "}";
406     }
407
408     Some(result)
409 }
410
411 // Replaces `$foo` with `zfoo`. We must check for name overlap to ensure we
412 // aren't causing problems.
413 // This should also work for escaped `$` variables, where we leave earlier `$`s.
414 fn replace_names(input: &str) -> Option<(String, HashMap<String, String>)> {
415     // Each substitution will require five or six extra bytes.
416     let mut result = String::with_capacity(input.len() + 64);
417     let mut substs = HashMap::new();
418     let mut dollar_count = 0;
419     let mut cur_name = String::new();
420
421     for c in input.chars() {
422         if c == '$' {
423             dollar_count += 1;
424         } else if dollar_count == 0 {
425             result.push(c);
426         } else if !c.is_alphanumeric() && !cur_name.is_empty() {
427             // Terminates a name following one or more dollars.
428             let mut new_name = String::new();
429             let mut old_name = String::new();
430             old_name.push('$');
431             for _ in 0..(dollar_count - 1) {
432                 new_name.push('$');
433                 old_name.push('$');
434             }
435             new_name.push('z');
436             new_name.push_str(&cur_name);
437             old_name.push_str(&cur_name);
438
439             result.push_str(&new_name);
440             substs.insert(old_name, new_name);
441
442             result.push(c);
443
444             dollar_count = 0;
445             cur_name = String::new();
446         } else if c == '(' && cur_name.is_empty() {
447             // FIXME: Support macro def with repeat.
448             return None;
449         } else if c.is_alphanumeric() {
450             cur_name.push(c);
451         }
452     }
453
454     // FIXME: duplicate code
455     if !cur_name.is_empty() {
456         let mut new_name = String::new();
457         let mut old_name = String::new();
458         old_name.push('$');
459         for _ in 0..(dollar_count - 1) {
460             new_name.push('$');
461             old_name.push('$');
462         }
463         new_name.push('z');
464         new_name.push_str(&cur_name);
465         old_name.push_str(&cur_name);
466
467         result.push_str(&new_name);
468         substs.insert(old_name, new_name);
469     }
470
471     debug!("replace_names `{}` {:?}", result, substs);
472
473     Some((result, substs))
474 }
475
476 // This is a bit sketchy. The token rules probably need tweaking, but it works
477 // for some common cases. I hope the basic logic is sufficient. Note that the
478 // meaning of some tokens is a bit different here from usual Rust, e.g., `*`
479 // and `(`/`)` have special meaning.
480 //
481 // We always try and format on one line.
482 fn format_macro_args(toks: ThinTokenStream) -> Option<String> {
483     let mut result = String::with_capacity(128);
484     let mut insert_space = SpaceState::Never;
485
486     for tok in (toks.into(): TokenStream).trees() {
487         match tok {
488             TokenTree::Token(_, t) => {
489                 if !result.is_empty() && force_space_before(&t) {
490                     insert_space = SpaceState::Always;
491                 }
492                 if force_no_space_before(&t) {
493                     insert_space = SpaceState::Never;
494                 }
495                 match (insert_space, ident_like(&t)) {
496                     (SpaceState::Always, _)
497                     | (SpaceState::Punctuation, false)
498                     | (SpaceState::Ident, true) => {
499                         result.push(' ');
500                     }
501                     _ => {}
502                 }
503                 result.push_str(&pprust::token_to_string(&t));
504                 insert_space = next_space(&t);
505             }
506             TokenTree::Delimited(_, d) => {
507                 if let SpaceState::Always = insert_space {
508                     result.push(' ');
509                 }
510                 let formatted = format_macro_args(d.tts)?;
511                 match d.delim {
512                     DelimToken::Paren => {
513                         result.push_str(&format!("({})", formatted));
514                         insert_space = SpaceState::Always;
515                     }
516                     DelimToken::Bracket => {
517                         result.push_str(&format!("[{}]", formatted));
518                         insert_space = SpaceState::Always;
519                     }
520                     DelimToken::Brace => {
521                         result.push_str(&format!(" {{ {} }}", formatted));
522                         insert_space = SpaceState::Always;
523                     }
524                     DelimToken::NoDelim => {
525                         result.push_str(&format!("{}", formatted));
526                         insert_space = SpaceState::Always;
527                     }
528                 }
529             }
530         }
531     }
532
533     Some(result)
534 }
535
536 // We should insert a space if the next token is a:
537 #[derive(Copy, Clone)]
538 enum SpaceState {
539     Never,
540     Punctuation,
541     Ident, // Or ident/literal-like thing.
542     Always,
543 }
544
545 fn force_space_before(tok: &Token) -> bool {
546     match *tok {
547         Token::Eq
548         | Token::Lt
549         | Token::Le
550         | Token::EqEq
551         | Token::Ne
552         | Token::Ge
553         | Token::Gt
554         | Token::AndAnd
555         | Token::OrOr
556         | Token::Not
557         | Token::Tilde
558         | Token::BinOpEq(_)
559         | Token::At
560         | Token::RArrow
561         | Token::LArrow
562         | Token::FatArrow
563         | Token::Pound
564         | Token::Dollar => true,
565         Token::BinOp(bot) => bot != BinOpToken::Star,
566         _ => false,
567     }
568 }
569
570 fn force_no_space_before(tok: &Token) -> bool {
571     match *tok {
572         Token::Semi | Token::Comma | Token::Dot => true,
573         Token::BinOp(bot) => bot == BinOpToken::Star,
574         _ => false,
575     }
576 }
577 fn ident_like(tok: &Token) -> bool {
578     match *tok {
579         Token::Ident(_) | Token::Literal(..) | Token::Lifetime(_) => true,
580         _ => false,
581     }
582 }
583
584 fn next_space(tok: &Token) -> SpaceState {
585     match *tok {
586         Token::Not
587         | Token::Tilde
588         | Token::At
589         | Token::Comma
590         | Token::Dot
591         | Token::DotDot
592         | Token::DotDotDot
593         | Token::DotDotEq
594         | Token::DotEq
595         | Token::Question
596         | Token::Underscore
597         | Token::BinOp(_) => SpaceState::Punctuation,
598
599         Token::ModSep
600         | Token::Pound
601         | Token::Dollar
602         | Token::OpenDelim(_)
603         | Token::CloseDelim(_)
604         | Token::Whitespace => SpaceState::Never,
605
606         Token::Literal(..) | Token::Ident(_) | Token::Lifetime(_) => SpaceState::Ident,
607
608         _ => SpaceState::Always,
609     }
610 }
611
612 /// Tries to convert a macro use into a short hand try expression. Returns None
613 /// when the macro is not an instance of try! (or parsing the inner expression
614 /// failed).
615 pub fn convert_try_mac(mac: &ast::Mac, context: &RewriteContext) -> Option<ast::Expr> {
616     if &format!("{}", mac.node.path)[..] == "try" {
617         let ts: TokenStream = mac.node.tts.clone().into();
618         let mut parser = new_parser_from_tts(context.parse_session, ts.trees().collect());
619
620         Some(ast::Expr {
621             id: ast::NodeId::new(0), // dummy value
622             node: ast::ExprKind::Try(parser.parse_expr().ok()?),
623             span: mac.span, // incorrect span, but shouldn't matter too much
624             attrs: ThinVec::new(),
625         })
626     } else {
627         None
628     }
629 }
630
631 fn macro_style(mac: &ast::Mac, context: &RewriteContext) -> MacroStyle {
632     let snippet = context.snippet(mac.span);
633     let paren_pos = snippet.find_uncommented("(").unwrap_or(usize::max_value());
634     let bracket_pos = snippet.find_uncommented("[").unwrap_or(usize::max_value());
635     let brace_pos = snippet.find_uncommented("{").unwrap_or(usize::max_value());
636
637     if paren_pos < bracket_pos && paren_pos < brace_pos {
638         MacroStyle::Parens
639     } else if bracket_pos < brace_pos {
640         MacroStyle::Brackets
641     } else {
642         MacroStyle::Braces
643     }
644 }
645
646 /// Indent each line according to the specified `indent`.
647 /// e.g.
648 /// ```rust
649 /// foo!{
650 /// x,
651 /// y,
652 /// foo(
653 ///     a,
654 ///     b,
655 ///     c,
656 /// ),
657 /// }
658 /// ```
659 /// will become
660 /// ```rust
661 /// foo!{
662 ///     x,
663 ///     y,
664 ///     foo(
665 ///         a,
666 ///         b,
667 ///         c,
668 //      ),
669 /// }
670 /// ```
671 fn indent_macro_snippet(
672     context: &RewriteContext,
673     macro_str: &str,
674     indent: Indent,
675 ) -> Option<String> {
676     let mut lines = macro_str.lines();
677     let first_line = lines.next().map(|s| s.trim_right())?;
678     let mut trimmed_lines = Vec::with_capacity(16);
679
680     let min_prefix_space_width = lines
681         .filter_map(|line| {
682             let prefix_space_width = if is_empty_line(line) {
683                 None
684             } else {
685                 Some(get_prefix_space_width(context, line))
686             };
687             trimmed_lines.push((line.trim(), prefix_space_width));
688             prefix_space_width
689         })
690         .min()?;
691
692     Some(
693         String::from(first_line) + "\n"
694             + &trimmed_lines
695                 .iter()
696                 .map(|&(line, prefix_space_width)| match prefix_space_width {
697                     Some(original_indent_width) => {
698                         let new_indent_width = indent.width()
699                             + original_indent_width
700                                 .checked_sub(min_prefix_space_width)
701                                 .unwrap_or(0);
702                         let new_indent = Indent::from_width(context.config, new_indent_width);
703                         format!("{}{}", new_indent.to_string(context.config), line.trim())
704                     }
705                     None => String::new(),
706                 })
707                 .collect::<Vec<_>>()
708                 .join("\n"),
709     )
710 }
711
712 fn get_prefix_space_width(context: &RewriteContext, s: &str) -> usize {
713     let mut width = 0;
714     for c in s.chars() {
715         match c {
716             ' ' => width += 1,
717             '\t' => width += context.config.tab_spaces(),
718             _ => return width,
719         }
720     }
721     width
722 }
723
724 fn is_empty_line(s: &str) -> bool {
725     s.is_empty() || s.chars().all(char::is_whitespace)
726 }
727
728 // A very simple parser that just parses a macros 2.0 definition into its branches.
729 // Currently we do not attempt to parse any further than that.
730 #[derive(new)]
731 struct MacroParser {
732     toks: Cursor,
733 }
734
735 impl MacroParser {
736     // (`(` ... `)` `=>` `{` ... `}`)*
737     fn parse(&mut self) -> Option<Macro> {
738         let mut branches = vec![];
739         while self.toks.look_ahead(1).is_some() {
740             branches.push(self.parse_branch()?);
741         }
742
743         Some(Macro { branches })
744     }
745
746     // `(` ... `)` `=>` `{` ... `}`
747     fn parse_branch(&mut self) -> Option<MacroBranch> {
748         let (args_paren_kind, args) = match self.toks.next()? {
749             TokenTree::Token(..) => return None,
750             TokenTree::Delimited(_, ref d) => (d.delim, d.tts.clone()),
751         };
752         match self.toks.next()? {
753             TokenTree::Token(_, Token::FatArrow) => {}
754             _ => return None,
755         }
756         let body = match self.toks.next()? {
757             TokenTree::Token(..) => return None,
758             TokenTree::Delimited(sp, _) => {
759                 let data = sp.data();
760                 Span::new(data.lo + BytePos(1), data.hi - BytePos(1), data.ctxt)
761             }
762         };
763         if let Some(TokenTree::Token(_, Token::Semi)) = self.toks.look_ahead(0) {
764             self.toks.next();
765         }
766         Some(MacroBranch {
767             args,
768             args_paren_kind,
769             body,
770         })
771     }
772 }
773
774 // A parsed macros 2.0 macro definition.
775 struct Macro {
776     branches: Vec<MacroBranch>,
777 }
778
779 // FIXME: it would be more efficient to use references to the token streams
780 // rather than clone them, if we can make the borrowing work out.
781 struct MacroBranch {
782     args: ThinTokenStream,
783     args_paren_kind: DelimToken,
784     body: Span,
785 }
786
787 #[cfg(test)]
788 mod test {
789     use super::*;
790     use syntax::parse::{parse_stream_from_source_str, ParseSess};
791     use syntax::codemap::{FileName, FilePathMapping};
792
793     fn format_macro_args_str(s: &str) -> String {
794         let input = parse_stream_from_source_str(
795             FileName::Custom("stdin".to_owned()),
796             s.to_owned(),
797             &ParseSess::new(FilePathMapping::empty()),
798             None,
799         );
800         format_macro_args(input.into()).unwrap()
801     }
802
803     #[test]
804     fn test_format_macro_args() {
805         assert_eq!(format_macro_args_str(""), "".to_owned());
806         assert_eq!(format_macro_args_str("$ x : ident"), "$x: ident".to_owned());
807         assert_eq!(
808             format_macro_args_str("$ m1 : ident , $ m2 : ident , $ x : ident"),
809             "$m1: ident, $m2: ident, $x: ident".to_owned()
810         );
811         assert_eq!(
812             format_macro_args_str("$($beginning:ident),*;$middle:ident;$($end:ident),*"),
813             "$($beginning: ident),*; $middle: ident; $($end: ident),*".to_owned()
814         );
815         assert_eq!(
816             format_macro_args_str(
817                 "$ name : ident ( $ ( $ dol : tt $ var : ident ) * ) $ ( $ body : tt ) *"
818             ),
819             "$name: ident($($dol: tt $var: ident)*) $($body: tt)*".to_owned()
820         );
821     }
822 }