如何探测代码语言？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

这是一个创建于 4522 天前的主题，其中的信息可能已经有所发展或是发生改变。

想做一个自动编译并执行工具（代码从网页端输入的，因此不包含扩展名），编译/解释执行范围是C++(C), Pascal, Python, Ruby, Java, JavaScript, C#等。我希望简化流程，即用户只需输入代码，不需要自己去选择语言，也能正确编译/解释执行。

（由于C++编译器可以编译C，因此可以不需要区分C++与C）

爆栈上有一个比较类似的问题：http://stackoverflow.com/questions/475033/detecting-programming-language-from-a-snippet

不过我这里的情况是代码比较完整，它99%是某一个编译器能够编译成功的代码，那么如何对它进行代码语言探测？

=======

我想把它放在JavaScript前端层面来实现，因此可能Generate AST这种庞大的solution不是很有用。

我想到的比较快速的方法是语言特征检测，由于代码完整，因此语言特征可能会很明显。但是准确性如何就不得而知了。

另一种方法（highlight.js）是用每个语言的highlighter渲染一遍，看哪个语言渲染到的比较多。然而这显然很不准确。。比如说{}在C++里是blocks，然而在Pascal里是comments,渲染为Pascal的时候，成功渲染（着色）量不见得比C++少。

不知大家有什么想法？

c++

代码

编译

20 条回复 • 1970-01-01 08:00:00 +08:00

orzfly

2013 年 9 月 7 日

https://github.com/github/linguist

breeswish

2013 年 9 月 7 日

@orzfly 它主要是基于扩展名探测的

luikore

2013 年 9 月 7 日

@breeswish 不是, linguist 综合了各种分析方法, 扩展名和首行等特征猜不出来的话, 就用贝叶斯网络做分类的.

GordianZ

2013 年 9 月 7 日

直接编译说不定还快点……

breeswish

2013 年 9 月 7 日

@GordianZ 你是说实现起来快一些么233333

GordianZ

2013 年 9 月 7 日

@breeswish 去检测语言也是要做语法分析的，每个都分析一遍不如直接让编译器做了算了……

Perry

2013 年 9 月 7 日

我觉得简化流程的想法很好，但是在前端做识别语言的处理话会很难（目前也没有最简便的方法，或者说要做的通吃很多语言会很有压力，也做不到很精准）；这个时候我觉得应该让用户自己去选择，作为用户的角度来说也不是什么特别麻烦的事情。

clippit

2013 年 9 月 7 日

记得以前看到过有人写了一段代码，可以同时当成好几种语言成功编译或执行

Kabie

2013 年 9 月 7 日

@clippit SO上的404页就有这么一段……
@breeswish 最简单的办法就是粗略的自动检测但是给用户选择的机会……然后对用户更改默认值的次数做一下统计……如果实际检测的成功率太低再尝试换用不同的方法

rwx

2013 年 9 月 7 日

pretty是直接把pre标签里的代码按探测的语言进行着色，但是没研究过代码，不知道是不是真的有语言探测，还是其它的什么机制

breeswish

2013 年 9 月 7 日

@rwx 你是说Google的那个js highlighter么~？那个好像是有一个“对于未知语言的高亮规则”

breeswish

2013 年 9 月 7 日

@GordianZ 嗯。。我就是来寻求不做语法分析的方案的。。
比如对于人来说，人辨认一个代码其实也不是按照语法分析的，不是拿所有已知的语言进行一遍语法分析，而是根据一些特征来判断，比如见到了#include，并且到处都是花括号什么的，直接就会觉得这是个C/C++，而如果见到满屏幕的begin end和prodecure，以及:=之类的，就会觉得是个pascal；而看到def \n xxx \n end等等可能就会觉得是个ruby。我希望能编程来实现这个~