LLM肯定比谷歌搜索或者stackoverflow强多了，但是也不过如此

[TeacherWei]

今天问了LLM一个问题，有关于某个开源软件的。该软件使用cmake编译。而且其cmake install会自动生成一系列script，包括systemd service描述。
我的问题是是service启动时候需要的一些env variable如何定义的。

co-pilot至少找到了和该env variable所有相关的文件名和位置。这一点就比google强几条街。
但是co-pilot说一些文件需要手动编辑，其实是错误的，而是cmake能够自动生成。至于自动生成的相关的cmake script自然是找不到了。
而且，这个cmake很容易就能wrap到yocto里面，自动生成arm板子的整个固件，这些co-pilot就没能力了。

总之，举一反三的能力不是一般的差。顶多能够进行一阶求导。高阶的推理依然不行。

[bihai]

今天问了LLM一个问题，有关于某个开源软件的。该软件使用cmake编译。而且其cmake install会自动生成一系列script，包括systemd service描述。
我的问题是是service启动时候需要的一些env variable如何定义的。

co-pilot至少找到了和该env variable所有相关的文件名和位置。这一点就比google强几条街。
但是co-pilot说一些文件需要手动编辑，其实是错误的，而是cmake能够自动生成。至于自动生成的相关的cmake script自然是找不到了。
而且，这个cmake很容易就能wrap到yocto里面，自动生成arm板子的整个固件，这些co-pilot就没能力了。

总之，举一反三的能力不是一般的差。顶多能够进行一阶求导。高阶的推理依然不行。

我最近想到的是，LLM是根据语言的描述来执行，就是说， 我们用语言描述了一个步骤，LLM可以执行，不需要以前决定精确的机器语言。

可能是我们的代码并没有这些描述，只有精确的代码，所以LLM就只能猜测。现在就是学了个大概。