
Xieisabug- 26 Sep, 2024
Cursor Composer、Zed Workflow、Aider、Copilot Workspace对比
本文只是对四款自动编码的产品做一个横向比较,单独的产品使用评测可以看看博客里单独评测的文章。最后有AI生成的对比表,省流的可以看每个对比的结果和最后的表。 并且该横向评测的结果也只是我自己日常使用的主观感受,每个人的场景不同自然会有不同的体验。(叠甲 选手简介Cursor Composer:Cursor Composer是一款集成在Cursor编辑器中的AI自动化编程工具。它能够根据用户的需求描述,自动分析项目代码,并生成相应的代码修改方案。Cursor ComposerZed Workflow:Zed Workflow是Zed编辑器的一个功能,允许用户通过提示来指导AI进行代码修改。与其说它像Cursor Composer,不如说是Github Copilot Chat的增强版。Zed WorkflowAider:Aider是一个命令行工具,可以与多种AI模型配合使用。AiderCopilot Workspace:Copilot Workspace是GitHub的扩展功能,目前只能通过Github Next提供的Web界面使用。它可以分析GitHub Repository,然后根据用户输入的需求生成解决方案,并直接修改代码。Copilot Workspace 用于评测的项目是我编写的一个开源大模型客户端:https://github.com/xieisabug/tea 对比维度 我会针对以下几个维度来进行体验对比:工程能力代码质量用户体验价格与性价比详细对比 工程能力Cursor Composer:能根据需求自动识别出需要修改的文件、能够多轮次的迭代修改、能够选择是否应用单个修改,实际体验下来识别需要修改的文件不是非常的准确,并且使用的过程中还碰到了找不到历史记录或者修改文件失败之类的小bug。Zed Workflow:工程能力很弱,需要手动提供上下文文件给AI,修改也需要自己去一个个点Transform按钮,而且不知道是不是因为格式过于复杂,Deepseek有时候会无法遵循格式导致这个Workflow没法用。Aider:同样能根据需求自动识别出需要修改的文件、能够多轮次的迭代修改,修改会直接应用到文件上,通过git的能力来查看本次修改和回退修改。特殊的是aider具备出色的自检和自纠错能力,能自动运行测试用例并确保通过。Aider使用Deepseek也偶尔会出现没有遵循格式修改,但是Aider会自动让Deepseek重试。Copilot Workspace:同样能根据需求自动识别出需要修改的文件、能够多轮次的迭代修改,能在网页上用diff格式展示出所有的修改,特殊的是它在输入需求之后提供分步骤的需求分析、代码分析、代码修改计划,有助于处理复杂任务理清思路,能够直接提交到Github Repository,也能通过最新的一个VS Code插件来同步修改到本地运行测试。Aider > Copilot Workspace = Cursor Composer >> Zed Workflow 代码质量 本来不应该在评测这种大模型工具的场景下,评测代码质量,因为代码都是模型写的并不是这些工具提供的能力。但在我使用的过程中,由于Prompt、工具限制等各种情况导致代码的质量还真有一些不同。Cursor Composer:能用GPT和Claude之类的SOTA模型,也可以用自己的key,但是要转换为Cursor“认证”过的模型,也就是把模型名字要改成gpt4o之类的,我就是把deepseek用worker覆写成gpt4o来使用的。Zed Workflow:纯纯的就是靠模型能力了。Aider:得益于其强大的自我纠错和测试运行能力,代码质量最佳。支持几乎所有的模型,并且有一套自己的榜单Aider leaderboard和测试集,有钱的大哥可以体验体验用o1 preview自动写代码的快感。Copilot Workspace:可惜只能用GPT(居然变成了减分项),有Copilot写代码的通病,喜欢吞括号和分号。现在可以申请o1系列的模型了,我还在waitlist里等着。Aider = Cursor Composer > Zed Workflow > Copilot Workspace 用户体验Cursor Composer:集成在编辑器中,使用便捷直观,和聊天是用的同一套UI体系,一方面来说比较稳没有什么学习成本,一方面来说又太稳了不突破很难有惊艳的效果。也许就是因为Cursor的这个稳让新入场的开发者都能非常快速的感受到它的能力。Zed Workflow:学习曲线也低,毕竟没啥东西。Aider:对于熟悉命令行的开发者体验还是不错的,与终端的结合度高,可能是因为不需要操心界面的原因,功能的完成度也非常高,基本上该有的命令该有的提示该有的检查全部都做到了,并且减少了对鼠标的依赖。但是学习曲线较陡峭,需要一定时间来“学习”使用这些功能,会用和不会用简直就是两种体验。Copilot Workspace:也是直观的界面且易于使用,但是其功能是独立于IDE的,所以使用的时候总是要切换来切换去。允许用户调整AI生成的分析和计划,可调整的空间很大。没什么学习的东西,基本上也就是一个输入框用来提需求就完事了。Cursor Composer > Copilot Workspace > Aider > Zed Workflow 价格与性价比Cursor Composer:必须开通Cursor Pro才可以使用这个能力,然后只有500次高级模型的使用权限,所以500次之后就得用自己的key来使用Composer功能。价格是20刀,不过20刀里还有Cursor的补全服务,这个补全服务我觉得比Composer值钱。不过我觉得20刀换500次高级模型使用+补全,还是不太值 (经过网友指正,不是500次高级模型,是500次快速的高级模型,之后应该还是会有可排队的高级模型使用),20刀买api能用很久了,尤其是带有缓存命中的Claude和Deepseek(Deepseek 20刀能用一年吧,能不能提高点价格然后加加速啊)。Zed Workflow:有自己的Zed AI服务,但是暂时没收费,也可以用Copilot提供的GPT4o,这点还挺好,目前推荐用这俩,因为Zed的机制导致它使用的时候会消耗很多Token,如果没有缓存命中机制的提供商用起来会破产,除了Zed AI和Copilot之外最好就是用Deepseek了。Aider:工具本身免费开源,需要付费的是大模型的API。同样,使用缓存命中机制的提供商会便宜很多。Copilot Workspace:价格性价比优秀,尤其对于已经使用GitHub和Copilot的开发者。目前还不用额外订阅,暂时只需要Copilot的10刀。Copilot Workspace > Aider = Zed Workflow > Cursor Composer 总结对于需要强大工程能力和高质量代码输出的开发者,Aider 是一个很好的选择,Aider是一个长板很明显短板也很明显的工具。暂时还不推荐Zed Workflow,就算是结合Zed AI的各种能力和插件来使用,也达不到很好的效果,可以再让它发展一段时间。Copilot Workspace 对于目前拥有Copilot,并且维护了开源项目的开发者,非常友好,暂时没有额外的收费并且用户体验做的很好。对于那些希望在熟悉的VS Code环境中获得自动编码辅助的开发者,Cursor Composer 是一个不错的选择,并且因为其高结合度,操作非常便捷。目前这类的产品我最终还是找到了使用场景,最初我认为:复杂的任务无法完成、简单的任务用它完成徒增复杂度,现在我认为:复杂的任务拆解成简单的(这是我的能力)、经过多次与AI配合熟练后简单的任务让AI来做,我和AI配合起来还是很节省时间的。对比表 同样,最后让AI出一个表格 特性Cursor ComposerZed WorkflowAiderCopilot Workspace工程能力⭐⭐⭐⭐☆⭐☆☆☆☆⭐⭐⭐⭐⭐⭐⭐⭐⭐☆代码质量⭐⭐⭐⭐⭐⭐⭐⭐⭐☆⭐⭐⭐⭐⭐⭐⭐⭐☆☆用户体验⭐⭐⭐⭐☆⭐⭐☆☆☆⭐⭐⭐☆☆⭐⭐⭐⭐⭐价格性价比⭐⭐⭐☆☆⭐⭐⭐⭐☆⭐⭐⭐⭐☆⭐⭐⭐⭐☆自动文件识别⭐⭐⭐⭐☆⭐⭐☆☆☆⭐⭐⭐⭐☆⭐⭐⭐⭐⭐复杂任务处理⭐⭐⭐⭐☆⭐⭐⭐☆☆⭐⭐⭐⭐☆⭐⭐⭐⭐⭐自我纠错能力⭐⭐⭐☆☆⭐⭐⭐☆☆⭐⭐⭐⭐⭐⭐⭐⭐☆☆模型选择灵活性⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐☆☆☆☆版本控制集成⭐⭐⭐☆☆⭐⭐⭐☆☆⭐⭐⭐⭐⭐⭐⭐⭐⭐⭐学习曲线⭐⭐⭐⭐⭐⭐⭐⭐⭐☆⭐⭐☆☆☆⭐⭐⭐⭐☆ 注:⭐⭐⭐⭐⭐ 表示最佳,⭐☆☆☆☆ 表示最差

Xieisabug- 26 Sep, 2024
工具-Zed Workflow
这次测试的是Zed的Workflow,原理其实和Cursor Composer差不多,也就是让大模型对需要修改的文件,按照格式来进行输出,编辑器再解析该格式。不过Cursor对自动化的交互做的好很多,不仅自动获取了需要修改的文件,还自动触发了修改动作,Zed的Workflow就是缺少了这两步。先看我的使用流程: 我的使用如下图:Prompt如下: 我希望bang-list这个提示是展示在我输入框的下方,并且能够跟随我的光标位置移动的。 而且当bang-list出现的时候,我是可以上下进行bang选择的,选择完成之后,bang会自动填充到我的输入框中,并且bang-list会消失。 我输入的!删除的时候,或者输入的!后面不匹配任何bang,bang-list也会消失。可以看到Zed AI是需要你自己去指定文件的,比Copilot和Cursor都要差一些。 AI的回复如下,会分步骤将实现需求所需要修改的代码展示出来,并且有Transform操作直接将修改映射到对应的代码处。但实测该能力对大模型要求比较高,deepseek能够胜任代码编写工作但是无法保证格式每次都正确,4o和Sonnet 3.5是没有问题的。点击Transform之后就像下图一样,会在对应文件修改代码并且展示diff view。如下图是我使用Deepseek(忽略右上角的gpt4o,那是我覆写的model name)进行Transform出现的错误,多了个{{REWRITTEN_CODE}}。评价 工程能力部分 工程能力很弱,定位和Zed本身的情况差不多,是一个简单但是快速的工具。基本上是对某些特定的格式进行了界面渲染,提供了快捷的按钮来触发修改,其他的和别的自动编码工具几乎没有可比性。 对于我个人来说,我使用工具是想快速解决问题,当然是用起来越简单越好,本身这个工具对我来说不具有“把玩”的属性。 代码完成部分 Zed的Workflow能使用任何模型,但是像我上面说的那样,模型必须有比较高的能力才能遵循格式,我使用的Deepseek在代码很多的时候,会出现不够遵循格式导致Workflow无法使用的情况。一方面是Deepseek模型的能力问题,另外Workflow要求的格式可能过于复杂了,有各种xml标签和代码块混合。 UI UX部分 和普通的Zed AI使用方式几乎一样,也就是多了一个Transform的按钮来自动修改代码,不能说它没做交互,只能说和自己的编辑器一脉相承的简洁。 总结 可用性差强人意,在特殊的场景下可能有用武之地,不过我应该还是会选择不使用这个Workflow。

Xieisabug- 26 Sep, 2024
工具-Aider
写在最前:我个人更偏爱实用主义,对于界面啥的要求很低(绝对不是给我自己界面丑开脱!),所以Aider没有界面在我看来绝对不是减分项,但是肯定会有人觉得这是很重要的事情,所以如果介意这一点的可以在心里先给这个项目减分。用Aider的需求是紧接着之前新增的bang命令,我准备在前端界面上进行一点预览,比如!current_date这个bang应该在前端界面上能预览到日期,并且每分钟都检查是否到了新的日期等等;获取选中文本需要和Rust配合,在Rust获取到文本之后再想办法传递到前端展示。 如何安装可以直接去官网查下,我不介绍了,先介绍下我是如何使用的,首先先搞 .aider.conf.yml ,持久化配置,不然每次启动Aider都要搞很多命令,我改的一般是下面几个配置: # 不进行自动提交 auto-commits: false # 用deepseek模型提供商 deepseek: true # 使用read-only这个文件 read: [CONVENTIONS.md]这次的测试是用的Deepseek来进行的,因为价格更便宜而且Rust方面Deepseek写的更好,配置完key就可以直接运行Aider: export DEEPSEEK_API_KEY= aider接下来就是提需求了,使用了这么多自动写代码的产品之后,我目前摸索出了一些心得,那就是自己要把需求搞清楚之后拆分成简单的小任务,我的最终效果是这样,几个特殊的bang命令在界面上带有动态的预览:Aider虽然是支持自动找到需要修改的文件,和Composer、Copilot一样,不过最好还是自己添加下文件更加准确。我的第一个任务直接给的是界面相关的,并且手动添加了相关的前端文件: 我希望给bang功能的 !s !cd !ct 增加预览,展示对应的内容,其中 !s 是由props传递进来 Deepseek没有正确理解这几个bang的意思,只是加了预览,但是没有实时更新日期和时间的预览值,于是我继续提修改要求(使用Sonnet3.5估计就没这种问题了): `!cd` 和 `!ct` 的值不用传递进来,直接在这个界面初始化,并且让currentTime应该每秒更新一次,currentDate每分钟更新一次这次就直接修改成我想要的样子了,然后继续修改样式,让界面美观: 添加 `preview` class的样式,使这个预览的文字看起来更有预览的感觉,和实际的命令描述文本区分开 ,`!s`的preview如果发现selectedText没有内容,则不展示对应的preview部分,并且给preview设置最大宽度100px,超过的文本用省略展示期间Deepseek没有遵循Aider的指令格式,Aider会自动让Deepseek重新编写一次,然后就正确了,这个体验不错,不需要我去干预。 接下来要修改Rust: udpate system_api.rs:新增一个tauri command,返回当前context里面的selected_text 后续还有一些聊天我就不赘述了,总共从启动Aider到测试完commit,大概花了30分钟不到,如果是我自己来写,估计时间差不多,但是这30分钟我除了提需求和测试之外,大概有一半时间我是在干别的事情,也就是说我自己花的时间大概是10-15分钟,体验还是不错的。 附:Aider会自动寻找需要加到上下文的文件,示例如下 我想要在输入bang的时候,比如!出现banglist提示面板之后,我还可以继续输入用于过滤bang command,直到输入的值无法匹配任何bang command才让banglist面板消失评价 工程能力部分 Aider是我目前使用到的工程最强的自动编码产品。 强大的自检能力(升级、检索可用的key、确保项目有git等等)、自纠错能力(代码运行或者测试报错了会自动询问你是否要修复,也可以使用--yes让Aider永远自动运行不需要确认)、运行命令和读取错误能力(能够在写完代码之后自动运行测试用例,并且确保测试用例全部通过)、与terminal的结合完成度等,都让我觉得用着很舒心,不像是那种摇摇欲坠的半成品,写出来的代码因为纠错能力和运行命令来跑测试用例,所以相同模型下完成需求的能力比别的产品都要高,这属于对模型能力的增强而不是利用了。 如果对没有界面而介意的同学可以试试看浏览器模式,不过我个人对他们和终端的结合程度已经非常满足了,单独为Aider开一个终端之后,几乎就相当于在IDE里集成了一个界面,而且也更少的使用到鼠标,让编码过程(不过好像也没多少编码过程了)更加的集中注意力。 如果有心仪的IDE,比如VSCode或者JB家的,但是又没有心仪的自动编码产品,可以试试看Aider。 代码完成部分 Aider可以使用任何模型,而且对新提供商和模型的支持还挺快的。 我使用的Deepseek,是Aider leaderboard上最便宜但是效果又在前列的模型(缺点嘛就是慢)。有钱或者有低价渠道的可以试试sonnet3.5和4o甚至是o1 preview,效果应该是比Deepseek要更好的。Aider在编写完代码之后会直接应用到代码文件中,这也是为什么Aider一定要你使用git的原因,不然你不知道它改了哪里(而且Aider默认是修改完代码就commit的,如果介意要配置下不要自动提交)。 UI UX部分 见仁见智,我个人还对这个交互比较满意,并且Aider也提供了一些配置来设置终端中的展示效果。 不过有珠玉在前,和Cursor比肯定是不足的,能与原生IDE结合会让交互好很多,看Aider官方的意思是准备让社区发力,自己不会下场做。目前社区也做了点插件,我就没体验了。 总结 Aider是我心目中那种“水涨船高”的项目,随着大模型能力的提高,Aider能做到的东西也越来越多,大模型不管是智力、上下文、速度或者别的方面哪一项的提升,对于Aider本身来说都是增强。期待社区以后发力做出更好的编辑器插件吧。我的这个开源项目说不定也会以某种方式接入Aider。
Weekly-04
上周中秋,懒得去动笔写周报了,两周合一起算了。 工作 这周基本是在研究Caddy和Ja4相关的内容,然后就是把手上的运维的活交给真正的运维兄弟。 腾出手来干自己的事的感觉还是很爽的,虽然现在手上还是有产品经理的活,不过技术驱动的公司做产品经理倒是不那么难受,最终打交道的还是系统和技术。 还给公司出了两套结合AI的方案并在AI的加持下快速完成了两个Demo,其实和微软之前公布的Security Copilot差不多,只不过结合的是我们公司自己的安全防护场景,希望能够在客户那边通过,然后就能在工作中落地一下AI了。对于AI的infra和工程方面,我还是很感兴趣,可惜这些都是需要大量金钱和精力的,个人来做没什么机会了。 学习 从Follow这个产品看到了营销的力量,倒不是说Follow只有营销,它这个产品本身就特别强,但是强的产品也有很多是淹没在大海中的。而Follow应该是从发布的前两三天,就开始病毒式传播,算是营销中典型的成功案例了。并且这个APP对于Web3的应用也是我见过最合理的,不仅可以用于兑换非常受欢迎的邀请码,还可以用于打赏订阅的博客作者。 从Follow这个APP本身来看,确实把RSS玩出了新活,从Feedly转过来之后日常的使用完全不受影响并且还带来了很多不错的功能。现在还在使用,不过已经受到了很多的启发。 我的AI客户端项目开源了:https://github.com/xieisabug/tea 目前的完成度按照我的设想来说应该半成品都不算,只是一个简陋的聊天客户端,之所以现在就开源,是因为我感觉自己已经开始懈怠了,没有最初6点起床干代码的冲劲了。Build In Public应该要附带一些推进作用,不停地推着我向前走。 这两周还体验了几个用于“替代”程序员的工具,目前来说使用的感受并不好,我也马上就会编写对应的评测文章出来。 生活 之前无聊随便点了个小游戏,小游戏也挺无聊的,但是小游戏可以通过看广告来领取奖励。没想到广告是一部网文小说,一不注意就中招了被控住了,看了1000章了已经,防不胜防啊。 中秋假期+上三休二,这段日子过得很舒服,希望以后能够有更多这样的日子哈哈哈哈哈。

Xieisabug- 23 Sep, 2024
工具-Copilot Workspace
不久前获取了Copilot Workspace的权限,一直没时间做测试,最近写了一个大模型工具客户端,刚好用这个开源项目来做下实验。 可以通过Github上的Issue触发(AI自动改简单的bug和完成简单的需求现在就实现了?),也可以直接在网页里提自己的需求来触发。是的,看到这里你应该发现了,这个Workspace目前是无法直接在IDE里使用的。最近出了一个VsCode插件(2024.09.21 目前需要自己去下载vscode 插件文件安装),但是这个插件只能做到帮忙同步修改到vscode中。 先介绍下流程吧,同样是之前测试Cursor Composer的那个需求(它没能完成),我直接通过Github Issue触发的: https://github.com/xieisabug/tea/issues/2点击了之后就自动进行分析,会列出它对需求或者bug的分析和解决方案。分析和方案都可以手动增删改,而且可以点击上面那个聊天的窗口对代码的情况进行自然语言描述,Workspace会根据描述再次改进之后,生成分析和解决方案。确认好分析之后,会根据分析来生成实现代码的计划,按照文件来列出所有计划,这个计划也是能自己进行增删改的。再之后就直接确认开始修改代码了。 评价 工程能力部分 体验上来说比Composer要强上一些,毕竟编写代码是需要一定时间的,所以在我确认了你要如何修改之后,再去编写代码,我觉得这是能节省我大量时间的。 而且寻找需要修改的文件比Composer的能力要强很多,应该也是在代码搜索方面下了很多功夫的,这次测试中,能准确找到我的rust文件和前端文件,但是同样找不到我的测试文件,好在我可以轻松的在Plan里自己加上这个文件。 不过同样是写错的代码就直接错了,还是需要自己去调试的,好在有一个vscode插件能够同步修改到vscode里调试,之前没有这个插件的时候,只能在网页上人肉看,看完了提交然后再到vscode拉取到本地去修改。 代码完成部分 Copilot Workspace只能用默认的模型,也就是gpt 4o,之后可能会加上o1家族。 使用了gpt 4o可能要作为减分项了,gpt 4o写代码完全不如sonnet 3.5,并且会犯Copilot也犯的错误,比如下图: ![[Pasted image 20240922164323.png]] 喜欢去掉别人的括号或者分号,很是蛋疼。 UI UX部分 本来属于加分项,个人的体验感受是比Composer要强上不少的,直观、灵活,但是只能在网页上用而且只能用于Github项目,这应该就劝退了很多用户使用了。 希望之后Composer或者别的项目能够参考Workspace项目的界面交互。 总结 如果Openai未来的模型代码能力提升上来,或者把o1接入进来,未来比Composer可期。
Xieisabug- 23 Sep, 2024
工具-Cursor Composer
我在我的开源项目上正式使用了一下Cursor Composer,这是一个相对来说中型的客户端项目,用这个项目来做测试有两个目的:一是我不想测试从零开始搞个网站或者开发个小工具的场景,那在我的日常场景中占比太小了,没有参考价值;二是我的项目刚好还有很多需要做的新需求,这些需求足够清晰且难度大于单独写一个网页。 使用的需求场景是这个Issue:https://github.com/xieisabug/tea/issues/2 输入到Composer的Prompt就是Issue的描述: 当前的bang操作有: !s、!selected_text 获取打开快速聊天窗口之前选中的文字(暂时不太好用,需要优化) !sub_start([text],[length]) 从开始截取[text]文字[length]长度 !ct、!current_time 获取当前的时间 !cd、!current_date 获取当前的日期计划增加: !sc、!screen 获取打开快速聊天窗口之前的屏幕截图 !w([url])、!web([url]) 获取对应[url]的网页 !wm([url])、!web_to_markdown([url]) 获取对应[url]的网页并且转换为markdown在 快速聊天窗口 或者 完整聊天窗口的新对话界面 中展示部分bang的预览内容 在输入框中敲击!时出现bang列表用于选择评价 工程能力部分 能够在我仅给出需求的情况下,准确的找到了之前编写bang的rust代码文件,属于加分项。但它并没有对我的前端文件进行更改(rust和前端都在这一个项目里),因为我的描述其实明确提到了需要修改界面。 并且它没有帮我创建对应的测试用例来检测该bang的实现,我是有专门针对bang的测试文件的,如果能力强一点肯定是能发现需要编写测试用例的,不过在我要求创建测试用例的时候,它还是能准确的找到之前编写测试用例的文件并且完成测试用例编写。 代码完成部分 此次测试使用Sonnet3.5加持。 正确按照我之前的编写模式创建了我需要增加的6个bang命令,且实现了获取网页内容和获取网页内容并且转markdown这两个功能的内容。 但是,实现的部分功能不可用甚至报错,当然这不是Composer的问题,这是大模型的问题。但它没有将大模型出现的非前端问题解决掉,而是留在了那里。 UI UX部分 都说Composer交互是最好的,个人觉得还不是最完美的方案,对话界面和功能较为割裂,我觉得可能会有更好的展示方式来对每次对话产生的影响进行展示,比如每次修改产生的影响都和对话做一个能够对印上的交互。 并且不知道是不是我使用的bug,我过去使用的Composer记录找不到,个人觉得查看过去的Composer然后继续改还挺重要的。 不过能够直接在编辑器里选择每一项更改是否生效,这个交互还是比较爽,不过我想这个操作是否有必要,在不久的将来,肯定是无需人去干预这个交互的,而且如果有git之类的版本控制,基本的IDE都能看到修改对比的。不想修改这个不分直接撤回就行了。 总结 和我之前Cursor的评测结论差不多,干简单的事情太麻烦,干麻烦的事情干不成,未来可期。

Xieisabug- 21 Sep, 2024
大模型-用Deepseek翻译时带给我的欢乐时刻
文章全部是我在使用沉浸式翻译+deepseek的时候发现的欢乐时刻,翻译的全都很传神。 不香吗?我他妈高兴坏了啊对对对YYDS我们程序员就是这么说话的真是!以上均是使用沉浸式翻译自带的AI专家 Twitter翻译增强器:
Weekly-03
工作 工作中需要把tls的一些特性相关内容实现到caddy中,找到了一个很完美的库,但是适配的是gin,我需要把这个项目改为caddy plugin。突发奇想使用AI来帮我干,毕竟不是什么特别需要技术的活,只要懂caddy plugin和gin,然后再把这个库的代码当做上下文去适配修改就行了。如果是我来做,起码要去学习gin的一些基本原理和caddy plugin的写法,然后再把这个库读一遍之后重写,这都是很费时间的事情,交给AI来做简直就是完美方案。 不过现实很骨感,尝试了Cursor(Sonnet3.5)、Zed AI(Sonnet3.5)、Aider(Deepseek Coder)、Kagi Assistant(Sonnet3.5、GPT4o、Gemini)之后,耗费了我一个下午时间,完全无法获取可用的代码,并且因为我自己不懂Caddy pugin和gin,我也无法教AI如何去修改这些代码。 事实证明,如果是要使用AI,自己是需要懂相关的东西的,我也不太明白社交网络里宣传的“零基础用AI开发一个应用”是如何做到的,很多情况下没有编程基础的人要写一个应用都无法跑的起来,开发环境都没法靠AI教学安装。如果是有很基础的编程基础,倒是可以通过AI来帮助开发一个比自身水平稍高的应用。没办法,这个Caddy plugin只能够我自己去学了。 学习 承接工作的内容,我获得了Github Copilot Workspace的体验权限,最近应该会体验下。这是个比Cursor更早的带多文件编辑能力的AI编程环境,可惜的是这是GPT4o驱动的,不过由Github Copilot团队打造的,应该能力还是在线,估计不用多久我会出一个评测。 Side Project动的也少了,目前基础做完了,开始设计核心插件系统了,我的设计思路是提供一系列非常方便的接口,让用户可以方便的使用到AI的能力。第一阶段是做好基础能力,也就是我现在做的能够对接所有的大模型,并且完成日常聊天要做的事情;第二阶段是做好二开的能力,我先用这个框架提供的能力来做一些实用工具,并且这些能力想要二次开发的人自己也可以调用;第三阶段是AI使用这些能力的能力,也就是我想要什么工具,描述给AI,AI帮我调用这些能力并且编写好对应的插件。 目前还是在第一阶段的尾声,开发完应该就会正式开源了。 看了一篇文章有点意思,大意是讲一种新的提供给大模型的robot.txt叫做llm.txt,用markdown这种大模型更易懂且简洁的语言来描述网站的情况和地图,让大模型能够用最少的token和最快的速度对网站有了解。 这让我想到了之前听AI炼金术播客中提到的AI时代的新想法,以前只有调色师通过基本的三原色调出来各种不同的颜色,后来有了RGB之后能通过修改数字来获取到新的颜色;再到最近AI能够生成音乐了,那乐器所产生的声音也可以用数字量化,这样就能找到除了物理世界能产生的声音之外更多的声音;再到未来AI能够把想法量化,在想法和想法之间,通过不同的参数能过获取到不一样的想法。 AI时代的东西,可以参照以前时代的东西进化出无数新东西。 生活 周末去乡下住了两天,带娃在外公外婆家过生日,给我最大的感受是在乡下时间变长了。早上看完了新闻,吃完早饭,还和娃玩了很久,一看表才9点,平时这个点刚到公司;晚上吃完饭在外面溜达一圈,回到家又陪娃玩了一会,一看表才7点,平时还没到家。 在长沙的生活感觉非常紧凑,早上急急忙忙还担心会迟到,陪娃的时间也很少。但到了乡下,事情其实也没少做,娃也没少陪,时间就是感觉很长,我也不知道是什么原理,但是觉得这肯定是我不工作之后的第一选择,感觉这样生命都更长了点呢。 减肥搁置了很久,好在没有反弹太多,以后不写减肥计划了,都写在周报里吧。
Weekly-02
工作 周一到周四都请假了在家带娃,不过抽了些碎片时间整理了一些资料,在周五回到公司的时候仔细研究了下,应该是可以集成到产品中的。也就是Cloudflare和Akamai用的TLS指纹,可以作为安全请求判断的一个依据。 不过周五还是被公司琐事折磨了大半天,报销、社保登记、缴费等等,终于理解为什么有的老板要招一个专门人事来搞这些事情了,确实是不难,就是事情多又繁琐,工作量有不少而且还要集中注意力,不然搞错了影响还挺大的。 为啥没有AI来做这方面的东西呢? 新招了一个运维,准备将云服务的一些内容交给他来做,比如域名映射、域名证书、服务器的日常运维等,这些运维琐事也占据了我之前工作的小部分时间,主要是会打断原有的工作流。 学习 Tea这个项目新增了读文件的能力,并且我不想把文件内容用embedding存起来然后检索,我希望是直接放到context里。这就涉及到了一个问题,虽然我是把文件直接放在了Prompt的context里,但是展示在界面的时候不能够直接把整个文件的内容输出出来,而是应该展示一个文件图标。这涉及到了markdown库里的react组件映射,之前用的react-markdown,然后发现他在解析自定义组件的tag的时候会有一些bug,我4个文件tag总会被解析为1个,感觉使用了贪婪解析,所以替换了一波markdown库。这又出了一个新问题,当markdown code block里包含了别的code block的情况下(比如写了个html的code block里面有教学如何编写markdown code block),不使用贪婪解析就会被内容里的code block语法影响从而截断,目前还没想到如何做。 生活 家人检查完出院了,没啥大毛病,就是血脂高了点,以后饮食注意,多运动吧。 很久没做饭了,这周突然做饭的时候感觉厨艺明显退步,切牛肉片一点都不均匀了。好在第二道菜的时候就找回了80%的实力,那顿饭还算是成功。然后后面就慢慢好起来了,时不时还是应该要做做饭,每天做饭可能会很累,时不时做一顿就变成享受了。 终于在周六下午我找到时间打了4个小时黑猴,打完了第一章(其实还有boss没找到),故事讲的真不错啊,金池长老的故事让人唏嘘。 这周水一周吧,因为请假在家带娃所以确实没啥内容。
Xieisabug- 01 Sep, 2024
VS Code Copilot、Zed AI、Cursor 对比
背景 我决定评测这三个产品的原因是,我日常都是使用的VS Code Copilot,很久以前尝试过Cursor感觉不理想,但是最近国外都很推崇Cursor,就有点想尝试一下,恰好之前一直关注的Zed也推出了自己的AI功能,所以干脆集中一起使用对比下。 选手简介VS Code Copilot:算是“老牌”编程助手了,虽然Copilot在别的编辑器上也有扩展,不过体验最好的还是VS Code,毕竟都是微软家的所以功能集成更好一些;主要提供的是Complete和Chat能力,也就是代码补全和聊天。Zed AI:Atom的作者开的新坑,还是一个非常年轻的编辑器,以快著称;原本不提供AI能力,后来支持了Copilot(对,就是Github Copolit),近几天出的Zed AI支持Chat。Cursor:基于VS Code的开源代码来进行的二次开发,没有像Copilot一样作为VS Code的插件来编写,据作者说这是为了实现 VS Code 现有架构无法实现的理想交互方式;提供了Cursor Tab(原Cursor++)和Chat,其实也是代码补全和聊天,还有个“杀手锏”功能Composer。对比维度 我会针对下面几个维度,分享我自己的使用体验:IDE本身AI价格潜力详细对比 IDE本身VS Code:非常丰富的插件,插件多到可以直接配置出一个强大的IDE,但这样也就会拖慢VS Code的速度;最初使用VS Code是因为有些项目不是很重,使用的Go、Python、Nodejs等,开一个JB家的IDE犯不着,并且我很喜欢VS Code的Remote dev container,在我的M芯片上简直救我的命(很多库没arm版本);由于免费且用户数量巨大,所以社区异常活跃,我还没有碰到找不到解决方案的情况。Zed:刚打开这个IDE应该会懵逼一会,界面非常简单,简单的和Sublime一样,基本没有个IDE的样子,只能算作Editor,和使用下来的体验和第一印象基本一致,缺少了很多开发过程需要的功能,不过对于习惯使用Sublime或者Vim的用户来说,可能会习惯的比较快,我已经将一个Side Project的主力IDE切换为了Zed;快一直是Zed宣传的强项,我当时嘲笑了它,我为啥会需要120fps的切换tab?不过我还是被打脸了,用起来会发现它是真快,而且“快”对写代码是真的有加持(?我也说不清是为什么)。Cursor:由于Cursor依托于VS Code,基本和VS Code的情况一模一样,相对于Zed,它能支持VS Code的庞大插件群。**完善程度:Cursor > VS Code > Zed **使用感受:每个产品都有其独特的优势,但需要注意的是,Zed目前没有推出Windows版本。 AI 首先介绍大家相同的能力,基本都会提供代码补全和Chat的能力。 代码补全 其中Zed是借助的Copilot提供的代码补全,但要说一句的是它的代码补全比VS Code要快;而Cursor的代码补全体验是最好的,不仅快,而且时常会出现连续补全的情况,这个时候你只要不停地按Tab键,AI会猜测你后边的代码编写和修改,一并提示补全,值得注意的是“修改”代码补全是Cursor才有的能力,只要Cursor触发这个连续Tab,没有人会不喜欢Cursor了。 Cursor > Zed > Copilot Chat 三个软件都具有与当前代码上下文聊天的能力,其中Copilot和Cursor都对代码有embedding,可以自动调取上下文,Zed AI我目前没有看到有自动调取上下文的功能,上下文自动调取效果最好的我感觉是Copilot,能够非常精准的定位到我提问相关的代码,并且Copilot和Cursor都具有Apply的能力,也就是在Chat中的代码块能够自动以diff的方式映射到代码中,而Zed需要使用目前还在Beta的Workflow才能够触发Apply,普通的代码块无法直接Apply,但Zed有一个特别的能力,那就是Chat的内容允许随意修改,这个能力要结合Zed的别的能力来用,效果会非常好。 不分胜负 Inline Assitant 也是三个软件都有的能力,Cursor和Copilot的体验差不多,但Zed AI是在这个能力上发力了的,他的Inline Assistant是会带上Chat中的上下文的,这也是Zed AI演示的能力,可以在Chat中与AI进行多轮沟通之后,在工作区用Inline Assistant进行"应用代码修改",AI会再对应的位置根据之前聊天约定的内容来进行diff模式的代码修改,这期间肯定会携带大量的上下文,Token消耗非常巨大,解决办法就是使用带Cache的AI,比如Deepseek和Claude Sonnet3.5,我强烈建议大家配置个Deepseek,这样就算没触发缓存(第一次肯定无法触发)也不会产生太多的费用(Deepseek充个20人民币能用非常久了),还有一个解决办法就是上面说的编辑Chat内容,把多轮调整的一部分内容删去,或者手动添加一部分外界的内容进来用于Inline Assistant。 Zed AI > Copilot > Cursor 不同点VS Code Copilot:与VS Code进行了深度集成,在Source Control的提交框里都能自动帮你总结代码修改的commit message,并且最近更新了4o之后,Chat飞快。并且Copilot不光是可以在VS Code里用,比如写Java的兄弟们要用IDEA也是可以用Copilot的。Zed AI:Zed AI的理念和另外两个软件都不太一样,所以对比起来很不一样,但是就Workflow这样的能力来看,Zed的上限太高了,而且Chat里面的Slash能力是可以自己扩展的,比如官网示例就编写了一个Perplexity的插件,能够自动通过 /perplexity 来进行搜索并且把内容贴在Chat里当做上下文。Cursor:提供了一个叫Composer的能力。这个能力被很多人称为杀手锏,也就是对整个项目提需求,然后AI会自动对多个文件进行编辑,我使用下来除了很简单的需求,复杂点的需求或者项目,AI完成的都不是很好,但是很简单的需求其实也能直接在Chat里完成了。不过这个能力肯定是随着AI模型的能力而水涨船高的,未来可期。但是Composer的能力其实可以用Aider进行替代。价格VS Code Copilot:Copilot的订阅价格为每月10美元,我目前是用学生包获取了这个的,而且始皇还有override可以替换为自己的模型。Zed AI:目前Zed AI的价格策略尚未明确,但其基础功能是免费的,并且所有的功能都没有限制使用内置AI才能完成,可以自己配置API Key,就算以后收费了也没关系。而且目前免费试用期间,可以白嫖Sonnet 3.5,但是有RPM或者TPM的限制。Cursor:Cursor目前是20美元开Pro,免费只能补全2000次,很快就用完了。Pro包含了无限补全和500次高级模型的调用。最重要的是,Cursor的高级功能比如Apply、Composer等都是需要使用Cursor自己的模型才能够使用的。Zed AI > Copilot > Cursor 潜力VS Code Copilot:作为3位选手中,当前市场最好的编辑器,Copilot只要把自己的体验向Cursor无限靠拢,凭借低价格和多IDE使用,加之没有太多的限制,肯定是能够继续稳坐老大的位置的,至于非常新颖的交互方式,Github也一直在探索,最近出的Copilot Workspace就是其中之一,能够直接在Github的仓库里让AI来完成任务。Zed AI:单论潜力大小,那Zed肯定是进步空间最大的,光是向VS Code看齐就还需要很久了。不过AI方面独特的理念和高扩展性,并且也将大模型Cache利用的很好,用长上下文和大量的Token换取模型的编码准确性和全面性的提升,在我这至少是走的通的。Cursor:Cursor的潜力在于其独特的用户交互设计和Composer功能。Cursor Tab独一档的补全体验和Composer站在大模型智力的肩膀上只会越来越强,而且还有Shadow Workspace这种新颖的点子,以后也是能力非凡的。Cursor > Zed AI > Copilot 优缺点总结VS Code Copilot:优点:功能强大,插件丰富,AI能力出色,社区活跃,多IDE支持,价格相对合理。缺点:插件过多可能影响性能,部分高级功能需要付费。Zed AI:优点:界面简洁,运行速度快,AI理念独特,高扩展性,支持大模型Cache,价格策略灵活。缺点:功能相对较少,部分功能仍在测试阶段,暂无Windows版本。Cursor:优点:独特的用户交互设计,出色的代码补全体验,Composer功能潜力大,支持VS Code插件。缺点:价格较高,高级功能需使用Cursor自有模型,部分复杂需求处理能力有限。总结与建议追求功能全面和成熟稳定的体验,选择 VS Code Copilot。追求简洁快速的开发环境和高扩展性,选择 Zed AI。追求独特交互体验和尝鲜,项目复杂度不高并且不差钱,选择 Cursor。我个人会继续嫖Cursor的试用,然后有些项目会使用Zed AI来进行开发,并且配合Aider这样的项目来补齐Zed AI所缺失的Cursor Composer能力,在Cursor不能试用Pro后我应该也不会续费,目前来说这样的体验不足以让我多花10刀去为了这个补全付费,多出来的10刀购买API后可以在Zed AI和Aider用很久了。 能力/特性VS Code CopilotZed AICursorIDE完善程度最高基础高IDE性能可能因插件过多而变慢最快类似VS Code代码补全良好优秀(借助Copilot,速度快)最佳(快速,连续补全,支持代码修改)Chat优秀(精准上下文定位)良好(可编辑聊天内容)优秀(自动调取上下文)Inline Assistant良好最佳(带上Chat上下文)良好代码应用(Apply)支持需使用Beta版Workflow支持特色功能深度集成VS Code,多IDE支持Workflow,可扩展Slash命令Composer(多文件编辑)插件支持丰富有限支持VS Code插件价格**$10/月未定价,基础功能免费,可自配置API$20/月(Pro版)使用限制较少免费期有RPM/TPM限制免费版补全次数有限潜力稳定发展进步空间大创新交互,依赖模型进步**AI总结的表格