秋招心得
最近在投简历,两周的时间过去了,还没有接到一个面试。俗话说男怕入错行,总是想进入一个在上升期的行业,所以优柔寡断,经历也不够垂直,是个减分项。最近思考了很多,索性梳理一些心得,谈谈看法。
边缘AI
现在分析行业发展总是绕不开AI,今天看到数学领域的大牛谈对AI的悲观看法,都说“下岗”的风从计算机吹到了数学,数学证明重视过程,AI会让人类数学断层云云。数学和计算机都是能被编码,高度抽象的概念,所以被AI轻易的攻破了。本科的时候从电子拼命的转计算机,想进大厂赚大钱,研究生阶段又刻意的从软件向硬件转,寻找AI无法触及的领域。但是AI发展的太快了,快的我感觉即使逃到天涯海角,总有一天他也会把我的专业颠覆。
既然打不过就加入,能不能乘着AI发展的东风,找找合适的行业呢?我的学历还不够去做AGI,所以就考虑边缘智能,AI硬件这种岗位。目前大模型的发展吞噬每年增长的那些可怜的算力,边缘侧的算力却随着工业发展而逐渐富裕,路越走越宽了说是。感谢我的导师,项目上使用了RK3568,让我有一个学习的平台。不过边缘AI的算力太低,项目库里都是yolo之类的东西,和我四年前的本科毕设有一拼,准确率太低。
进一步,我就在想,边缘AI到底能做什么?都说边缘的场景是隐私,实际上但凡有点规模的使用,都会去部署一个算力中心。没人会在自己电脑上部署一个LLM用。所以边缘AI的优势应该在于高实时性,低功耗。
所以使用场景呼之欲出了:自动驾驶、无人机、机器人、AGV、可穿戴设备等等。所以最近也在主要投这些岗位,顺便复习一下cpp,看看最近能不能开发一些小的具身智能项目。想睡觉就来枕头,我正准备筹划做一个机器人的时候 microduck 发售了。他采用 rk3566,是一个适合学习强化学习的具身智能平台,但他的舵机实在是太贵了,如果改用宇树的s288,15个舵机成本就3000块,我个人实在是承受不住。还是再等等国产的低配复刻吧。
桌面机器人
抛开duck, 我之前简单规划了一下桌面机器人的功能,比如说当我坐到工位上,和我打个招呼。简单熟悉一下端侧AI开发流程,好和HR猛猛吹。技术上其实不复杂,yolo识别一下person,调用一下远程llm,返回一个打招呼的message,再用tts转换成成说话。
进一步我开始思考桌面机器人还能做什么好玩的事情,开始思考架构。端侧能接收到的信息可以是无穷无尽,视觉、语言、动作,但把这些信息全部交给大模型去处理,成本有些太高了。而1 tops NPU的算力也不支持VLA模型。所以端侧的定位应该是智能传感器,关键事件上报,然后由大模型处理,决定下一步操作。端侧串行跑各种小模型:人形识别、人脸识别、tts、运动控制等。这样可以进一步拓展机器人的功能,我觉得将会是个很有趣的项目。后面规划好技术栈后立刻开始开发。
AI与个人职业规划
看deepseek大佬也在苦恼有一天被AI替代,数学家们联手提出倡议等等,我觉得自己的职业规划也要和AI的发展挂上勾了。前面简单分析过行业的走向,接下来我想谈谈对于个人职业规划的走向。
我从小物理学的特别好,我感觉我有非常强的物理直觉,比如篮球撞到篮板,我很喜欢预测接下来的轨迹。这在我后来学电子时有很大帮助。我喜欢画PCB,我很喜欢把线排来排去,排的很有美感。当板子烧了之后,我也喜欢对着电路图一点点排查。后面做视觉也是如此,我很容易的建立图像的特征。但是这些物理直觉也好,工程经验也好,在AI到来之后都显得不值一提。虽然AI目前更擅长逻辑推理,但从我用AI这么久之后感觉,我的直觉是在退化的。在学习新知识的时候,AI是把东西掰开了喂给我的。有点像数学家们说:“AI做数学,中间的证明过程都断掉了,只产出结果的话,人类的数学水平会退化”这种感觉。比如说以前做智能车的时候,脑子里会有一个小车不停的跑,在脑子里模拟可能出现的问题。但是现在不需要了,出现问题只需要去问万能的AI就好了。我觉得这是最恐怖的事情,在退化我的直觉,然后让我放弃思考,我都不敢想未来的孩子的怎么面对AI无法解决的问题。
我一直在研究怎么去做人在回路的工程模式。像以前用网页端的时候感觉学的最多,只要复制代码就好,剩下的运行调试都要做,反而很充实。现在AI包了开发调试和测试,只优化提示词做项目计划,然后专注于交付结果就可以了。我感觉就像灭霸手套一样,操控本不属于我的力量,而且这个手套现在还不咋便宜…现在呢留了个心眼,用git标识每次改了什么,我回去审代码,看不懂的时候问两嘴。但是还是差的远,现在的AI往往自己修改好了然后不告诉理由,你追问他为什么改这改那,他就又闷头干,然后说按我的意思改回去了,我也不爽他也不爽。而且这种模式有知识滑过大脑的感觉,像小时候听完老师讲课不做题一样,学霸可能记得住,我却完全不懂。所以最佳的应该还是网页版AI,老师先讲课然后给了例题,我那去做例题然后反馈,这是一个符合应试教育的思维方式(大概)。
其次我感觉有点ADHD才能玩的转AI。像写文章的我的大脑可以发挥强大的单核能力,思维如流水般倾泻,这种感觉不要太爽。但是用AI不一样,他帮我想,这个流就断了。我作为一个能工智人,我也要反复的载入上下文,这个载入的消耗并不低。比如我让AI指出论文问题,他不按行文顺序,不按逻辑顺序,他按严重程度。行,,人之常情,然后我就要开始一条一条修改,东跳一下西跳一下,注意力很快就打乱了。我非常讨厌重新载入上下文,每次都要刷个五分钟(半小时)抖音平复一下心情,所以这效率可想而知。其次AI做复杂项目时往往回复很慢,我不可能一直刷手机等他。当我一边跑实验一边改论文时,实验半小时一小时的出一次结果,我就要重新在脑子里切来切去的,一会看实验结果一会写论文,这太反直觉了…