Maerd's recent timeline updates
Maerd

Maerd

V2EX member #633209, joined on 2023-06-09 11:25:45 +08:00
Per Maerd's settings, the topics list is hidden
Deals info, including closed deals, is not hidden
Maerd's recent replies
@Chihaya0824 8 张 h20 其实是不够的,只能说能跑,只支持 1 份 300k 上下文的 kvcache ,也就是说只能用来对话,如果是 agent 执行,相当于子 agent 是无缓存工作的,我试了以后很蛋疼
我用了 16 张 h20 才部署起来,而且上下文基本上是残的,kvcache 命中率感人
2 days ago
Replied to a topic by matters Python Python WebSocket 长连接到底怎么写才稳?
socket.io 不是就解决了吗,怎么现在还会有人用裸 ws
@q307990588 我是指网站风格,我自己写公司的前端项目,经常会生出非常 tailwind 或者 shadcn 风格的组件,大规模的卡片控件这种
这个怎么喂给 ai 提示词呢?我自己做的前端应用经常有股 ai 味
1.还是靠多写,多看文章,把 ai 当十万个为什么
2.拥抱云原生,云原生时代一定可以不会 k8s 、数据库调优,但是一定要知道那些云原生产品怎么用(比如阿里云的 acr/ack 这些,ci/cd 这些)
3.你如果是从头开始学习后端,现在是个很好的时候,因为你可以没有技术包袱地尽量使用新的技术,不要再使用老掉牙的 mysql5 这类的东西,直接换 pgsql 。另外我还看到你有用 django ,如果你使用 django 的话,也不要再用 django-drf 了,直接使用 django-ninja 这些现代化的库
4.尽量选择生产可用,更新频繁,用户社群大的库,有时候你的需求可能别人已经造过轮子了,在实现需求前一定要先问一下 ai 有没有现成可用的库,直接调第三方库比自己实现/ai 实现要稳定可靠的多
5.测试用例很重要,ai 时代尽量转到测试驱动开发
简直慢到没朋友啊
lz 私一下?
不用 vscode 的? copilot 都集成两年了,现在都支持 mcp agent 了
Feb 8, 2025
Replied to a topic by bwijn Python scrapy 的 item 队列把内存挤爆
pipeline 处理 item 比抓取还慢?那要考虑你的储存架构设计方式了,自己存东西怎么会比爬慢

如果暂时无法解决,将 item 队列从内存队列换为磁盘队列即可,这样会 spider 在 yield item 的时候,item 会被先序列化到磁盘上,就不占用内存了

还有楼上说的 io 和计算没分离纯属没怎么用过 scrapy
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3131 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 16ms · UTC 12:52 · PVG 20:52 · LAX 05:52 · JFK 08:52
♥ Do have faith in what you're doing.