巴黎与旧金山的细微不同
这两个城市其实挺不一样的，直接对比网上有很多，我也提供不了什么新的信息。在巴黎住了快一年了，作为居民有机会感受到一些细微之处，便在此碎碎念一番。...
View ArticleAffirmative Action和阶层固化
最近美国最高法院的一则判决让Affirmative Action一下子成为了众矢之的。我不知道是不是圈子有限的缘故，我一时之间看到的竟然全都是一片对于禁止AA的叫好之声，让我不禁怀疑这里面多少只是情绪的宣泄而不是理性的思考。那我就来捅捅这个马蜂窝，讲一些自己的看法。...
View Article[新坑]通用人工智能
为了写下这个标题，我打字都要抖一抖。Artificial General Intelligence 这一年被炒的太火热了，我好像一个迟到的来蹭流量的似的。硅谷每几年都会有新的一波热点，追热点死得很惨的人一片片，我还是多少费了一番功夫，才觉得这不是又一个转瞬即逝的热点，而是一波新的技术革命的开端。...
View Article大语言模型LLM的基本逻辑
上一篇说到我准备入个坑，结果就是最近埋头苦苦补习最基本的一些知识。随便写点东西梳理一下思路吧，这样万一我真的开始做点什么也算是一个基本素材。一些英文的名词我就不翻译了，反正现在大家英语都挺好的。 先来一些可以基本望文生义的名词解释。LLM=large language model = 大语言模型。这简直是个不能再俗的名字了。GPT = generative pre-trained...
View Article吾日三省吾身
逆水行舟，不进则退。每一次偷懒的后果都会反噬自己。透过现象看本质。热点永远层出不穷，不能以有限的精力来应对无限的新闻。但也不能两耳不闻窗外事，否则换了人间都不知。用进废退。记忆是有限的，不可能面面俱到。 ——- 舒适圈还是躺太久了，忘了外面的血腥残酷。
View ArticleClik here to view.
小试自定义GPT
最近不是在折腾LLM嘛，于是就试了两条路子：用openai的api，以及直接在openai的界面里面创建GPT。 前者没啥特别的，chatgpt的api做的很成熟了，from openai import OpenAI 之后直接在python里面调用几个现成的函数就好了。可选的参数其实也不多，主要就是prompt写的好一点就行。我的要求也不高，试了试基本满足。此外我还用到了微软 azure...
View Article城市，语言与印记
我看的电影电视剧不怎么多， 自我归因是我的情感其实很丰富，容易入戏太深。偶尔沉浸一两次无妨，天天沉浸这就要命了。情感丰富的体现之一就是代入感，容易把自己带入到戏中人物的情感波折之中。若对方所处的情景、地方或文化又是我略知一二的，那就更要命了，会让我不自主地联想起来很多前尘往事。...
View Article被归纳迭代统治的世界
在这个AI快速改变世界的时代，园主已经从一开始被GPT表现出来的潜在智力的震撼，到现在对于层出不穷的图像视频音频AI工具有点审美疲劳了。去年的时候和朋友们感慨，在归纳和演绎之间，这个阶段归纳的力量远远超越了演绎。算力的突破仿佛像《三体》中描述的突破智子封锁一样，让可以被计算改进的模型都深深享受着巨量数据带来的断层优势，层出不穷地展现着未来的可能性。...
View Article加州的农场主
搬到新家之后发现楼下居然每周六早晨都有农贸市场（farmer's market），有点像国内赶集的样子，很多农夫们会亲自来卖他们自己种的新鲜蔬菜水果什么的。 美国在超市买的很多水果蔬菜其实是没有味道的，比如番茄和草莓，因为商业社会最关心的是好运输，其次才是品相味道等。就算是去whole foods花高价买水果，也免不了偶尔踩雷。...
View Article