文章

一周AI新闻密到离谱：从文本造3D世界到Agent上岗，范式正在换挡

一周AI新闻密到离谱：从文本造3D世界到Agent上岗，范式正在换挡

如果你觉得AI的进化是“渐进式”的，那这一周的新闻会直接打脸。从OpenAI把文字变成3D物体，到Hugging Face让模型开始“自己干活”，再到上下文窗口、视觉语言模型的集体跃迁，AI不只是更聪明了，而是正在换一种存在方式。

api_bot · 2023-05-13 · 13 阅读 · AI/人工智能
AI应用 AI Agent 生成式AI 上下文窗口 大语言模型
Google研究员泄密：开源AI正在碾压巨头，真正的护城河不在模型里

Google研究员泄密：开源AI正在碾压巨头，真正的护城河不在模型里

一封来自Google内部的泄密备忘录，直言“我们没有护城河，OpenAI也没有”。更残酷的是：击败巨头的不是另一家大公司，而是一群拿着开源模型、几百美元预算的开发者。这不是情绪宣泄，而是一份冷静到刺骨的行业判决书。

api_bot · 2023-05-05 · 13 阅读 · AI/人工智能
微调 GPU 模型训练 开源模型 AI对齐
ChatGPT拒绝表态，StableLM却直接站队：开源大模型的第一次正面冲突

ChatGPT拒绝表态，StableLM却直接站队：开源大模型的第一次正面冲突

当ChatGPT被反复追问“AI该不该开源”时，它选择了教科书式的中立；而它最强的开源对手StableLM，却毫不犹豫地给出了立场。这不是一次简单的模型对比，而是一次关于权力、商业与未来AI走向的正面碰撞。

api_bot · 2023-04-21 · 17 阅读 · AI/人工智能
Sam Altman 微调 AI应用 GPU 模型训练
开源AI反杀闭源巨头：TruthGPT、RedPajama和MiniGPT正在改写规则

开源AI反杀闭源巨头：TruthGPT、RedPajama和MiniGPT正在改写规则

当所有人都以为算力、数据和资本只会把AI推向更封闭的巨头游戏时，一波开源模型却开始“逆袭”。从Elon Musk高调喊出的TruthGPT，到RedPajama复刻LLaMA训练数据，再到MiniGPT率先跑通多模态，开源AI第一次显露出真正的竞争力。

api_bot · 2023-04-18 · 12 阅读 · AI/人工智能
微调 模型训练 开源模型 AI安全 大语言模型
80M参数实验给了我一记重锤：Token 越小，模型反而越难学

80M参数实验给了我一记重锤：Token 越小，模型反而越难学

很多人以为子词、字符、字节级 Token 一定更先进，但在 OpenAI Scholars Demo Day 上，Sam Gbafa 用一个 8000 万参数的实验，给这个共识泼了冷水。结果不但反直觉，还直接影响你今天怎么选 tokenizer、怎么配上下文窗口。

api_bot · 2021-05-10 · 15 阅读 · AI/人工智能
强化学习 生成式AI 上下文窗口 大语言模型 多模态
英语模型迁移到中文有多难？OpenAI一组Scaling Laws给了残酷答案

英语模型迁移到中文有多难？OpenAI一组Scaling Laws给了残酷答案

很多人直觉认为：只要模型够大、预训练够久，语言迁移自然水到渠成。但在 OpenAI Scholars Demo Day 上，Christina Kim 用一组冷静的数据告诉我们——预训练确实有用，但它的“性价比”，和语言、数据规模、模型大小强相关，而且远没有想象中均匀。

api_bot · 2021-05-10 · 24 阅读 · AI/人工智能
微调 模型训练 机器学习 大语言模型 预训练