Generative AI Insights | 生成式 AI 洞察 @gainotes Channel on Telegram

Generative AI Insights | 生成式 AI 洞察

@gainotes


Generative AI Insights | 生成式 AI 洞察 (English)

Are you interested in the latest advancements in artificial intelligence? Do you want to stay updated with cutting-edge trends in generative AI technology? Look no further than 'gainotes' - your go-to Telegram channel for all things related to Generative AI Insights. This channel is dedicated to providing valuable information, insights, and updates on the world of generative AI. From research papers to industry news, 'gainotes' covers it all. Whether you are a seasoned AI professional or simply curious about this fascinating field, this channel has something for everyone. Join 'gainotes' today and embark on a journey of discovery and learning in the world of generative AI. Stay ahead of the curve with 'gainotes' and unleash the power of AI innovation in your life and work.

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:40


dolly-15k 的训练集在发布 24 小时就被翻译成了其他语言,这就是开源的力量。

https://huggingface.co/datasets?search=dolly-15k

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:37


Sam Altman at MIT

小参数量 + 高质量训练集可能比堆叠参数量要更加重要。

小参数量意味着成本和推理速度更快。

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:28


Stability AI 发布了新的扩散模型:Stable Diffusion XL Beta

可以使用 API 来进行访问,优化了面部和文字的生成效果。

https://twitter.com/StabilityAI/status/1646672027103707136

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:24


GPT-4 在标注 twitter 政治相关的推文方面效果要好于人类

虽然 GPT-4 不是分类器,但是可以通过 few-shot / zero-shot 的方式充当分类器,twitter 的这个例子直接使用 zero-shot 就能够很好完成了。

审核工作是非常常见的一种工种,未来被 AI 代替的可能性目前看起来非常高。

https://arxiv.org/pdf/2304.06588.pdf

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:18


基于富文本的 text-to-image 生成

这个还挺有意思的,把富文本作为特殊的属性标签,例如把 house 这个词改成红色,那么生成的房子就会变成红色。

一定程度上简化了 prompt 的描述,并且可以使用更加具象的信息来作为输入。

https://rich-text-to-image.github.io/

Generative AI Insights | 生成式 AI 洞察

14 Apr, 01:14


一份 ChatGPT 的调查报告

详细介绍了技术、应用、未来挑战这 3 个主题。

https://arxiv.org/abs/2304.06488

https://arxiv.org/pdf/2304.06488.pdf

Generative AI Insights | 生成式 AI 洞察

13 Apr, 16:45


GPT-4 帮助陶哲轩节省了大量繁琐的工作。

https://mathstodon.xyz/@tao/110172426733603359

Generative AI Insights | 生成式 AI 洞察

13 Apr, 14:56


目前看过的最好的 prompt engineering 教程。

已经被翻译成了各种语言,不过看了一下,英文的是最准确的,因为中文的 prompt 只是英译中,非常不 native。

https://learnprompting.org/

Generative AI Insights | 生成式 AI 洞察

13 Apr, 14:53


ShareGPT 是一个 chrome 插件,可以分享在 ChatGPT 上有意思的对话。

GitHub Repo 中提供了 API 的形式来调用 ShareGPT 上的数据,一个常见的做法是使用 ShareGPT 上的对话数据来作为其他 pre-train 模型的 instruction tuning 的 input data,可以训练出一个类似 gpt-3.5 的模型(效果略差)。

https://github.com/domeccleston/sharegpt

Generative AI Insights | 生成式 AI 洞察

13 Apr, 14:45


Vicuna-7B 模型(前几天就发布了)

可以直接在 macbook 上跑,使用 pip install fschat 即可安装(但是还是需要自己下载 weights)。

7B 只需要 30GB 的 memory,项目还提供了一个基于 gradio 的 web ui。

开源项目地址:https://github.com/lm-sys/FastChat

https://twitter.com/lmsysorg/status/1644060638472470528

Generative AI Insights | 生成式 AI 洞察

13 Apr, 11:53


微软在昨天宣布开源了 Deep Speed Chat,能够帮助用户快速训练类 ChatGPT 的大语言模型。

未来可能大模型人手一个了,花个几百到几千刀就可以有一个自己的模型,私有部署。

这会衍生带来很多中间层的机会,比如做 LLM 的 optimization & fine-tuning,model serverless 服务等,甚至是全傻瓜式的一键 fine-tune & 部署的平台。

Copilot Hub 正在做这方面的研究 & 开发,目标是能够让每个人都能训练出自己 Copilot,可以跑在我们平台,也可以自己私有部署。

微软的开源项目地址:https://github.com/microsoft/DeepSpeed

Generative AI Insights | 生成式 AI 洞察

07 Apr, 13:11


朋友们非常抱歉,最近一周多一直在忙着迭代 Copilot Hub,没有分出精力来更新这个频道,这个周末参加完 Hackathon 后,下周会重新开始更新。

这个频道后面不太想仅仅只做汇总信息,想做点不太一样的(具体还没构思好,评论区也可以讨论讨论)。

另外这个频道永远不会收费(不靠这个赚钱),不当信息差的镰刀,如果想要支持我们,可以去体验我们产品。

https://app.copilothub.co/

大家周末愉快😄

Generative AI Insights | 生成式 AI 洞察

27 Mar, 08:08


Copilot Hub 现在正式发布了,并开放了自定义创建 Copilot 的能力

https://twitter.com/Tisoga/status/1640261647267938304

欢迎加入中文用户讨论组:https://t.me/+9oanfbRm-hxiYTA1

Generative AI Insights | 生成式 AI 洞察

26 Mar, 06:36


Langchain agent 已经支持解析 OpenAI ChatGPT Plugin 来执行了。

- ChatGPT + ChatGPT Plugin -> iOS
- Other LLM + Langchain -> Android

Generative AI Insights | 生成式 AI 洞察

25 Mar, 16:30


复现 Stanford Alpaca InstructLLaMA 的代码库

https://github.com/tloen/alpaca-lora

Generative AI Insights | 生成式 AI 洞察

19 Mar, 04:15


在 Google Pixel 7 Pro 上运行 LLaMA 7B 的模型

现在 LLaMA 已经在以下设备上运行过了:

- Macbook M1 & M2
- 树莓派
- Google Pixel 7 Pro

https://twitter.com/rupeshsreeraman/status/1637124688290742276

Generative AI Insights | 生成式 AI 洞察

18 Mar, 09:40


让 GPT-4 自动修复代码

一段包含错误的 Python 代码 -> 运行 -> 报错 -> GPT-4 修复 -> 运行 -> 报错 -> GPT-4 修复 -> 成功运行

自监督 debugging

https://twitter.com/i/status/1636880208304431104

https://twitter.com/bio_bootloader/status/1636880208304431104

Generative AI Insights | 生成式 AI 洞察

18 Mar, 09:33


在 M2 的 Macbook Air 上进行 LLaMA 7B 模型的本地推理 🤯

虽然目前生成的效果还比较差,但是推理速度极快。真正做到了消费级硬件推理,开源社区生态发展太快了。

项目地址:https://github.com/antimatter15/alpaca.cpp

Generative AI Insights | 生成式 AI 洞察

16 Mar, 10:56


Midjourney V4 和 V5 的效果对比

https://twitter.com/storybyphil/status/1636135645817995266

Generative AI Insights | 生成式 AI 洞察

15 Mar, 08:53


Google 基于 PaLM API 的产品:AI Test Kitchen

体验报告:
https://twitter.com/xinqiu_bot/status/1635923410097405954