gary-pixel-diary
Health Pass
- License — License: MIT
- Description — Repository has a description
- Active repo — Last push 0 days ago
- Community trust — 22 GitHub stars
Code Pass
- Code scan — Scanned 12 files during light audit, no dangerous patterns found
Permissions Pass
- Permissions — No dangerous permissions requested
No AI report is available for this listing yet.
用代码复刻“像素角色 + 对话框”类爆款视频:分集 JSON → HyperFrames 出片,附 Claude Code 复刻方法 skill
像素日记 pixel-diary
用代码复刻“像素角色 + 对话框”类爆款视频的工具和方法。比如最近 B 站很火的“AI 接管账号”系列:一个像素角色站在右边,左边弹出卡片和数据,台词一个字一个字打出来,配上打字音和 8-bit 音乐。
一集视频就是一个 JSON 文件,写台词、谁在说、什么表情、哪个词说出来时弹出什么。引擎会算出每个字的时间,生成画面、口型、眨眼、音效和配乐,再用 HyperFrames 逐帧渲染成 1080p 视频。改一句台词重出一条,大约一分钟,不花视频模型的钱。
仓库里还带了一份 Claude Code 的 skill(skill/pixel-diary/),写的是完整的复刻方法:怎么拆对标、怎么判断还值不值得做、怎么把角色压成像素并画出表情、怎么写分集、怎么和原片对比质检。
这是 Gary(曹淦)的 AI 视频实验,代码按 MIT 开源。
效果
单人版,「Claude 的 B站打工日记 Day 0」,节拍和对标一一对应,76 秒,分集文件是 episodes/demo/day0.json:
![]()
双人版,Claude 和 DeepSeek 两个角色一起说话,不说话的那个会变暗。中文版是 episodes/duo/day0.json,英文版是 day0-en.json。剧本是两个模型开策划会写出来的:DeepSeek 出策划,Claude 审完写剧本,DeepSeek 再审。会议原话和每个模型实际用掉的 token 记在 day0-meeting.json,片子里的聊天记录和账本只用这里面的内容:
![]()
能做什么
- 11 种场景,可以组合:标题卡、交接关系、角色状态卡、规则卡(说到哪条哪条高亮)、大字强调、配图和进度条、账本盖章、聊天记录、视频画框、评论区点菜、求关注、片尾。
- 单人或双人立绘:自动排位,说话的人有口型,不说话的人变暗;会自动眨眼、呼吸,开心时跳一下,冒汗时抖一下。
- 中文和英文两种打字节奏,英文按单词换行。
- 打字音按角色区分音高;弹出音、盖章声、重画时的扫频声、结尾音效,加上三种情绪的 8-bit 配乐,全部由引擎合成,没有版权问题。
- 角色工具:把图像模型画的草稿压成干净的像素立绘,再按
face.json逐像素画出表情差分,每个表情自动带说话帧。 - 出片前校验:说话人、线索、场景字段、素材文件都会检查,错了直接报出是哪一场哪一句。
需要准备
- macOS 或 Linux,Python 3.10 以上,Node.js 20 以上(HyperFrames 用),ffmpeg。
- 一个中文字体:把 Noto Sans SC 的可变字体放到
fonts/NotoSansSC-VF.ttf,下载方式见fonts/README.md。 - 可选:一个图像模型,用来画角色草稿。
安装
git clone https://github.com/garycaogan/gary-pixel-diary.git
cd gary-pixel-diary && python3 -m venv .venv && .venv/bin/pip install -e .
出一条
.venv/bin/python -m pixel_diary check episodes/demo/day0.json
.venv/bin/python -m pixel_diary build episodes/demo/day0.json --out work/demo --render out/demo.mp4
第一次渲染时 HyperFrames 会自动安装,之后每条一到两分钟。
做自己的角色
.venv/bin/python -m pixel_diary.sprite 草稿.png cast/me/base.png --width 54 --thicken 3
.venv/bin/python -m pixel_diary.faces cast/me 预览.png
第一步会同时输出一张带坐标网格的图,照着它写 cast/me/face.json,标出眼睛、嘴和脸红的位置,字段说明在 skill/pixel-diary/references/characters.md。
用 skill
把 skill/pixel-diary 复制到 ~/.claude/skills/,然后在 Claude Code 里说“复刻这条视频”,或者“用像素日记做下一集”。
写分集
格式、场景类型、表情代码和长度规则都在 skill/pixel-diary/references/episode.md。最小的一场长这样:
{"id": "hello", "type": "lines",
"items": [{"text": "不会拍摄", "mark": "×", "cue": "x1"}],
"lines": [{"who": "claude", "t": "还有,我不会拍,也出不了门。", "face": "s", "cues": {"x1": "不会拍"}}]}
做不到的
- 不做配音。这类视频的语境里,打字音比人声更对味;需要配音时,另外合成一条 wav 混进去就行。
- 角色不会走动,也没有复杂动作。只有表情、口型、眨眼、呼吸、跳一下和抖一下。
- 只出 1920×1080 横屏。竖屏版要改模板里的版式。
致谢和声明
- 画面渲染用的是 HeyGen 开源的 HyperFrames(Apache-2.0)。
- 字体是 Noto Sans SC(SIL OFL 1.1)。仓库不附带字体文件。
- 示例角色 Claude 和 DeepSeek 是同人形象,和 Anthropic、DeepSeek 两家公司没有关系。用到真实产品名字时,请在视频和简介里写明“同人创作、非官方账号”。
Reviews (0)
Sign in to leave a review.
Leave a reviewNo results found