GitBross Inicio Explorar Ayuda
Registro Iniciar sesión
sol_87yf6cwp
/
LLMs-from-scratch
espejo de https://github.com/br8bit/LLMs-from-scratch.git
1
0
Fork 0
Archivos Incidencias 0 Wiki
Rama: main
Ramas Etiquetas
LLMs-from-scrat...
/
ch07
/
05_dataset-generation
Sebastian Raschka a08d7aaa84 Uv workflow improvements (#531) hace 9 meses
..
README.md 835ed29dbf reflection-tuning dataset generation (#349) hace 1 año
config.json 835ed29dbf reflection-tuning dataset generation (#349) hace 1 año
instruction-data-llama3-7b.json dbcdc7593b Generating a synthetic dataset for instruction finetuning (#245) hace 1 año
llama3-ollama.ipynb 835ed29dbf reflection-tuning dataset generation (#349) hace 1 año
reflection-gpt4.ipynb a08d7aaa84 Uv workflow improvements (#531) hace 9 meses
requirements-extra.txt 835ed29dbf reflection-tuning dataset generation (#349) hace 1 año

README.md

Generating Datasets for Instruction Finetuning

This folder contains utility code that can be used for generating a dataset for instruction finetuning.

  • llama3-ollama.ipynb: A notebook that creates a synthetic instruction finetuning dataset using Llama 3 and Ollama

  • reflection-gpt4.ipynb: A notebook that implements an instruction dataset refinement step based on reflection-tuning