auto-generated
auto-tune-generated-images
Auto-Tune: Generated Images
Generated images supporting the paper "Automated Fine-Tuning of Diffusion Models for
Learning Underrepresented Concepts from Web-Scraped Data" (code and training data at
https://github.com/Fmahlow/Auto-Tune).
Each .tar archive corresponds to one concept and one method:
dreambooth_<concept>.tar — DreamBooth+LoRA outputs: output_a_photo_of_<concept>_without_finetuning/
(1000 images, base SDXL model), output_a_photo_of_<concept>_with_finetuning/ (1000… See the full description on the dataset page: https://huggingface.co/datasets/FelipeMahlow/auto-tune-generated-images.AutoGeneratedJapaneseQA-CC
自動生成Q&A
データソースから､MaziyarPanahi/Mixtral-8x22B-Instruct-v0.1-GGUFを使ってQ&Aを自動生成したものです｡
Common Crawlをもとに生成しています。 Common Crawl terms of useに従ってご利用ください。
元の文章との類似度(依拠性)が低くなるようにするため、元文章からランダムに部分抜粋したテキストを用いています。
不自然な文章も含まれているためクリーニングを推奨します。
AutoGeneratedJapaneseQA
自動生成Q&A
種々のデータソースから､MaziyarPanahi/Mixtral-8x22B-Instruct-v0.1-GGUFを使ってQ&Aを自動生成したものです｡
CC-BY系またはApatch-2.0のデータソースを改変して生成しています。
元の文章との類似度(依拠性)が低くなるようにするため、元文章からランダムに部分抜粋したテキストを用いています。
不自然な文章も含まれているためクリーニングを推奨します。
このデータセットのライセンス
cc-by-sa-3.0
データソースとそのライセンス
hpprc/wikipedia-20240101 - cc-by-sa-3.0
hatakeyama-llm-team/WikiBookJa - cc-by-sa-3.0
kunishou/J-ResearchCorpus - cc-by-4.0
kunishou/databricks-dolly-15k-ja - cc-by-sa-3.0… See the full description on the dataset page: https://huggingface.co/datasets/hatakeyama-llm-team/AutoGeneratedJapaneseQA.AutoGeneratedJapaneseQA-other
自動生成Q&A
データソースから､MaziyarPanahi/Mixtral-8x22B-Instruct-v0.1-GGUFを使ってQ&Aを自動生成したものです｡
チームで作成したデータおよび「Common Crawlをもとに生成しています。 Common Crawl terms of useに従ってご利用ください。
hatakeyama-llm-team/AutoGeneratedJapaneseQA-CCと異なるデータを用いています。
元の文章との類似度(依拠性)が低くなるようにするため、元文章からランダムに部分抜粋したテキストを用いています。
不自然な文章も含まれているためクリーニングを推奨します。
autogenerated-dataset-card
Dataset Card for "test_dataset_cogapp"
More Information needed
The first row of the dataset looks like
{
"file": "pst_fenske_ver02_data_sn84026497_00280776129_1880042101_0834_002_6_96.jpg",
"image": "<PIL.JpegImagePlugin.JpegImageFile image mode=L size=388x395 at 0x11AF00990>",
"label": "0",
"pub_date": "1880-04-21 00:00:00",
"page_seq_num": "834",
"edition_seq_num": "1",
"batch": "pst_fenske_ver02",
"lccn": "sn84026497",
"box": "[0.649412214756012… See the full description on the dataset page: https://huggingface.co/datasets/davanstrien/autogenerated-dataset-card.autogenerated