jmoji-human-eval / data /samples.jsonl
AtefAndrus's picture
Initial commit: Jmoji human evaluation app
433e8bc unverified
{"id": 1, "text": "ๅคง็ดซใฃใฆใฎใฏๅฃฌ็”ณใฎๅŠŸ่‡ฃใฎไธญใงใ‚‚ใ‘ใฃใ“ใ†ไธŠใฎใ‚ฏใƒฉใ‚นใชใ‚“ใ ใ‘ใฉใ€ใ€Žๆ›ธ็ด€ใ€ใฎๅฃฌ็”ณใฎไนฑใฎใจใ“่ฆ‹ใฆใ‚‚ๆ˜Ÿๅท้บปๅ‘‚ใฎๅๅ‰ๅ‡บใฆใ“ใชใ„ใ‹ใ‚‰ใ€็ตๅฑ€ใฉใ‚“ใชๆดป่บใ—ใŸใฎใ‹ใฏใ‚ˆใใ‚ใ‹ใ‚“ใชใ„ใ‚“ใ ใ‚ˆใชใ€œใ€‚", "gold": "๐Ÿค” ๐Ÿ“š ๐Ÿ“– ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ”", "pred_focal_top50": "๐Ÿ“– ๐Ÿ˜Š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“š ๐Ÿ‘", "pred_top50": "๐Ÿ“– ๐Ÿ“š ๐Ÿ“š ๐Ÿ‘ ๐Ÿ“š", "jaccard_focal_top50": 0.42857142857142855, "jaccard_top50": 0.3333333333333333}
{"id": 2, "text": "ไธ‰ๆœจๆ”น้€ ๅ†…้–ฃใฎๆ™‚ใซใ€่‡ชๆฐ‘ๅ…šใฎๅ…šไธ‰ๅฝน๏ผˆๅนนไบ‹้•ทใ€ๆ”ฟ่ชฟไผš้•ทใ€็ทๅ‹™ไผš้•ท๏ผ‰ใฃใฆใ€ไธปๆตๆดพใ˜ใ‚ƒใชใ„ใ€Œไธ‰ๆœจใŠใ‚ใ—ใ€ใฎไธญๅฟƒใ ใฃใŸๆŒ™ๅ…šๅ”ใซใฏๅฑžใ—ใฆใชใ„ไบบใ‚’้–ฃๅƒšใซๆŠœๆ“ขใ—ใŸใ‚“ใ ใฃใฆใ€‚", "gold": "๐Ÿค” ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ›๏ธ ๐Ÿ’ฌ ๐Ÿค", "pred_focal_top50": "๐Ÿ‘ ๐Ÿ‘ ๐Ÿ“– ๐Ÿ‘ ๐Ÿ‘", "pred_top50": "๐ŸŽ‰ ๐Ÿ”ฅ ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ˜Š", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.0}
{"id": 3, "text": "ๆธฏๅŒบใฎๅคงไผšใงไธŠไฝๅ…ฅ่ณžใ—ใŸใ‚Šใ—ใฆใ€็ตๆง‹ใ‚ขใƒ”ใƒผใƒซใ—ใŸใ‚ใ€œ", "gold": "๐Ÿ† ๐ŸŽ‰ ๐Ÿ‘ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ’ช", "pred_focal_top50": "๐Ÿ“บ ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š", "pred_top50": "๐ŸŽ‰ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š ๐Ÿ‡ฏ๐Ÿ‡ต", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.3333333333333333}
{"id": 4, "text": "็‰‡ๅฑฑใ•ใ‚“ๆœฌไบบใ‚‚ใ€NR500ใ‹ใ‚‰10ๅนดใŸใฃใฆใ“ใ‚“ใช้ขจใซ่จ€ใฃใฆใ‚‹ใ‚“ใ ใ‚ˆใญใ€‚", "gold": "๐Ÿ˜Š ๐Ÿค” ๐Ÿ’ฌ", "pred_focal_top50": "๐Ÿ“š ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ“š ๐Ÿ“š", "pred_top50": "๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ‘ ๐ŸŽ“ ๐Ÿ“š ๐ŸŽ‰", "jaccard_focal_top50": 0.25, "jaccard_top50": 0.0}
{"id": 5, "text": "ใƒˆใƒผใ‚ฏใฎ้ƒจๅˆ†ใ ใ‘ใฉใ€ใ€Œใƒใƒƒใƒ—ใ‚ธใƒฃใƒ  ็ฌฌ8ใ‚ทใƒผใ‚บใƒณใ€ใจๅŒใ˜ใงใ€NHKใฎใ‚นใ‚ฟใ‚ธใ‚ชใงๅˆฅใ€…ใซๅŽ้Œฒใ—ใฆใŸใ‚“ใ ใฃใฆใ€‚", "gold": "๐Ÿ“บ ๐ŸŽค ๐ŸŽต ๐Ÿ“š ๐Ÿ˜Š", "pred_focal_top50": "๐Ÿ“š ๐Ÿ‘ ๐Ÿ‡ฏ๐Ÿ‡ต ๐ŸŽ‰ ๐Ÿ‡ฏ๐Ÿ‡ต", "pred_top50": "๐Ÿ“š ๐Ÿ‡ฏ๐Ÿ‡ต ๐ŸŽ‰ ๐ŸŽ“ ๐Ÿ“š", "jaccard_focal_top50": 0.125, "jaccard_top50": 0.125}
{"id": 6, "text": "ใกใชใฟใซใ€ใใฎๅญฆๆ กใฏใƒŸใƒใ‚ฝใ‚ฟๅทž็ซ‹ๅคงๅญฆใŒ็ง‹็”ฐใซใ‚ญใƒฃใƒณใƒ‘ใ‚นไฝœใ‚‹ใจใใฎไธปใชๅฝนๅ‰ฒใ‚’ๆ‹…ใฃใฆใŸใ‚“ใ ใ€‚ไปŠใ˜ใ‚ƒใใฎ่ทกๅœฐใซๅ›ฝ้š›ๆ•™้คŠๅคงๅญฆใŒ็ซ‹ใฃใฆใฆใ€็ง‹็”ฐๅคงๅญฆใจใ‚‚้€ฃๆบใ—ใฆใ‚‹ใ‚ˆใ€‚", "gold": "๐ŸŽ“ ๐Ÿซ ๐ŸŒ ๐Ÿค ๐Ÿ“š", "pred_focal_top50": "๐Ÿ‘ ๐Ÿ‘ ๐ŸŽ‰ ๐Ÿ˜Š ๐Ÿ“š", "pred_top50": "๐Ÿ˜Š ๐ŸŽ‰ ๐Ÿ“š ๐Ÿ“– ๐ŸŽ‰", "jaccard_focal_top50": 0.125, "jaccard_top50": 0.125}
{"id": 7, "text": "1ใ€œ3ๅทปใŒๅ€ซๅญ็ทจใงใ€4ใ€œ6ๅทปใŒ้บป่กฃ็ทจใฃใฆๆ„Ÿใ˜๏ผ", "gold": "๐Ÿ“– ๐Ÿ“š โœจ ๐ŸŽ‰ ๐Ÿ‘", "pred_focal_top50": "๐Ÿ“š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š ๐ŸŽ‰ ๐Ÿ˜Š", "pred_top50": "๐ŸŽ“ ๐Ÿ‡ฏ๐Ÿ‡ต ๐ŸŽ‰ ๐Ÿ”ฅ ๐Ÿ˜Š", "jaccard_focal_top50": 0.2857142857142857, "jaccard_top50": 0.1111111111111111}
{"id": 8, "text": "ใ“ใ‚Œใ€ๅ—่ณž็†็”ฑใ‹ใ‚‰ใฎๅผ•็”จใชใ‚“ใ ใฃใฆ๏ฝž", "gold": "๐ŸŽ‰ ๐Ÿ“š โœจ ๐Ÿค” ๐Ÿ’ก", "pred_focal_top50": "๐Ÿ‘ ๐Ÿ“š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š", "pred_top50": "๐Ÿ“š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“š ๐ŸŽ‰ ๐ŸŽ‰", "jaccard_focal_top50": 0.125, "jaccard_top50": 0.3333333333333333}
{"id": 9, "text": "2013ๅนดใฎใ‚ชใƒ•ใ‚ฃใ‚ทใƒฃใƒซใ‚ฌใ‚คใƒ‰ใƒ–ใƒƒใ‚ฏใงใ€ๅฅฝใใชใ‚ฟใƒฌใƒณใƒˆใจใ—ใฆๅคงๆณ‰ๆด‹ใฃใฆๆ›ธใ„ใฆใ‚ใ‚‹ใ‚“ใ ใ‚ˆใญใ€‚", "gold": "๐Ÿ˜Š ๐Ÿ“š ๐ŸŒŸ ๐Ÿ“บ ๐Ÿ‡ฏ๐Ÿ‡ต", "pred_focal_top50": "๐ŸŽ“ ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ“š ๐Ÿ˜Š", "pred_top50": "๐Ÿ“š ๐Ÿ‘ ๐Ÿ˜Š ๐Ÿ“– ๐ŸŽ‰", "jaccard_focal_top50": 0.3333333333333333, "jaccard_top50": 0.25}
{"id": 10, "text": "ๅ„็ง‘ๅ€™่ฃœ็”Ÿใฃใฆใฎใฏใ€ๆตทๅค–ใฎๅญฆๆ กใงใใ‚Œใชใ‚Šใฎใ‚ณใƒผใ‚นใ‚’ๅ’ๆฅญใ—ใฆใ€ๆŽก็”จ่ฉฆ้จ“ใ‚‚ใƒ‘ใ‚นใ—ใฆใ€ๆตท่ปๆญฆๅฎ˜ใฎไปป็”จๅง”ๅ“กใฎๅฏฉๆŸปใ‚‚้€šใฃใŸไบบใฎใ“ใจใ ใ‚ˆใ€œ", "gold": "๐ŸŽ“ ๐Ÿ“š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ’ช ๐Ÿ˜Š", "pred_focal_top50": "๐Ÿ“š ๐ŸŽ‰ ๐Ÿ‘ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š", "pred_top50": "๐ŸŽ‰ ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ“š ๐Ÿ“š", "jaccard_focal_top50": 0.42857142857142855, "jaccard_top50": 0.3333333333333333}
{"id": 11, "text": "่‡ชๆ€งๅˆ†ๅˆฅใฃใฆใฎใฏใ€ๅฐ‹ใจไผบใฎใ“ใจใงใ€ๅˆ†ๅˆฅใฎไธ€็จฎใฃใฆใ“ใจใญใ€‚", "gold": "๐Ÿค” ๐Ÿง  ๐Ÿ“– โœจ ๐Ÿ”", "pred_focal_top50": "๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š", "pred_top50": "๐Ÿ“– ๐Ÿ˜Š ๐ŸŽ‰ ๐Ÿ’ผ ๐Ÿ‡ฏ๐Ÿ‡ต", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.1111111111111111}
{"id": 12, "text": "ๆญดๅฒใ‚ใ‚‹ๆ—งใƒปไฝ่ณ€็œŒ็ซ‹ๅคšไน…ๅทฅๆฅญ้ซ˜ๆ กใ€‚ \n1962ๅนด๏ผˆๆ˜ญๅ’Œ37ๅนด๏ผ‰7ๆœˆ23ๆ—ฅใ€ไฝ่ณ€็œŒๆ•™ๅง”ใงใ€็ฟŒ1963ๅนด๏ผˆๆ˜ญๅ’Œ38ๅนด๏ผ‰4ๆœˆใซใ€Œไฝ่ณ€็œŒ็ซ‹ๅคšไน…้ซ˜ๆ ก๏ผˆไปฎ็งฐ๏ผ‰ใ€ใ‚’่จญ็ซ‹ใ™ใ‚‹ใฃใฆ่ฉฑใŒๆฑบใพใฃใŸใ‚“ใ ใฃใฆ๏ผ", "gold": "๐Ÿ›๏ธ ๐Ÿ“š ๐Ÿ“– ๐Ÿ‡ฏ๐Ÿ‡ต ๐ŸŽ“", "pred_focal_top50": "๐Ÿ“š ๐Ÿ˜Š ๐ŸŽ‰ ๐Ÿ“š ๐ŸŽ‰", "pred_top50": "๐Ÿ˜Š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ“š", "jaccard_focal_top50": 0.14285714285714285, "jaccard_top50": 0.3333333333333333}
{"id": 13, "text": "12ๆœˆ1ๆ—ฅ - ้›ปๆฐ—ไบ‹ๆฅญๆณ•ใฎไธปไปปๆŠ€่ก“่€…ใฎ่ณ‡ๆ ผใจใ‹ใซ้–ขใ™ใ‚‹็œไปคใงใ€็ฌฌ1ๆก็ฌฌ12้ …ใฎๅญฆๆ ก่ชๅฎšใ‚’ๅ—ใ‘ใŸใ‚ˆใ‚“๏ผˆ1975ๅนด5ๆœˆๆ”น่จ‚๏ผ‰ใ€‚", "gold": "๐ŸŽ“ ๐Ÿ“š ๐Ÿ›๏ธ ๐Ÿ“– ๐Ÿ’ผ", "pred_focal_top50": "๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“š ๐ŸŽ‰ ๐Ÿ“š ๐ŸŽ‰", "pred_top50": "๐Ÿ“– ๐Ÿ˜Š ๐Ÿ‘ ๐Ÿ“š ๐Ÿ˜Š", "jaccard_focal_top50": 0.14285714285714285, "jaccard_top50": 0.2857142857142857}
{"id": 14, "text": "ใ€ŒใƒŸใ‚จใƒŠใ‚คใƒใ‚ซใƒฉ ใ€œINVISIBLE ONEใ€œใ€ใฏใ€ไฟบๅˆใฎใ‚ขใƒ‹ใƒกใ‚ฟใ‚คใ‚ขใƒƒใƒ—ๆ›ฒใชใ‚“ใ ใ‚ˆใช๏ผ", "gold": "๐ŸŽต ๐ŸŽ‰ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ”ฅ ๐Ÿ’ช", "pred_focal_top50": "๐Ÿ“– ๐ŸŽ‰ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š", "pred_top50": "๐Ÿ‘ ๐ŸŽค ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š ๐Ÿ“š", "jaccard_focal_top50": 0.2857142857142857, "jaccard_top50": 0.1111111111111111}
{"id": 15, "text": "ใ€Žๆฒˆ้ป™ใ€ใฃใฆใ€้ ่—คๅ‘จไฝœใŒ17ไธ–็ด€ใฎๆ—ฅๆœฌใฎๅฒๅฎŸใจใ‹ๆญดๅฒๆ–‡ๆ›ธใ‚’ใ‚‚ใจใซๆ›ธใ„ใŸๆญดๅฒๅฐ่ชฌใชใ‚“ใ ใฃใฆ๏ฝžใ€‚", "gold": "๐Ÿ“– ๐Ÿฏ ๐Ÿ“œ ๐Ÿ˜ฎ ๐Ÿค”", "pred_focal_top50": "๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š ๐ŸŽ“ ๐Ÿ˜Š ๐ŸŽ‰", "pred_top50": "๐Ÿ˜Š ๐ŸŽ‰ ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.0}
{"id": 16, "text": "ๅˆใฎใ‚ชใƒผใƒซใ‚นใ‚ฟใƒผใ‚ฒใƒผใƒ ๅ‡บๅ ดใงใ€7ๆœˆ11ๆ—ฅใฎ็ฌฌ1ๆˆฆ๏ผˆใ‚ญใƒฃใƒณใƒ‰ใƒซใ‚นใƒ†ใ‚ฃใƒƒใ‚ฏ๏ผ‰ใฎ8ๅ›žใซไปฃๆ‰“ใง็™ปๅ ดใ€‚ใƒžใ‚คใ‚ฏใƒปใƒ•ใ‚ฉใƒผใƒ‹ใƒฌใ‚นใ‹ใ‚‰ใ„ใใชใ‚Šๅˆๆ‰“ๅธญๆœฌๅกๆ‰“๏ผ", "gold": "โšพ ๐ŸŽ‰ ๐Ÿ‘ ๐Ÿ”ฅ ๐Ÿ’ฅ", "pred_focal_top50": "๐Ÿ“š ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ“– ๐Ÿ“š", "pred_top50": "๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“– ๐ŸŽ‰ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.125}
{"id": 17, "text": "1987ๅนดใซTom LaStrangeใŒไฝœใฃใŸใ‚“ใ ใฃใฆใ€‚", "gold": "๐Ÿค” ๐Ÿ’ก ๐Ÿ“š", "pred_focal_top50": "๐Ÿ“š ๐Ÿ˜Š ๐ŸŽ‰ ๐ŸŽ‰ ๐Ÿ“š", "pred_top50": "๐Ÿ“š ๐Ÿ‘ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ˜Š ๐Ÿ‘", "jaccard_focal_top50": 0.2, "jaccard_top50": 0.16666666666666666}
{"id": 18, "text": "่ฟ‘ไปฃใซใชใฃใฆใ€ๅคงๆญฃๅคฉ็š‡ใฎ็—…ๆฐ—ใŒๆฒปใฃใŸใŠ็คผใงๅปŸใŒๅปบใฆใ‚‰ใ‚ŒใŸใ‚“ใ ใฃใฆใ€‚", "gold": "๐Ÿฏ ๐Ÿ™ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“– โœจ", "pred_focal_top50": "๐Ÿ“š ๐ŸŽ‰ ๐ŸŽ‰ ๐Ÿ‘ ๐Ÿ“š", "pred_top50": "๐Ÿ‘ ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ‡ฏ๐Ÿ‡ต", "jaccard_focal_top50": 0.0, "jaccard_top50": 0.125}
{"id": 19, "text": "ใƒ’ใƒซใƒ‡ใซใ‚ˆใ‚‹ใจใ€ใ€Œๆ˜”ใฏใ‚ใฃใกใ‚ƒๅ„ชใ—ใ‹ใฃใŸใ€ใ‚“ใ ใฃใฆใ€‚", "gold": "๐Ÿ˜Š ๐Ÿค” ๐Ÿ’ฌ", "pred_focal_top50": "๐Ÿ“š ๐Ÿ˜Š ๐Ÿ“š ๐ŸŽ‰ ๐ŸŽ‰", "pred_top50": "๐Ÿ˜Š ๐Ÿ“š ๐Ÿ“š ๐Ÿ˜Š ๐Ÿ‡ฏ๐Ÿ‡ต", "jaccard_focal_top50": 0.2, "jaccard_top50": 0.2}
{"id": 20, "text": "ใƒกใƒญใ‚จใซๅ–ใฃใฆไปฃใ‚ใฃใŸใƒŒใƒ“ใ‚ข็Ž‹ๅ›ฝใฎ่ตทๆบใฃใฆใ€ๅฎŸใฏใ‚ใ‚“ใพใ‚Šใฏใฃใใ‚Šใ—ใฆใชใ„ใ‚“ใ ใ‚ˆใญใ€‚", "gold": "๐Ÿ›๏ธ ๐Ÿ“– ๐ŸŒ ๐Ÿค” ๐Ÿ”", "pred_focal_top50": "๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ˜Š ๐Ÿ“š ๐Ÿ“–", "pred_top50": "๐Ÿ˜Š ๐Ÿ”ฅ ๐Ÿ‡ฏ๐Ÿ‡ต ๐Ÿ“š ๐Ÿ˜Š", "jaccard_focal_top50": 0.14285714285714285, "jaccard_top50": 0.0}