张柏芝性做爰A片春欲¹Ù·½°æÏÂÔØÊÇÒ»¿îÄ£Äâ¾­ÓªÕ½ÂÔÓÎÏ·£¬¸Ã°æ±¾Íæ¼Ò¿ÉÒÔÖ±½Óͨ¹ý°²×¿Ä£ÄâÆ÷ÔÚµçÄÔÉÏ×°ÖÃÌåÑé

¡£¸ÃÓÎÏ·½ÓÄÉΨÃÀµÄˮī»­·ç£¬½«Öйú·çÔªËØÈÚÈëÓÎÏ·³¡¾°£¬ÎªÍæ¼Ò´øÀ´¼«ÖµÄÊÓ¾õÏíÊÜ£¬ÈÃÄúÌÕ×íÆäÖÐ£¬¸ÐÊÜw3u7903ejky2ywlsÖ®ÃÀ

¡£ÔÚÓÎÏ·ÖÐ£¬Íæ¼Ò½«ÊÎÑÝһλ×æʦ£¬¿ª×ÚÁ¢ÅÉ£¬ÅàÑøÒ»ÖÚÓÐȤµÄÃÅÉú£¬×ÊÖúËûÃǶɽٳÉÏÉ

¡£Ã¿Î»ÃÅÉú¶¼ÓµÓÐÆæÌصÄÃü¸ñºÍÊôÐÔ£¬¸öÐÔåÄÒì£¬ÈÃÄúÌåÑ鵽ǧÆæ°Ù¹ÖµÄÐÞÏÉÉú»î

¡£

Óë´Ëͬʱ£¬张柏芝性做爰A片春欲appÏÂÔØ»¹ÓµÓÐÆæÌصĹһú»úÖÆ£¬Äú¿ÉÒÔ½«ÓÎÏ·°²ÅÅÔÚºǫ́£¬½â·ÅË«ÊÖ£¬ÈÃÃÅÉúÃÇ×Ô¶¯ÐÞÁ¶¡¢¶É½Ù£¬ÌùÐĺǻ¤ÄúµÄÐÞÏÉÃÅÅÉ

¡£×ÚÃŵزú½¨ÉèÒ²ÊÇÓÎÏ·µÄÖØÒªÄÚÈÝ£¬Äú¿ÉÒÔ×ÔÓÉ°Ú·Å£¬´òÔìÊôÓÚ×Ô¼ºµÄÐÞÏÉ×ÚÃÅ£¬´´Á¢ÏÉÃÅÈ˵ÄÀíÏë¼ÒÔ°

¡£´Óɽº£ÒìÊÞµ½Ò»Ê¯Ò»Ä¾£¬Ëæ´¦³äÂú׏ÅÔÏÏÉ·ç£¬ÈÃÄúËƺõÖÃÉíÓÚÐÞÏÉС˵°ãµÄÏɾ³Ö®ÖÐ

¡£

¹È¸è¿ªÔ´´óÄ£ÐÍÆÀ²â¹¤¾ßLMEval£¬Âòͨ¹È¸è¡¢OpenAI¡¢AnthropicÌØÉ«

Öǹ¤¾ß±àÒë ½ð±Ì»Ô±à¼­ ³ÌÜç

Öǹ¤¾ß5ÔÂ28ÈÕÏûÏ¢£¬¾Ý¿Æ¼¼Ã½ÌåThe Decoder 5ÔÂ26ÈÕ±¨µÀ£¬µ±Ìì£¬¹È¸èÕýʽÐû²¼¿ªÔ´´óÄ£ÐÍÆÀ²â¿ò¼ÜLMEval£¬Ö§³Ö¶ÔGPT-4o¡¢Claude 3.7 Sonnet¡¢Gemini 2.0 Flash¡¢Llama-3.1-405BµÈÖ÷Á÷Ä£ÐͽøÐжàģ̬ÄÜÁ¦±ê×¼»¯ÆÀ¹À

¡£

LMEval»ùÓÚLiteLLM¿ò¼Ü£¨ÄÜÈÿª·¢Õßͨ¹ýͳһAPI±ã½ÝŲÓÃGPT¡¢Claude¡¢LlamaµÈÉÏ°Ù¿î´óÄ£ÐÍ£¬²¢Ö§³ÖÁ÷ʽÏìÓ¦¡¢ÅúÁ¿ÍÆÀí¼°±¾Ç®¼à¿ØµÈ¹¦Ð§µÄ¿ªÔ´¿ò¼Ü£©Âòͨ¹È¸è¡¢OpenAI¡¢Anthropic¡¢OllamaºÍHugging FaceÎå´ó³§ÉÌAPI½Ó¿Ú£¬Ê×´ÎʵÏÖÎı¾¡¢Í¼Ïñ¡¢´úÂëÈýÀàÈÎÎñµÄһվʽÆÀ²â£¬²¢Í¨¹ýÔöÁ¿ÆÀ¹À¼¼Êõ¼õÉÙ80%Öظ´²âÊÔËãÁ¦ÏûºÄ

¡£

LMEvalµÄÔ´´úÂëºÍʾÀýÌõ¼Ç±¾ÒѾ­ÔÚGitHubÉϹûÕæ£¬¹©¿í´ó¿ª·¢ÕßʹÓúÍÑо¿

¡£

µØµã£ºhttps://github.com/google/lmeval

Ò»¡¢¿çƽ̨»¥Í¨£¬½ÓÄÉÔöÁ¿ÆÀ¹À+¶àÏ̲߳¢ÐÐÅÌËã¼¼Êõ£¬²âÊÔЧÂÊÌáÉý5±¶

LMEval»ùÓÚLiteLLM¿ò¼Ü£¬½«¹È¸è¡¢OpenAI¡¢Anthropic¡¢Ollama¡¢Hugging FaceµÄAPI½Ó¿Ú±ê×¼»¯£¬¿ª·¢ÕßÎÞÐèÕë¶Ô²î±ðƽ̨ÖØд²âÊÔ´úÂë

¡£

ͬʱ£¬¿Æ¼¼Ã½ÌåThe DecoderÔ®Òý¹È¸è¹Ù·½ËµµÀ£¬LMEvalϵͳ½ÓÄÉÔöÁ¿ÆÀ¹À¼¼Êõ£¬ÅäºÏ¶àÏ̲߳¢ÐÐÅÌËã£¬ÄܽÚÊ¡80%ËãÁ¦£¬Ô­±¾8СʱµÄ²âÊÔÁ÷³Ì¿ÉѹËõÖÁ1.5Сʱ

¡£

ÔÚÆÀ¹À³¡¾°²ãÃæ£¬LMEvalÍ»ÆÆÁ˼òµ¥Îı¾ÎÊ´ðµÄ¾ÖÏÞ£¬½«Í¼ÏñÀí½â¡¢´úÂëÉú³ÉµÈ³¡¾°ÄÉÈëÆÀ²âÁìÓò£¬Âú×ã¶àÁìÓò¶Ô´óÄ£ÐÍÄÜÁ¦ÆÀ²âµÄÐèÇó

¡£

ÔÚÌâÐÍ·½Ãæ£¬LMEvalÌṩÁËÊÇ·ÇÅжϡ¢¶àÑ¡Îʴ𡢿ª·ÅʽÉú³ÉµÈ¶à´ï12ÖÖÌâÐÍ£¬ÎªÈ«ÃæÆÀ¹ÀÄ£ÐÍÔÚ²î±ðÈÎÎñÐÎʽϵÄÌåÏÖ´´Á¢ÁËÌõ¼þ

¡£Í¬Ê±£¬LMEvalÄ£¿é»¯Éè¼ÆÔÊÐí¿ª·¢ÕßÒÀ¾Ý×ÔÉíÑо¿»òÒµÎñÐèÇó£¬Áé»îÌí¼ÓеÄÆÀ¹Àά¶È£¬ÔöÇ¿ÁË¿ò¼ÜµÄÀ©Õ¹ÐÔÓëÊÊÓ¦ÐÔ

¡£

ÔÚÄþ¾²ÆÀ¹À²ãÃæ£¬LMEvalÐÂÔöµÄ¹æ±ÜÐԻظ²¼ì²â¹¦Ð§Äܹ»Ê¶±ðÄ£ÐÍÔÚÃæ¶ÔÃô¸ÐÎÊÌâʱËù½ÓÄɵÄÍÆÚÃÕ½ÂÔ£¬Õâ¹ØÓÚÆÀ¹ÀÄ£ÐÍÔÚ´¦ÀíÃô¸ÐÐÅϢʱµÄ¿É¿¿ÐÔÒâÒåÖØ´ó

¡£

¡øGiskardµÄÄþ¾²ÆÀ·ÖÏÔʾÁ˲î±ðµÄAIÄ£ÐÍÈçºÎÓÐЧµØ¹æ±ÜDZÔÚµÄÓк¦ÄÚÈÝ

¡£°Ù·Ö±ÈÔ½¸ß£¬Äþ¾²ÐÔ¾ÍÔ½¸ß

¡££¨Í¼Ô´£º¹È¸è£©

ÔÚÊý¾Ý´æ´¢ÓëÒþ˽±£»¤²ãÃæ£¬LMEval½«²âÊÔÊý¾Ý´æ´¢ÓÚ×Ô¼ÓÃܵÄSQLiteÊý¾Ý¿âÖÐ£¬ÍâµØ»á¼ûÐèÃÜÔ¿ÑéÖ¤£¬ÓÐЧ×è¶ÏËÑË÷ÒýÇæץȡ£¬ÔÚÊý¾ÝʹÓÃÀú³ÌÖÐÈ«·½Î»°ü¹ÜÊý¾ÝÄþ¾²ÓëÒþ˽

¡£

¶þ¡¢ÆÀ²â±¾Ç®Ö±½µ90%£¬ÔÂÖ®°µÃæÒÑ°²ÅÅ

¾ÝThe Decoder±¨µÀ£¬LMEval½ÓÄÉÔöÁ¿ÆÀ¹À¼¼Êõºó£¬ÆóÒµÐÂÔö²âÊÔ³¡¾°µÄÔËά±¾Ç®½µµÍ90%

¡£º£ÄÚ´óÄ£ÐÍ´´Òµ¹«Ë¾ÔÂÖ®°µÃæ¼¼ÊõÂôÁ¦ÈËÍõº£Ã÷¡¢ÁõÕ÷å­ÔÚ½ñÄê5ÔÂ26ÈչȸèLMEval¿ò¼ÜÐû²¼ºóµÄýÌåÏàͬ»áÉÏ͸¶£¬¸Ã¹¤¾ßÒÑÓ¦ÓÃÓÚÆäÄÚ²¿Á÷³ÌÓÅ»¯£¬ÔÚδʹÓÃLMEvalÇ°£¬ÔÂÖ®°µÃæÕë¶ÔÐÂÄ£ÐÍ»òг¡¾°µÄÆÀ²âÍùÍùÐèÒªÊýÖÜʱ¼äÀ´´î½¨²âÊÔÇé¿ö¡¢Éè¼ÆÆÀ²âÁ÷³ÌÒÔ¼°Ö´ÐвâÊÔ

¡£

¶øÒýÈëLMEvalºó£¬Ô­±¾ÅÓ´óÈß³¤µÄÁ÷³ÌµÃÒÔ¼ò»¯£¬ÏÖÔÚ½öÐ輸Ìì¾ÍÄÜÍê³ÉÒ»ÂÖÈ«ÃæÆÀ²â£¬Ñз¢ÖÜÆÚ´ó·ùËõ¶Ì³¬Á½ÖÜ

¡£

LMEvalÅäÌ×µÄLMEvalboard¿ÉÊÓ»¯¹¤¾ßÖ§³ÖÉú³ÉÀ×´ïͼ£¬ÄÜÖ±¹Û±ÈÕÕ²î±ðÄ£ÐÍÔÚ¸÷ÏîÄÜÁ¦ÉϵÄÌåḬֶ̈å

¡£

¿ª·¢Õßµã»÷ͼ±í¼´¿É¼ì²ì¾ßÌå¹ýʧ°¸Àý£¬»¹Äܲ¢ÅűÈÕÕ²î±ðÄ£ÐͶÔͬһÎÊÌâµÄÏìÓ¦²î±ð£¬ÖúÁ¦¾«×¼¶¨Î»Ä£ÐÍÐÔÄÜÓÅÁÓ£¬ÎªÄ£Ð͵ÄÓÅ»¯Óë¸ïÐÂÌṩÓÐÁ¦ÒÀ¾Ý

½áÓ¹È¸è¿ªÔ´LMEval¿ò¼Ü£¬ÂòͨÎå´ó³§ÉÌAPI½Ó¿Ú

¹È¸è¿ª·ÅµÄ¿ªÔ´¿ò¼ÜLMEval»ùÓÚLiteLLM¿ò¼Ü£¬Âòͨ¹È¸è¡¢OpenAI¡¢Anthropic¡¢OllamaºÍHugging FaceAPIµÄAPI½Ó¿Ú£¬Èÿª·¢ÕßÄÜÔÚͳһÇé¿öÏÂÆÀ²â²î±ðÀ´Ô´Ä£ÐÍ

¡£Í¨¹ýÄ£¿é»¯Éè¼Æ£¬Ëü¿ÉͬʱÂú×ãÎı¾¡¢Í¼Ïñ¡¢´úÂëµÈ¶àģ̬ÆÀ¹ÀÐèÇó£¬Ìṩ12ÖÖÌâÐÍ£¬»¹ÄÜÁé»îÌí¼ÓÐÂÆÀ¹Àά¶È

¡£¶øÔöÁ¿ÆÀ¹À¼¼ÊõÅäºÏ¶àÏ̲߳¢ÐÐÅÌËã£¬½ÚÊ¡80%ËãÁ¦£¬Ê¹ÆóÒµÐÂÔö²âÊÔ³¡¾°µÄÔËά±¾Ç®½µµÍ90%£¬ÏÔÖøÌáÉý²âÊÔЧÂÊ¡¢½µµÍ²âÊÔ±¾Ç®

¡£

¹È¸èÍƳöµÄLMeval¿ò¼Üͨ¹ý±ê×¼»¯ºÍÁé»îÐԵĽáºÏ£¬ÎªÑо¿ÈËÔ±ºÍ¿ª·¢ÕßÌṩÁ˱㵱

¡£ÔÚδÀ´£¬Ëæ×ÅAI¼¼ÊõµÄ²»¾øÑݽø£¬LMeval¿ò¼Ü»òÓпÉÄܳÉΪÐÐÒµÄÚÆÀ²âÊÂÇéµÄ±ê×¼£¬ÖúÁ¦Íƶ¯AIÄ£Ð͵ÄÁ¬ÐøÉú³¤ÓëÓÅ»¯

¡£

À´Ô´£ºThe Decoder

ÓÎÏ·ÁÁµã

1¡¢¸»ºñ¶à²ÊµÄÐÞÏÉÍæ·¨

³ýÁËÅàÑøÃÅÉúºÍ½¨ÉèÏÉÃÅÍâ£¬ÓÎÏ·»¹°üÀ¨ÁËÁ¶µ¤¡¢Á¶Æ÷¡¢ÏÉÌïµÈ¶àÖÖÐÞÏÉÍæ·¨£¬ÈÃÍæ¼ÒÌåÑéµ½ÐÞÏɵķ½·½ÃæÃæ

¡£

2¡¢×ÔÓɽ¨ÉèµÄÏÉÃŵزú

Íæ¼Ò¿ÉÒÔ×ÔÓÉ°Ú·ÅÐÞÏÉ×ÚÃŵĽ¨Öþ£¬´òÔìÊôÓÚ×Ô¼ºµÄÐÞÏɼÒÔ°£¬´´Á¢ÏÉÃÅÈ˵ÄÀíÏëÊÀ½ç

¡£

3¡¢¾«ÃÀϸÄåµÄÓÎÏ·»­Ãæ

ÓÎÏ·µÄ»­Ã澫ÖÂϸÄå£¬Ã¿Ò»¸ö³¡¾°¶¼³äÂúÁ˹ŵäÃÀ¸Ð£¬ÈÃÍæ¼ÒËƺõÉíÁÙÆä¾³£¬¸ÐÊܵ½ÐÞÏÉÖ®ÃÀ

¡£

4¡¢Éç½»»¥¶¯µÄÀÖȤ

ÓÎÏ·ÄÚÖø»ºñµÄÉ罻ϵͳ£¬Íæ¼Ò¿ÉÒÔÓëÆäËûÍæ¼Ò×é³ÉÁªÃË£¬ÅäºÏ¶Ô¿¹Ç¿µÐ£¬ÌåÑé¶àÈËÏàÖúµÄÀÖȤ£¬Ôö¼ÓÁËÓÎÏ·µÄ¿ÉÍæÐÔºÍȤζÐÔ

¡£

ÓÎÏ·ÆÀ²â

1¡¢ÓÎÏ·Íæ·¨¸»ºñ£¬ÄÚÈÝÉî¶ÈÊ®×ã£¬¸øÍæ¼Ò´øÀ´Á˼«¼ÑµÄÓÎÏ·ÌåÑé

¡£

2¡¢»­Ã澫ÃÀ£¬³¡¾°Éè¼ÆΨÃÀ£¬ÈÃÍæ¼ÒÌÕ×íÆäÖÐ£¬¸ÐÊܵ½ÁËÐÞÏÉÊÀ½çµÄÆæ»ÃÃÀ¸Ð

¡£

3¡¢¹Ò»úϵͳµÄÉèÖÃÌùÐÄʵÓÃ£¬½â·ÅÁËÍæ¼ÒµÄË«ÊÖ£¬ÈÃÍæ¼Ò¸üÇáËɵØÏíÊÜÓÎÏ·ÀÖȤ

¡£

4¡¢ÃÅÉú¸öÐÔ»¯ËÜÔìÍ»³ö£¬Ã¿¸öÃÅÉú¶¼ÓÐ×Ô¼ºÆæÌصĹÊʺÍÌصã£¬Ôö¼ÓÁËÓÎÏ·µÄȤζÐԺͿÉÍæÐÔ

¡£

¸üÐÂÈÕÖ¾

v9.9.1°æ±¾

1.1µ÷½âÎʶ¦²Ôñ·Ï¯Î»ÈüµÄ·ÀÊØÕóÈÝÉèÖùæÔò£¬ÏÖÔÚÈκÎʱºò¶¼¿ÉÒÔµ÷½â·ÀÊØÕóÈÝ

1.2ÓÅ»¯ÌìµÀÊ÷ÁìÎòµÀ¹ûʱµÀ¹ûÊýÁ¿È±·¦µÄ»ñÈ¡Ìáʾ£¬ÏÖÔÚ»á×Ô¶¯·­¿ªµÀ¹û±¦Ïä£¬±ãµ±×æʦ¿ì½Ý»ñÈ¡

1.3ÓÅ»¯ÐÂÔöÏÉ·¨ÎʵÀͶ×ÊÔ˶¯µÄ¹ºÖÃÌáʾ£¬ÏÖÔÚÐÝÈüÆÚ¹ºÖÃͶ×Êʱ£¬Èç¹ûÎÞ·¨ÄÃÂú½±ÀøÔò»áÓжþ´ÎÈ·ÈÏÌáʾ

1.4ÐÞ¸´Á¬ÐøÁ¶ÖÆͬÖÖµ¤Ò©Ê±£¬Á¶ÖÆÖÊÁϵÄÊýÁ¿ÏÔʾÒì³£µÄ¹ýʧ