Rule Writing or Annotation: Cost efficient Resource Usage for Base Noun Phrase Chunking

5 " .674!89;: < 04!/=><?@A

BDCFE0GIHKJMLNEOQPSRTVUWEYX(O[Z]\^ECF_/`badcfe

ghji PSklnm h RYl?oSpq-oIm ir l h kAs/tjuh Rt h

v

oIwRxAyzo

i{

u|RxA}zRu~

h

kxnul€

‚ PSƒl„u|mboIk hS…†Qgˆ‡/‰F‡/‰‹Š/… }ŒŽsŒ‘’Œ

“

mbPSu”ƒ–•—F˜%™Iš›+™œIž Ÿ¡ ¢#™0£ ¤¥%¡§¦+¨&©%ª«¦¬I­Iª

®D¯a±°‹CFE0GS°

²´³Fµ·¶K¸ ¹±¸&º»¼¸F»–ºn¶[º½d¾¿¶¼¹ÁÀ+ÂjÃ-¸ »–º³Fº½ ¶–µŽÄ±º

ºÃ-¸ µÅ»¿µŽÀ¹ÇÆ-À+±ë¸ ¹±»–µ·¶–±½KÈ&º¾Êɏºº½K¾ÊÉfÂM¹Ç¸FË

¸F»¿Âj¹jÀ³Fº¶MÌͱ»ÏÎFºÄ±ºÆÅÂj¸FµŽ½FÐѹÑÈ ¹j¶[º ½FÂjÒF½

¸F³ »¿¹j¶[ºÀ³dÒ ½FÓ±º»Ô³ÕÒFÃֹǽA»¿ÒFƎº,É1»¿µÅ¾–µŽ½Fй±½ Î

¹jÀ¾–µŽÄ±º×Æźn¹Ç»¿½FµŽ½FÐØÒ ¶–µŽ½FÐ]µŽ½d¾–º»¿¹jÀ¾–µŽÄ±ºÙ»–ºn¹ÇÆÅË

¾¿µÅëº^³ÕÒFÃÖ¹±½Ú¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½%ÛÏÜպıº»¹ÇÆݽFÂÞıºÆ

Ä޹ǻ¿µ·¹Þ¾–µŽÂ±½&¶Ö±½M¹jÀ¾¿µÅÄjºÆźn¹Ç»¿½FµÅ½ Ð߹ǻ¿ºµÅ½ÕÄjº¶[Ë

¾¿µÅÐd¹Þ¾–ºnÎYà¹Ç½ Î’ÒF½ ÎFº»¿ÆÅáÕµŽ½FÐâÀ+Âd¶Ê¾4ë‹΋ºÆ·¶4ÌÍÂj»

À»–Âd¶–¶[˔ë‹ÎF¹±ÆÝÃÖ¹±À³FµŽ½Fº’Æźn¹Ç»¿½FµŽ½FÐãÀ±ë¸ ¹±»–µÅË

¶–±½¹Ç»¿º4¸F»¿º¶–º½d¾–ºnιǽ Îäº+勸FƎ±»¿ºÎ%ۏæ1ºn¶[ÒFÆž¿¶

¶–³FÂÞÉ ¾–³ ¹Ç¾µÅ¾µ·¶"ëÂj»–º?ºç?À+µŽº½d¾-¹±½ Îë±»¿º

¶–Ò ÀÀº¶¿¶ÊÌÍÒ ÆSÈÕá?¶–ºÄjº»¹ÇƠëºn¹±¶–ÒF»–ºn¶¾¿Â"¾¿»¿¹±µÅ½ä¹

¶–ዶʾ¿ºÃ.Ò ¶–µÅ½ Ð¹jÀ¾¿µÅÄjºÆŽº¹±»–½FµŽ½FÐä¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½

»¹Þ¾¿³Fº»´¾¿³ ¹Ç½³ ¹±½ ÎÕËèÀ+»¹ÞÌ龖ºnÎ他ÒFƎº4É1»¿µ‘¾¿µÅ½FÐֹǾ

¹bÀ+±ë¸ ¹±»¿¹±ÈFƎºâÆźıºÆ,±̳dҠë¹±½MÆ·¹ÇÈS±»zµÅ½‹Ë

Äjº¶[¾–뺽d¾Û

ê ëjì

°‹CF_1ZÝíÝGS°FO[_

ì

î

½Fº]ÂÇÌÚ¾¿³Fº]¸ »–µŽÃֹǻ¿áï¸F»¿Â±È Æźë¶Ù¾–³&¹Þ¾ðÝñ#ò󻖺Ë

¶–º¹Ç»À³Fº»¿¶1É1³ ÂzÉf±»¿ÓzµŽ½^½ ºÉÏÆ·¹Ç½FÐjÒ ¹ÇÐjº¶1Âj»,½ ºÉÙ΋±Ë

ÃֹǵŽ½ ¶º½ À+ÂjÒF½d¾–º»µŽ¶¹Æ·¹±ÀӒÂÇÌ(¹„Ä޹ǵŽÆŽ¹±ÈFÆź?¹±½F½F±¾¿¹Þ¾¿ºÎ

ÎF¹Ç¾¿¹FÛôÂ±ÆŽÆŽºÀ¾¿µÅÂj½«ÂÇÌ%ÎF¹Þ¾¹§µŽ¶½FºµÅ¾–³Fº»º¹j¶[á½F±»À³Fº¹±¸%Û

²´³FºõÀ±½ ¶[¾–»¿Ò À¾¿µÅÂj½ö±̾¿³Fºõòº½ ½Q²/»–ººÈ ¹±½FÓM¶–µÅÐj½FµÅ÷FË

À¹±½d¾–ÆŽá?µÅë¸F»¿ÂÞıºnÎ?¸Sº»–Ìͱ»¿Ãֹǽ Àº,ÌÍÂj»(ø½FÐjÆŵ·¶–³ä¶–ዶʾ¿ºÃÖ¶

΋ºn¹ÇƎµÅ½FÐٵŽؾ–³Fº]ùʾ–»¹±ÎFµ‘¾¿µÅÂj½ ¹ÇÆ·ú¼ðÝñ/òû΋Âjë¹±µÅ½&¶MüͺÐ

¸ ¹±»¿¶–µÅ½ Ð àݸ&¹Ç»–¾[ËýÂÇÌéËè¶[¸SººnÀ³W¾¿¹±Ð±Ð±µŽ½FÐ&àݺ+¾Àþ+ÛÑÿÝÂÞɏºÄ±º»nà

Ìͱ»¹b½FºÉ.Æ·¹Ç½FÐjÒ ¹ÇÐjº±àݹb¶[µŽÃ«µÅÆ·¹Ç»äµŽ½dÄjº¶[¾–뺽d¾äÂÇÌ"ºÌéË

Ìͱ»–¾1µÅ½ä¾¿µÅ뺹ǽ&ÎAë±½ ºá?µ·¶´Ã«Âj¶[¾´ÆŽµŽÓ±ºÆŽá?¸F»¿Â±³ µÅÈFµÅ¾–µŽÄ±ºjà

µÅ̽F±¾(µÅë¸SÂj¶¿¶[µŽÈFƎº±Û

 ¹±ÀºÎÉ1µÅ¾–³b¾–³ ºäÀÂj¶[¾¿¶"¹j¶–¶–‹À+µ·¹Þ¾¿ºÎÉ1µÅ¾–³ãÎF¹Þ¾¹^¹±À+Ë

ÒFµ·¶[µÅ¾–µŽÂ±½%à »¿¹Ç¾–µŽÂ±½ ¹±Æŵ·¶Ê¾¶f비áz¹Ç»¿Ð±ÒFº¾–³&¹Þ¾(µÅ¾(ɏÂjÒFƎÎäÈSº

ë±»¿º"À+Âd¶Ê¾,ºIºÀ¾¿µÅÄjº¾¿ÂAÀ+Âj½ ¶Ê¾¿»–Ò&À¾¶–ዶʾ¿ºÃÖ¶(±̳ ¹Ç½&ÎÕË

À+‹΋ºnΫ»–Ò Æź(Ǝµ·¶Ê¾¶0¾–³&¹Þ¾fÀ¹Ç¸‹¾¿ÒF»¿º´¾–³Fº,ÆŵŽ½FбҠµŽ¶[¾–µ·À(À³ ¹±»¿¹jÀË

¾–º»–µ·¶[¾–µ·À¶0±ÌS¾¿³Fº1¾¹±¶–Ó¹Þ¾³&¹Ç½ ÎYàd»¹Þ¾–³ º»¾–³&¹Ç½?¶–¸&º½ Î‹µŽ½FÐ

À+Âj븠¹Ç»¹ÇÈFƎººSÂj»[¾,¹±½F½F±¾¿¹Þ¾¿µÅ½ ÐzÎF¹Ç¾¿¹?¹±½ Îº+勸SºÀ+¾–µŽ½FÐ

¾–³ º«¶¿¹Ç뺫ÓÕ½FÂÞÉ1ƎºÎ‹Ðjº¾–ÂÈSº?¹±À

Ò µÅ»¿ºÎ^µÅ½ ÎFµÅ»¿ºÀ+¾–ÆŽáâÈÕá

¹zë¹jÀ³FµŽ½FºÆŽº¹±»–½ µÅ½Fж–áÕ¶[¾–ºÃÛ²´³Fº

ÒFº¶[¾–µŽÂ±½Éº«¹Ç»¿º

¾–»¿áյŽ Ð,¾¿Â¹±ÎFÎF»–ºn¶–¶¾¿³Fº½Öµ·¶Ô#Ìͱ»N¹ÐjµÅÄjº½«À+Âj¶[¾N¹±¶¿¶–ÒF븋Ë

¾–µŽÂ±½#àdÉ1³ µŽÀ³A¹±¸F¸F»¿Âj¹jÀ³ÖɏÂjÒFƎÎ?È&ºÝ¾–³FºÃ«Âj¶[¾ºIºÀ+¾–µŽÄ±ºjÛ

Æž–³FÂjÒFб³ÆŽº¹±»–½FµŽ½FÐÖÀ+Ò »–Äjº¶(¶–³FÂÞÉ1µŽ½FЫ¸&º»[ÌÍÂj»–Ãֹǽ&À+º

µŽ½4¾–³ ºNÃÖ¹±À³FµŽ½FºÆźn¹Ç»¿½FµÅ½ Ð(Æŵž–º»¿¹Ç¾–ÒF»¿º±à¾–³ º¶–º¹Ç»¿ºµŽ½ ¹±ÎFº+Ë

Ò ¹Ç¾–ºÌͱ»/À+±ë¸ ¹±»–µŽ½FÐ1¶–áÕ¶[¾–ºÃÖ¶YÉ1µ‘¾¿³Î‹µSº»–º½j¾¶[ÂjÒF»¿Àº¶

±Ì/¾¿»¿¹±µÅ½FµŽ½FÐ?ÎF¹Ç¾¿¹-±»,¶[ÒF¸Sº»¿ÄÕµŽ¶–µŽÂ±½%ÛN²´³ µŽ¶1µ·¶1ºn¶[¸SºÀµŽ¹±ÆÅƎá

¾¿»–ÒFº4É1³ º½â¹«³ÕÒFÃֹǽ»¿ÒFÆź˔È&¹±¶–ºÎä¹Ç¸F¸F»¿Âj¹jÀ³z¹±½ ÎºÃ-Ë

¸FµŽ»¿µŽÀ¹ÇÆIÆźn¹Ç»¿½FµŽ½FÐ-¹±»–ººÄÞ¹±ÆÅÒ ¹Ç¾–ºnÎA»¿ºÆ·¹Þ¾¿µÅÄjºÝ¾¿Â-ºSÂj»[¾´µŽ½‹Ë

Äjº¶[¾–ºÎ%Û܋ҠÀ³õ¹Ã"ҠƑ¾¿µ‘˔̹±À+¾–±»-À+Âd¶Ê¾"¹±½ ¹ÇƎዶ[µ·¶4µ·¶ÆŽÂ±½FÐ

ÂÞÄjº»Î‹ÒFº±Û

²´³Fµ·¶1¸ ¹Ç¸Sº»ÝÉ1µÅƎÆ#À+Âj½ À+ƎҠ΋º4É1µÅ¾–³¹ÖÀ±ë¸F»¿º³Fº½ ¶[µŽÄ±º

ÀÂj¶[¾«Ã«Â‹Î‹ºÆ1º+勸&Âd¶[µÅ¾–µŽÂ±½D¹Ç½&Îb¹±½ ¹ÇƎዶ[µ·¶à¹Ç½ Îã¹Ç½ãºÃ-Ë

¸FµŽ»¿µŽÀ¹ÇÆ/¶[¾–Ò&΋áÀ+±½d¾¿»¿¹j¶Ê¾¿µÅ½FÐÖ³ÕÒFÃÖ¹±½â»–Ò Æź˔É1»¿µ‘¾¿µÅ½ Ð?ıº»[Ë

¶–Ò ¶¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½‹ËýÈ ¹±¶–ºÎ§ÆŽº¹±»–½ µÅ½FÐ,¹Ç¸F¸F»¿Âj¹jÀ³Fº¶%¾–³ ¹Ç¾¹±»–º

¶–º½ ¶–µÅ¾–µŽÄ±º¾–«¾¿³Fº¶–º4À+Âj¶[¾1ëÂÕÎFºÆ·¶Û

E0ajH¼Jö_Ní

ì

CFE0adH

í

ì

c1O

ì

L

²´³Fº ΋Âjë¹±µÅ½öµÅ½öÉ1³Fµ·À³öÂjÒF»zºå‹¸&º»–µŽÃ«º½d¾¿¶¹Ç»¿º^¸Sº»–Ë

ÌÍÂj»–ëºÎ×µ·¶È&¹±¶–ºb½FÂjÒF½ ¸F³F»¹±¶–ºãÀ³ÕÒF½FÓÕµŽ½FÐ Û ¶–µŽÐÇË

½FµÅ÷&À¹Ç½d¾^¹Çë±Ҡ½j¾Â±ÌÉf±»¿ÓÚ³ ¹±¶ÈSºº½¼Î‹Â±½Fº µŽ½Q¾–³Fµ·¶

΋ÂjÃֹǵŽ½Q¹±½ ÎÚÃֹǽÕáMÎFµIº»¿º½d¾Ã«º+¾–³ ÂÕΠ¶³ ¹„ıº’È&ºº½

¹±¸F¸FƎµÅºnÎYÔô³ÕÒF»À³¶?ò

æ²(ܼüjþ¸F»¿Â±Ðj»¿¹±ÃÒ ¶–ºÎ

¹^¹Ç»¿Ó±ÂÞÄâë‹΋ºÆf±ÒF»¿µŽÐj¹ÇҠƑ¾Aü ±þÒ ¶–ºÎ ³ ºÒF»¿µŽ¶[Ë

¾¿µŽÀ¶(¹ÇƎ±½FЫÉ1µÅ¾–³¹-б»¹ÇëÃֹǻ!#"0±ҋ¾¿µÅÆ·¹ÇµŽ½Fº½$¶(ð,òN²/ÂÕ±Æ

ü%jþÒ ¶–ºÎ¹-Æź勵ŽÀ±½À+ÂjÃ"ÈFµŽ½FºÎzÉ1µÅ¾–³â¹ÖÀ+Âj½ ¶[¾–»¹ÇµŽ½j¾

Ðj»¿¹±Ã-ÃÖ¹±» &±Ò‹¾¿º¶–±½?¹±½ Î('4¹Þ¾*)"ü+!,jþÒ ¶–ºÎÖ»¿º¸Sº¹Ç¾–ºÎ

¸F³ »¿¹j¶[ºn¶-"0ºº½ ¶[¾–»¹Øü+!jþà »¿Ðj¹±Ã-Âj½%à/.,¹±Ðj¹Ç½10

'§»¿áÕÃ-ÂjÆÅÂÞÉ(¶–ÓÕµÝü+!jþà2.¹ÇºÆźë¹±½ ¶àÄÞ¹±½ß΋º½3fÂj¶¿À³

054Y¹„Äd»¿ºÆü+!jþ¹±½ ÎA²76ÊÂj½FÐ8'§µŽÃØ܋¹±½FÐ90:"0ºº½&¶Ê¾¿»¿¹

üjþ(Ò ¶[ºnÎâëºÃ«Âj»–ádËýÈ ¹±¶–ºÎ¶–ዶʾ¿ºÃÖ¶%æݹÇÃÖ¶[³&¹„É:0

â¹±»¿ÀÒ ¶?üjþ§¹±½ Îbôf¹Ç»Î‹µŽº;0ÁòµŽº»À+ºâü+!jþÒ ¶–ºÎ

»¿ÒFƎº+ËýÈ ¹±¶–ºÎõ¶–ዶʾ¿ºÃÖ¶àÒF½FÂ)zº¾Ö¹±Æ|ÛWüjþÒ ¶[ºnÎß¹

<WµŽ½F½FÂÞÉ´ËýÈ ¹±¶–ºÎ¶–ዶʾ¿ºÃà¹Ç½&Î ¾–³Fº>=,² @? æ1ºn¶[ºn¹Ç»À³

?

»¿Â±ÒF¸/ü+dþÒ ¶–ºÎä¹-¾–»¿ººËý¹jÎA6ʱµŽ½FµŽ½FÐ-б»¹ÇëÃֹǻnÛ

î ̹±ÆÅÆ%¾–³Fº¶–ዶʾ¿ºÃÖ¶àFæݹÇÃÖ¶[³&¹„ÉB0Câ¹Ç»À+Ò ¶d¾–»¹Ç½ ¶[Ë

ÌÍÂj»–ÃÖ¹Þ¾¿µÅÂj½ö»¿ÒFƎº+ËýÈ ¹±¶–ºÎö¶[ዶ[¾–ºÃV³ ¹±ÎM¾–³ ºÈ&ºn¶Ê¾â¸FҠȋË

ƎµŽ¶–³FºnÎϸSº»–Ìͱ»¿Ã«¹±½ À+ºQüéÌéËý뺹±¶–ÒF»¿ºD ‹ÛEjþÌÍÂj»’¶–ºÄjº»¹ÇÆ

ájº¹Ç»¶àf¹±½ Î㵎¶Ö»¿ºÐd¹Ç»Î‹ºÎb¹±¶«¾¿³Fº^΋ºÌ¹jÀ¾¿Âõ¶Ê¾¹Ç½ ÎF¹±»¿Î

ÌÍÂj»«¾–³Fº^ÎF±ÃֹǵŽ½%Û

Æž–³ Â±ÒFÐj³D¶–ºÄjº»¹ÇÆ1¶–áÕ¶[¾–ºÃÖ¶Ö³ ¹„ıº

»¿ºÀº½d¾–ÆŽáÖ¹±À³FµŽºÄjºÎ«¶[ƎµŽÐ±³d¾–Ǝ᫳FµÅÐj³Fº»¸FÒFÈFƎµ·¶[³FºnÎ?»¿º¶–ÒFÆž¿¶

üFÒF½FÂ)ݺ+¾1¹ÇƔێÔ7 ‹ÛFàÕ²76ʱ½FÐG'§µŽÃØ܋¹±½FÐG0H"0ºº½ ¶[¾–»¹FÔ

‹Û% IÕàJ=² @? æ1ºn¶[ºn¹Ç»À³ ? »¿Â±ÒF¸%ÔK ‹ÛLdþ+àI¾–³FºµÅ»"¹±ÆÅÐjÂÇË

»¿µ‘¾¿³FÃÖ¶A¹±»–º^¶–µŽÐ±½FµÅ÷&À¹±½d¾–ÆŽáßë±»¿ºâÀ+Âd¶Ê¾¿ÆÅájà1±»A½ ÂǾ?Ìͺn¹ÞË

¶–µÅÈ Æźjྖ’µŽÃ-¸ ÆźÃ-º½d¾?µÅ½D¹Ç½ã¹±À¾¿µÅÄjºzƎº¹±»–½ µÅ½FÐ^ÌÍ»¿¹±Ã«º+Ë

»¿º+Ìͺ»¿º½&À+º4¹ÇƎбÂj»–µÅ¾–³FõŽ½ä¾–³Fºn¶[º4ºå‹¸&º»–µŽÃ«º½d¾¿¶Û

N

®WGS°‹OÊXNHBO"H%EC

ì

O

ì

LQPCF_SR

®

ìÝì

_°ÕE°FOÊ_

ì

ÜÕÒF¸Sº»¿ÄÕµŽ¶–ºÎ¼¶[¾¿¹Ç¾–µ·¶Ê¾¿µŽÀ¹ÇÆë¹jÀ³FµŽ½FºõƎº¹Ç»¿½FµŽ½FÐM¶–ዶʾ¿ºÃÖ¶

³ ¹„Äjº¾–»¹±ÎFµ‘¾¿µÅÂj½ ¹ÇƎÆÅ᧻¿º

ÒFµŽ»–ºnÎ4Æ·¹Ç»¿Ð±º¹±Ã«Â±ÒF½d¾¿¶/ÂÇÌS¹Ç½F½F±Ë

¾¿¹Ç¾–ºnÎâÎF¹Þ¾¹ÖÌÍ»¿Â±ÃÑÉ1³Fµ·À³¾–Âzº+åÕ¾–»¹±À+¾ÝÆŵŽ½FÐjÒFµŽ¶[¾–µ·À¸ »–Âj¸‹Ë

º»–¾–µŽº¶,ÂÇÌ0¾¿³Fº¾¿¹±¶–Ó¹Þ¾§³ ¹Ç½ Î%Û,ÿ(ÂÞÉfºÄjº»nà ½F±¾§¹±ÆÅÆÎF¹Ç¾¿¹

µ·¶zÀ»–ºn¹Þ¾–ºnÎãº

Ò ¹ÇƔÛ

»¿¹±½ Î‹Â±Ã ΋µ·¶Ê¾¿»–µŽÈFҋ¾¿µÅÂj½WÂÇÌ"¹±½‹Ë

½F±¾¿¹Þ¾¿ºÎbÎF¹Þ¾¹À±½d¾¿¹±µÅ½ ¶-ÃÒ À³ß»¿ºÎ‹Ò ½ ÎF¹Ç½d¾«µÅ½FÌͱ»¿Ã«¹ÇË

¾–µŽÂ±½#ÛTfáÖµŽ½d¾–ºÆŽÆŽµÅÐjº½d¾–ÆŽáÖÀ³FÂÕÂj¶–µÅ½FÐ"¾–³Fº,¾–»¹ÇµŽ½FµŽ½FÐ"ºåF¹ÇÃ-Ë

¸FƎº¶fÉ1³Fµ·À³zÐjº+¾´¸ ¹±¶¿¶–ºÎ«¾¿Â¾¿³FºÆźn¹Ç»¿½Fº»nàÕµ‘¾´µŽ¶´¸SÂj¶¿¶–µÅÈFƎº

¾–¸ »–ÂÞÄÕµ·Î‹ºä¾–³Fºâ½ ºÀ+ºn¶–¶¿¹Ç»¿áß¹±Ã-ÂjÒF½d¾?ÂÇ̧µÅ½FÌͱ»¿Ã«¹Ç¾–µŽÂ±½

É1µÅ¾–³Æźn¶–¶1Π¹Þ¾¿¹ Û

À¾¿µÅÄjº"Ǝº¹±»–½FµŽ½FÐA¹Ç¾[¾¿ºÃ«¸‹¾¿¶Ý¾–Âz¸&º»[ÌÍÂj»–Ã]¾–³ µŽ¶,µÅ½d¾¿ºÆÅË

ƎµÅÐjº½d¾N¶–¹±Ã«¸FÆŵŽ½FЧÂÇÌYÎF¹Ç¾¿¹,¾–Â4»¿ºÎ‹Ò&À+º(¹Ç½ ½FÂǾ¹Þ¾–µŽÂ±½«À+Âd¶Ê¾¶

É1µÅ¾–³FÂjҋ¾ÝÎF¹ÇÃÖ¹±Ð±µŽ½FÐ"¸Sº»–Ìͱ»¿Ãֹǽ Àº±ÛTUè½zÐjº½Fº»¿¹±Æ|àd¾¿³Fº¶–º

ëº+¾¿³F‹ÎF¶0À¹±ÆŽÀÒFƎ¹Ç¾–º¾–³Fº´Ò ¶–º+ÌÍÒ ÆŽFºn¶–¶Â±ÌS¹Ç½º+åF¹Çë¸FƎº´ÈÕá

÷ »¶Ê¾³ ¹„ÄյŽFЧ¾¿³Fº(Ǝº¹±»–½Fº»À+Æ·¹±¶¿¶[µÅÌÍá-µ‘¾nàd¹±½ Î¾–³Fº½A¶[ººµŽ½FÐ

³FÂÞÉWÒF½&À+º»–¾¿¹±µÅ½A¾–³ ¹Ç¾´ÀƎ¹j¶–¶–µÅ÷&À¹Ç¾–µŽÂ±½?É´¹±¶Û²´³ ºµ·Î‹ºn¹µ·¶

¾–³&¹Þ¾0¾–³ º1Ã-Âj»–º1Ò ½ À+º»[¾¹ÇµŽ½"¾¿³Fº1º+åF¹Çë¸FƎº±à±¾–³Fº1Ǝº¶¿¶ÉfºÆŽÆ

ë‹΋ºÆŽºÎ?¾–³Fµ·¶1¶[µÅ¾–Ò&¹Þ¾–µŽÂ±½zµŽ¶à‹¹Ç½ Î?¾–³Fº»–ºÌͱ»¿º±àd¾–³ º,ë±»¿º

Ò ¶–º+ÌÍÒFÆյž0ɏÂjÒFƎÎ"È&º¾–³ ¹„Äjº¾–³ µŽ¶º+åF¹±Ã-¸ Æź´¹Ç½F½ ÂǾ¿¹Ç¾–ºnÎYÛ

V$WYX Z\[^]F_`[;a5_`[AbD]Fcedgfh]jilkmSk#no[^c7]Yc7p

ÜÕºÒF½FРà

î

¸F¸&º»Ö¹Ç½ ÎDÜÕ±ë¸S±ƎµÅ½&¶[ÓÕáÚü+! ±þ¹±½ Îq »–ºË

ÒF½ Î㺾ֹ±Æ|ÛKü+!#IÇþ"¸F»–Âj¸&Âd¶[ºnÎß¹¾–³ ºÂ±»¿º+¾¿µŽÀ¹ÇÆKrs`tuwv^x

y

v^xz*{}|8|9~€t‚t?¹±¸F¸F»¿Âj¹jÀ³%ÛöÜÕÒ À³Ú¹±½Ú¹Ç¸F¸ »–Âd¹±À³ãÒ ¶[ºn¶

Ã"ҠƑ¾¿µÅ¸FƎº-Ã-‹΋ºÆŽ¶üÍÂj»¹ƒz‚{}|8|9~€F„t‚t–þ1¾–ÂzºÄÞ¹ÇƎҠ¹Þ¾¿º¾¿³Fº

ÎF¹Ç¾¿¹Fà¹Ç½&ÎÀ¹Ç½&΋µŽÎ ¹Þ¾–ºn¶§Ìͱ»-¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½WüÍÂj»>rs`tuw~Yt…[þ

¹Ç»¿º ΋»¿¹„É1½öÌÍ»¿Â±Ã=¾¿³Fº ¸&ÂÕ±Æ"ÂÇ̺åF¹Çë¸FƎº¶µŽ½öÉ1³Fµ·À³

¾–³ º?ëÂÕÎFºÆ·¶Î‹µ·¶–¹±Ð±»¿ºº±Û( ÒF»[¾¿³Fº»¿Ã«Â±»¿º±à7F»¿ºÒF½ Î’º¾¹ÇƔÛ

¸F»¿ÂÞıº1¾¿³ ¹Þ¾nàÕÒF½ Î‹º»f¶–±ëº,¶–µÅ¾–Ò ¹Ç¾–µŽÂ±½ ¶àd¾–³Fº,бº½ º»¹ÇƎµ)n¹ÞË

¾–µŽÂ±½’º»¿»¿Â±»§Î‹ºÀ»–ºn¹±¶–º¶,º+勸&Âj½Fº½d¾¿µŽ¹±ÆÅƎáÉ1µ‘¾¿³^¾¿³Fº«½ÕÒFÃ-Ë

ÈSº»(±Ì

ÒFº»¿µŽº¶Û

î ½ß¾¿³Fºº+勸Sº»¿µÅ뺽d¾¹ÇÆ(¶–µŽÎ‹ºjàf¹jÀ¾¿µÅÄjºäƎº¹±»–½ µÅ½FÐ ³ ¹j¶

ÈSºº½â¹±¸F¸FƎµÅºnÎ侖ÂA¶–ºÄjº»¹ÇÆ%΋µIº»¿º½d¾Ý¸F»¿Â±ÈFƎºÃÖ¶Ûfñ#ºÉ1µ·¶

0

?

¹ÇƎº?ü+!}LÕþàSñ%ºÉ1µ·¶@07ôf¹Þ¾¿Æź¾[¾ü}Ldþ´¹±½ Îñ%µŽº»¿º

0Á²/¹j΋º¸&¹ÇƎÆŵ§ü+! I±þ§¹ÇƎƏ¹±¸F¸FƎµÅºnε‘¾¾–Â^¾–º+åÕ¾«À¹Þ¾¿ºÐjÂÇË

»¿µ)n¹Þ¾–µŽÂ±½$ø½FÐjºÆ·¶[Âj½-0.¹ÇÐd¹Ç½Úü+!†jþ§¹Ç¸ ¸FÆŵŽºÎ µÅ¾"¾¿Â

¸ ¹±»[¾–˔±ÌéËý¶–¸&ººÀ³A¾¿¹ÇÐjбµŽ½FРÛ

øN¹±À³ö¹Ç¸F¸F»¿Âj¹jÀ³W³ ¹±¶zµÅ¾¿¶äÂÞÉ1½MÉ´¹„áb±Ì΋º¾–º»¿Ã«µÅ½FË

µŽ½FÐÒF½ À+º»[¾¹ÇµŽ½d¾ÊáâµÅ½ ºå‹¹±Ã«¸FÆźn¶ÛÖñ#ºÉ1µ·¶‡0

?

¹ÇƎº«Ò ¶–ºÎ

¹z¸F»–ÂjÈ ¹ÇÈ µÅƎµŽ¶[¾–µ·À"ÀƎ¹j¶–¶–µÅ÷ º»§¹Ç½ Î^¸Fµ·ÀÓ±ºÎ⾖³Fº«ºå‹¹±Ã«¸FÆźn¶

ˆ

É1³FÂd¶[º-À+Æ·¹±¶¿¶ÊËèÀ+Âj½ Î‹µÅ¾–µŽÂ±½ ¹±ÆŠ‰G‹`{A…wtuw~Y{^uw~/¸F»¿Â±È ¹±ÈFµÅƎµÅ¾Êá

ŒÖüF(Ž

ˆ

þ-µŽ¶AÀ+ƎÂj¶–º¶[¾-¾¿ÂEFې,ßüÍÌͱ»A¹‘ÞËýÀƎ¹j¶–¶-¸F»¿Â±ÈFƎºÃ?þ+Û

ø½ Ð±ºÆ·¶–±½q0’.¹ÇÐd¹Ç½õµŽÃ«¸FƎºÃ«º½d¾–ºnÎb¹’À+ÂjëÃ-µÅ¾[¾¿ººäÂÇÌ

Ǝº¹Ç»¿½Fº»¿¶à&¹±½ ÎÒ ¶–ºÎÄjÂǾ¿ºº½d¾–»¿Â±¸Õáz¾–Âz¸FµŽÀӺ勹±Ã«¸FÆźn¶

É1³Fµ·À³M³ ¹jÎD¾–³ º³FµŽÐ±³ º¶[¾Î‹µ·¶¿¹Çб»¿ººÃ«º½d¾z¹ÇëÂj½FÐõ¾¿³Fº

Ǝº¹Ç»¿½Fº»¿¶Û@U轍¹jÎF΋µÅ¾–µŽÂ±½%àYøN½FбºÆŽ¶–±½0“.¹ÇÐd¹Ç½â¹ÇÆ·¶–Â?µÅ½FË

ıºn¶Ê¾¿µÅÐd¹Þ¾¿º?¶[ºÄ±º»¹ÇÆÎFµIº»¿º½d¾¶–ºÆŽºÀ+¾–µŽÂ±½’¾–ºnÀ³F½Fµ

Ò º¶µŽ½

¡£¢ h!k#cžœ!]Y_lcžœ9]Yc¤d>f}h]Yi¥k¦mSk#no[^cž]Fcžp

²/Â7±Ҡ»ÚÓÕ½FÂÞÉ1Æźn΋бºjà^¾¿³Fµ·¶Ú¸ ¹±¸&º»öÀ+Âj½ ¶[¾–µÅ¾–Ò‹¾¿º¶W¾¿³Fº

÷ »¶[¾Éf±»¿Ó^¾¿Â¹Ç¸ ¸FÆÅáõ¹jÀ¾¿µÅÄjº?Æźn¹Ç»¿½FµŽ½Fо–Â’È ¹j¶[º?½ Â±ÒF½

¸F³ »¿¹j¶[º^À³ÕÒF½ ÓdµŽ½FÐ&à1±»?¾¿Â߹Ǹ ¸FÆÅáW¹jÀ¾–µŽÄ±º^Æźn¹Ç»¿½FµÅ½ Ð ¾–Â

¹¾¿»¿¹±½ ¶[Ìͱ»¿Ã«¹Ç¾–µŽÂ±½‹ËýƎº¹Ç»¿½FµŽ½FÐA¸&¹Ç»¹±Î‹µŽÐ±Ã üYf»–µŽÆŽÆ|àŠ,±þ

ÌÍÂj»f¹±½dáÖ¹±¸F¸FƎµŽÀ¹Þ¾–µŽÂ±½#ÛÜÕµŽ½ Àº¹¾–»¹Ç½ ¶[Ìͱ»¿ÃÖ¹Þ¾–µŽÂ±½F˔Ƞ¹j¶[ºnÎ

Ǝº¹±»–½Fº»#΋ÂÕº¶#½FÂǾ/бµŽÄ±ºN¹´¸F»¿Â±È&¹ÇÈFµŽÆŵ·¶[¾–µ·À0±ҋ¾¿¸Fҋ¾nànÉfºN¹±»–º

½F±¾,¹ÇÈ Æź§¾¿ÂÖÒ ¶[ºñ#ºÉ1µ·¶@0

?

¹ÇƎº¶1ëº+¾–³ ÂÕÎäÌÍÂj»Ý΋º¾–º»–Ë

뵎½FµÅ½ ÐÖÒF½ À+º»[¾¹ÇµŽ½d¾Êá±Û î ÒF»1º+勸Sº»¿µÅ뺽j¾¹ÇÆIÌÍ»¹ÇëºÉf±»¿Ó

¾¿³dÒ&¶(Ò ¶–º¶´¾¿³Fº

ÒFº»–ázÈdáäÀ+ÂjÃ-ëµÅ¾[¾¿ºº¸ ¹±»¿¹j΋µŽÐ±Ã7É1µÅ¾–³

È ¹Ç¾¿À³¶[ºÆźnÀ¾¿µÅÂj½%Ô

jÛ

?

µŽÄ±º½Ö¹À±»¿¸FÒ ¶-àչǻ¿ÈFµÅ¾–»¹Ç»¿µÅƎ᧸FµŽÀÓ8§¶–º½d¾¿º½ Àº¶

ÌÍÂj»(¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½%Û

FÛ´ÿ,¹„ıº=¾¿³Fº¶–º¨§¶–º½d¾¿º½ Àº¶³&¹Ç½ ÎÕËè¹Ç½ ½FÂǾ¹Þ¾–ºnÎYà

ÎFºÆŽº+¾–º¾–³FºÃMÌÍ»¿Â±ÃHb¹±½ Î¸Fҋ¾%¾¿³FºÃQµŽ½j¾¿Â(¹f¾–»¹ÇµŽ½‹Ë

µŽ½FÐ?¶–º+¾nào©Û

% Ûª.,µŽÄdµ·Î‹º;©×µÅ½d¾¿Â—«½F±½F˔µ·Î‹º½d¾¿µŽÀ¹ÇƔà%ÈFҋ¾"½ ÂǾ½FºnÀË

ºn¶–¶¿¹Ç»¿µŽÆÅáÖ½FÂj½‹ËýÂÞıº»¿Æ·¹Ç¸F¸FµŽ½FÐ&àd¶–ÒFÈ ¶–º+¾¶Û

L&Ûª¬,¶[ºMº¹±À³>¶–ÒFÈ ¶–º+¾b¹j¶ ¾–³FºÚ¾–»¹ÇµŽ½FµÅ½ ÐK¶–º+¾ßÌͱ»ß¹

ë‹΋ºÆ|Û

,FÛ´øNÄÞ¹ÇƎҠ¹Þ¾¿ºäºn¹±À³bÃ-‹΋ºÆ1±½b¾–³Fº»¿ºÃÖ¹±µÅ½FµŽ½FÐ ¶[º½‹Ë

¾¿º½ Àº¶1µŽ½

† Ûª¬,¶[µŽ½FЫ¹"ëºn¹±¶–ÒF»–º,ÂÇÌ΋µŽ¶¿¹ÇÐj»–ººÃ«º½d¾®­âà‹¸FµŽÀÓ«¾¿³Fº

¯

¶–º½d¾–º½ À+ºn¶§µÅ½‘É1µÅ¾–³¾–³ º-³ µÅÐj³Fº¶[¾K­ÌÍÂj»§¹±½‹Ë

½ ÂǾ¿¹Ç¾–µŽÂ±½%Û

I‹Ûª.,ºÆŽº+¾¿º’¾–³Fº

¯

¶[º½j¾¿º½ Àº¶zÌÍ»¿Â±Ã¨-à³ ¹„ıº^¾–³FºÃ

¹±½F½F±¾¿¹Þ¾¿ºÎYàF¹±½ Î¹±ÎFÎA¾–³ ºÃ7¾¿Â(©Û

 Û´æ(º¸Sº¹Þ¾1ÌÍ»¿Â±Ã1%FÛ

Uè½ÂjÒF»º+勸Sº»¿µÅ뺽d¾¶àÞ¾¿³Fº´µÅ½ µ‘¾¿µŽ¹±ÆFÀ+±»¿¸FÒ ¶2Ú¾–³ ¹Ç¾0ɏº

Ò ¶–ºÎÖÀ±½ ¶–µ·¶Ê¾¿ºÎ«ÂÇÌ%¶–ºÀ+¾–µŽÂ±½ ¶°A,„Ë‚ÂÇÌI¾¿³Fº@< ¹ÇƎÆSÜd¾¿»–ºº+¾

&j±ÒF»¿½ ¹±Æ/²/»–ººÈ ¹±½FÓüYâ¹±»¿ÀÒ ¶Ýº¾¹±Æ|ێàT%jþ+à&É1³Fµ·À³âµ·¶

¹±ÆŽ¶–Â’¾–³Fº¾¿»¿¹±µÅ½ µÅ½FÐõ¶–º+¾?Ò&¶[ºnÎbÈÕáãæ(¹ÇÃÖ¶–³ ¹„ɱ0²â¹Ç»–Ë

ÀÒ ¶Öü+!dþÛ«²´³FºÖµŽ½Fµ‘¾¿µŽ¹±Æ2§¶–º½d¾¿º½ Àº¶Éº»–º-¾¿³Fº«÷ »¶Ê¾

!EEA¶–º½d¾¿º½ Àº¶,ÂÇ̾¿³Fº"¾¿»¿¹±µÅ½ µÅ½FÐäÀ+Âj»–¸FÒ&¶àY¹Ç½&Î

¯³ ,}E

¶–º½d¾–º½ À+ºn¶-ɏº»–ºä¸Fµ·ÀÓ±ºÎb¹Þ¾«º¹jÀ³ßµÅ¾–º»¹Þ¾¿µÅÂj½%ÛbÜÕº¾¿¶-ÂÇÌ

,Eb¶–º½d¾–º½ À+ºn¶äɏº»–º ¶[ºÆźnÀ¾¿ºÎÚÈSºÀ¹ÇÒ ¶–º’µ‘¾¾¿¹±Ó±ºn¶ä¹±¸‹Ë

¸F»¿Â„勵ÅÃֹǾ–ºÆŽáe!,Þˁ%E^뵎½Õҋ¾–ºn¶«Ìͱ»Ö³ÕÒFÃֹǽ&¶-¾–¹ǽF½ ÂÇË

¾¹Þ¾–º,¾–³ ºÃàF¹»¿º¹j¶[Âj½ ¹ÇÈFƎºÝ¹±Ã-ÂjÒF½d¾f±Ì#Éf±»¿Ó-¹±½ ÎÖ¾¿µÅëº

ÌÍÂj»Ý¾¿³Fº-¹±½F½F±¾¿¹Þ¾¿Â±»Ý¾–Âz¶–¸Sº½ Î^È&ºÌͱ»¿º¾¿¹±ÓյŽFÐä¹?ÈF»¿º¹±Ó

É1³FµŽÆŽº?¾–³ ºAÃÖ¹±À³FµŽ½FºA¶–ºÆŽºÀ+¾¿¶¾–³Fºz½Fº+åÕ¾-¶–º+¾nÛâ²´³FºA¸&¹ÞË

»¹Çëº+¾¿º»\«’àYÉ1³FµŽÀ³ ΋º½FÂǾ¿º¶,¾–³Fº«½ÕÒFÃÈ&º»Â±ÌNë‹΋ºÆ·¶

¾¿Â¾¿»¿¹±µÅ½#àNÉ´¹±¶«¶[º¾?¹Þ¾;%FàfÉ1³Fµ·À³ãÀ±ÒFÆ·ÎßÈSºº+勸SºÀ¾¿ºÎ

¾¿ÂäÐjµÅÄjºÒ&¶§»–ºn¹±¶–±½ ¹±ÈFÆź"Ǝ¹±È&ºÆÅƎµÅ½ ÐäÄÞ¹±»–µ·¹Þ¾¿µÅÂj½^ÂÞıº»Ý¾¿³Fº

¶¿¹Çë¸FƎº¶à ÈFÒF¾¹ÇÆ·¶–ÂÖɏÂjÒFƎν ÂǾÀ¹ÇÒ ¶–º§¾–³ º"¸F»¿Â‹À+º¶¿¶–µÅ½FÐ

¸F³&¹±¶–º,¾¿Â«¾¿¹±Ó±º4¹-ÆÅÂj½FÐ-¾–µŽÃ-ºjÛ

²#Â΋µŽÄÕµŽÎFº«¾–³Fº?À±»¿¸FÒ ¶µÅ½d¾¿Âz¾¿³Fº?΋µSº»–º½d¾"¶[ÒFÈ&¶[º¾¿¶

Sequential Learning

Active Learning (Vote Entropy Model)

Performance (F-Measure)

Size of Training Set (words)

Relative Training Size for Same Performance

Sequential Training

Active Learning

Active Learning

(F-complement model)

83

84

85

86

87

88

89

90

91

0

5000

10000

15000

20000

25000

30000

35000

40000

45000

50000

µÅÐjÒF»¿º‡±Ô/òº»[ÌÍÂj»–ÃÖ¹±½ À+ºfċ¶Û¾–»¹ÇµŽ½FµŽ½FÐ4¶[º¾¶–µ)º±Ô/¹jÀ¾¿µÅÄjº1Æźn¹Ç»¿½FµÅ½ Ð§¹±½ ÎÖ¶–º

ÒFº½d¾¿µŽ¹±Æ ¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½-±½Ö²/»–ººÈ ¹±½FÓÎF¹Ç¾¿¹

¸Fµ·ÀӒüÉ1µ‘¾¿³â»¿º¸FÆ·¹±ÀºÃ«º½d¾þµ´¶zÂÇ̾¿³Fº4¾–±¾¿¹±Æ#½ÕÒFÃ"ÈSº»,ÂÇÌ

¶–º½d¾–º½ À+ºn¶AµŽ½M3¾¿Âb¹j¶–¶–µÅÐj½D¾–Â㺹jÀ³M¶[Ò È ¶[º¾ÛC<Wµ‘¾¿³

½‹Ë”ÌͱƷθ ¹±»[¾¿µ‘¾¿µÅÂj½FµÅ½ Ð à0ÉfºA¸ ¹±»[¾¿µ‘¾¿µÅÂj½FºÎõ¾–³FºäÎF¹Þ¾¹âµŽ½j¾¿Â

%ã΋µŽ¶¿À+»¿º+¾¿º¸&¹Ç»–¾–µÅ¾–µŽÂ±½ ¶à,¹±½ ÎÚºn¹±À³Úë‹΋ºÆ§É´¹±¶z¾–³ º½

¾–»¹ÇµŽ½FºnÎW±½BõÂÇÌ4¾¿³Fº¦%߸ ¹Ç»–¾–µÅ¾–µŽÂ±½ ¶Û<’ºÌͱÒF½ ÎM½FÂ

¶–µÅÐj½Fµ‘÷SÀ¹Ç½d¾(΋µSº»–º½ À+º§ÈSº+¾ÊÉfºº½z¾¿³Fº§¾ÊÉfÂ-뺾–³F‹ÎF¶Û

V$W•”WYX ·_žk#šFœ8_l¸°¹>]Fœn`p`[^k#k# k#cºh8¸_`[ghŸ7k

»

k#šYk#f}h!]Y_lcD_l¸@–—k ˜’¹¼nohn

²´³Fº¶Ê¾¹Ç½ ÎF¹±»¿ÎõÃ-º¾–³F‹ÎbÌͱ»«Ã«º¹j¶[Ò »–µŽ½FЍÎFµŽ¶¿¹ÇÐj»–ºº+Ë

뺽d¾(ÌÍÂj»,¶¿¹Çë¸FƎº¶[ºÆźnÀ¾–µŽÂ±½µŽ½â¹±À+¾–µŽÄ±º4Ǝº¹±»–½FµŽ½FÐ?¹±ÆÅÐjÂÇË

»¿µ‘¾¿³FÃÖ¶?¾¿³ ¹Þ¾AÒ&¶[º^¾–³Fº

Ò º»¿áßÈÕáWÀ+±ëëµÅ¾[¾–ººâµ·¶zøN½‹Ë

бºÆŽ¶–±½—0C.,¹±Ðj¹±½¶(ıÂǾ¿º4º½d¾–»¿Â±¸ÕázÃ-ºn¹±¶–ÒF»¿º±Û

?

µÅÄjº½â¹

¾¿¹±Ð±ÐjºÎzº+åF¹Çë¸FƎº

ˆ^½

àÕ¾–³FºÎFµŽ¶¿¹ÇÐj»–ººÃ«º½d¾°­ØÌÍÂj»

ˆ

µ·¶ ´ Ô

­

³ ¾

ÆÅÂjе¿(ÀoÁ±Â üFÃ^Ä

ˆ

þ

¿

ÆÅÂjÐ

Â

üFÃ^Ä

ˆ

þ

¿

É1³Fº»–º

¿

³

ð(ÒFÃÈ&º»1ÂÇÌëÂÕÎFºÆ·¶´µÅ½ä¾–³ ºÀ+±ëëµÅ¾[¾–ºº±Û

Â

üFÃ^Ä

ˆ

þ

³

ð(ÒFÃÈ&º»1ÂÇÌëÂÕÎFºÆ·¶1¹±¶¿¶[µŽÐ±½FµŽ½FеÃ,¾–Â

ˆ

ÿ(ÂÞÉfºÄ±º»à±³Fº»¿ºÝÉfº(¸F»¿Â±¸SÂj¶–ºÝ¹4½FÂÞÄjºÆS΋µŽ¶¿¹ÇÐj»–ººÃ«º½d¾

뺹j¶[ÒF»¿º¾¿³ ¹Þ¾µ·¶/ÈSÂǾ¿³"ë±»¿º´¹Ç¸F¸FƎµ·À¹ÇÈ Æźf¹Ç½ Î¹±À³FµŽºÄjº¶

¶–ÆŵŽÐ±³d¾–ÆŽá"µŽÃ«¸F»¿ÂÞıºÎ¸Sº»–Ìͱ»¿Ã«¹±½ À+ºj۞<’º(È ¹j¶[º1ÂjÒF»Ã«º¹ÇË

ńÆ$ÇÈ+É2É*Ê}ȄË+ÇÌ^ÍÏ΂ÐÑÒÎ‚Ó ÑÐÈ+ɂԞÈ+ÕÉÖ×ÒÔ+ÐØË+ɂɂهɂÊ^È$Ç!ʇЮÌoÉ*Ë

ÈÐØØ!ÉwÖ;Ó ÊאȪÚ#ÐԄ×ÒԂ۰ÜÊgÖÇÙKÐ×ÒÊ Ô®Ô„Ó ÎÕgÐÔªÌ Ð˄ȄÝYÇÞÝFԄÌoÉ*ɂÎßÕ

ÈÐØØ!×ÒÊ Ø—ÇË9Ú ÐԄÉ(ÊÇ!Ó Ê¦Ì ÕËÐԄÉ;ÎßÕ}ÓÊ à}×ÒÊ Øá7ÉwÐÎÕÈÐØ!Ø!ɂÖ

Ó ÊאÈ\×ÒԇÐ(âTÇË֛Û/ã/ÉGÌË+ÉßޕÉ*Ë\È+ÇgԄɂÑÒɂÎ*È\ɂÊ^È+×ÒË+É8ԄɂÊ^È+É‚Ê Î*ɂÔ

ÐÔÎwÐÊ#Ö×ÖÐÈ+ɂÔޕÇË®ÐÊ ÊÇÈÐÈ+×Çʥ۞ÜÊ8Ԅ×ÒÈ+Ó ÐÈ+×ÒÇ!ÊÔ®ÑÒ×ÒàAɪÈ+ÕɂԄÉ!á

È+Õ É7Ö×ÒÔ+ÐØË+ɂɂهɂÊ^ÈJÇäAÉß˺È+Õ É$ɂÊ^È+אË+ÉTԄɂÊ^È+É‚Ê Î*É7×ÒԺԄ×ÒÙ‡Ì ÑÍªÈ+ÕÉ

هÉwÐʵÖ×ÒÔ+ÐØË+ɂɂهÉ*Ê}ÈÇäAÉßËSÈ+ÕɊâTÇËÖÔ×ÒÊ9È+Õ ÉŠÔ„É‚Ê^È+É‚Ê Î‚ÉÛ

åßæ ×ä}×Ö×ÒÊؼÚ^͗ÑÒÇ!ؗç—ÊÇË+ÙKÐÑÒ×Òè‚É‚Ô\ÞéÇËKÈ+Õ É8Ê}Ó ÙêÚoÉßËêÇÞ

¶–ÒF»¿º,Âj½A¾¿³FºÌé˔뺹j¶[Ò »–ºÃ«º+¾–»¿µ·ÀÇà‹É1³Fµ·À³zµ·¶1΋º÷ ½FºÎä¹±¶Ô

ë$ì

³

üYí

´®î

nþŠïò»¿ºÀ+µ·¶–µÅÂj½>ïæ1ºÀ¹ÇƎÆ

í

´

ïò»¿ºÀµŽ¶–µŽÂ±½ î æ1ºnÀ¹ÇƎÆ

É1³Fº»¿º

òN»–ºnÀ+µ·¶[µŽÂ±½

³ ð

ÂÇÌÀ±»¿»–ºnÀ¾´¸F»¿Â±¸SÂj¶–ºÎzƎ¹±È&ºÆÅƎµÅ½ Ðj¶

ð

±̸F»¿Â±¸SÂj¶–ºÎAƎ¹±È&ºÆÅƎµŽ½FÐj¶

æ1ºÀ¹ÇƎÆ

³ ð

ÂÇÌÀ±»¿»–ºnÀ¾´¸F»¿Â±¸SÂj¶–ºÎzƎ¹±È&ºÆÅƎµÅ½ Ðj¶

ð

ÂÇÌÀ+Âj»–»¿ºÀ+¾fÆ·¹ÇÈSºÆŽÆŵŽ½FÐd¶

²´³FºäÄ޹ǻ¿µŽ¹±ÈFƎºgíö¹±ÆÅƎÂÞÉ(¶¸F»–ºnÀ+µ·¶[µŽÂ±½b¹Ç½ Î»¿ºÀ¹ÇƎÆN¾¿ÂÈSº

ÉfºµŽÐ±³FºnÎ΋µSº»–º½j¾¿ÆÅájۃUè½ß¹±ÆÅƏ±ÒF»º+勸Sº»¿µÅ뺽d¾¶àTíÚµ·¶

¶–º+¾(¾¿Â—±àFÐjµÅÄÕµŽ½FÐ?¹Ç½º

Ò&¹ÇÆ%ÉfºµŽÐ±³d¾´¾–Â?ÈSÂǾ¿³¸F»–ºnÀ+µ·¶[µŽÂ±½

¹±½ Î他ºnÀ¹ÇƎƔÛ

FÂj»A±Ҡ»A΋µ·¶–¹±Ð±»¿ººÃ«º½j¾?ëºn¹±¶–ÒF»–º­âà1ɏºâÒ&¶[º¾¿³Fº

ñ

xz‚{^|£‹lòét|(tó¥|à É1³FµŽÀ³µ·¶(À¹±ÆŽÀÒFÆ·¹Þ¾–ºnÎz¹j¶Ô

­

³

À

ô£õ„öô@÷wøù ü

¾

ë

½

üFú‘û–ü

ˆ

þwĂú¦üjü

ˆ

þ[þ–þ

É1³Fº»–º9ý7µ·¶,¾–³Fº«À+ÂjÃ-ëµÅ¾[¾¿ºº«ÂÇÌNë‹΋ºÆŽ¶à$ú‘ûßÄ*ú¦ü¹±»–º

µŽ½ Î‹µŽÄÕµŽÎ‹Ò&¹ÇÆfÃ-‹΋ºÆŽ¶"µÅ½qý-à0¹±½ Îë

½

üFúû–ü

ˆ

þÄ*ú¦ü±ü

ˆ

þ–þ4µ·¶

½

±Ì`ú‘û+¶%Æ·¹ÇÈSºÆŽÆŵŽ½FÐ(±Ì

ˆ

»¿ºÆ·¹Þ¾¿µÅÄjº¾–ÂÏú¦ü}¶%ºÄ„¹±ÆÅÒ&¹Þ¾–µŽÂ±½

±Ì

ˆ

Û

¶

µÅÐjÒF»–º‡(¶–³FÂÞÉ(¶¾¿³Fº´¾–ºn¶Ê¾¶–º+¾¸Sº»–Ìͱ»¿Ãֹǽ Àº(¹ÇÐd¹ÇµŽ½ ¶Ê¾

¾¿³Fº^½ÕÒFÃÈ&º»z±̧Éf±»ÎF¶ÖµŽ½W¾¿³Fºâ¾¿»¿¹±µÅ½FµŽ½FÐßÀ±»¿¸FÒ ¶?Ìͱ»

¶–º

ÒFº½j¾¿µŽ¹±Æ(¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½ã¹Ç½ Îã¹±À+¾–µŽÄ±ºÆźn¹Ç»¿½FµŽ½FРàÒ ¶[µŽ½FÐ

ÄjÂǾ–ºº½j¾¿»–Âj¸Õá ¹±½ ÎßÌéËýÀ±ë¸FƎºÃ«º½d¾A¹±¶¾¿³FºÃ«º¹±¶–ÒF»¿º¶

±Ì΋µ·¶–¹±Ð±»¿ººÃ-º½d¾Û

¶´À¹±½AÈSº§¶–ºº½AÌÍ»¿Â±Ã>¾¿³Fº§Ð±»¹Ç¸F³&¶à

ÌéËèÀ+ÂjÃ-¸ ÆźÃ-º½d¾ÐjµÅÄjº¶¹Ý¶–ÃÖ¹ÇƎÆdºÃ«¸FµÅ»¿µ·À¹ÇÆÕÈSÂÕÂj¶[¾µŽ½¸Sº»–Ë

ÌÍÂj»–Ãֹǽ&À+º±ÛHÂj»–ºµŽÃ«¸&Âj»[¾¹Ç½d¾–ÆŽá±àfÌéËèÀ+±ë¸FƎºÃ«º½j¾äÀ¹Ç½

ÈSºÖÒ ¶–ºÎ’µÅ½¹±¸F¸FƎµŽÀ¹Þ¾–µŽÂ±½&¶§É1³Fº»¿º«µÅë¸FƎºÃ«º½d¾¹Þ¾–µŽÂ±½’ÂÇÌ

ÄjÂǾ–ºº½d¾–»¿Â±¸Õᵎ¶Î‹µÅç?À+ÒFÆžà„ÌÍÂj»/ºå‹¹±Ã«¸FÆźjà„¸ ¹Ç»¶[µŽ½FÐ&Û#²´³Fº

¾¿¹Ç¾–ºnÎW¶[º½j¾¿º½ Àº¶?¶–ºÆŽºÀ+¾–ºnÎW¶[º

Ò º½d¾–µ·¹ÇƎÆÅáã¶[³ ÂÞÉ(¶«¾–³ ¹Ç¾

¹±À+¾–µŽÄ±ºfÆźn¹Ç»¿½FµŽ½FÐ,»¿ºÎFÒ À+ºn¶#¾¿³Fº1¹Çë±Ҡ½j¾ÂÇÌIÎF¹Þ¾¹Ý½ ººÎFºÎ

¾–ÂA»–ºn¹±À³¹ÖбµŽÄ±º½äƎºÄjºÆ%±Ì0¸&º»[ÌÍÂj»–Ãֹǽ&À+º4ÈÕáz¹±¸F¸F»¿Â„åÕµÅË

ÃÖ¹Þ¾¿ºÆŽáA¹-̹±À+¾–±»´Â±Ì/¾ÊÉf Û

V$WéV d>f}h!]ji¥k¦mSk#no[^c7]Yc7p-˜µ]YhŸ>k n`š K]F k

 n›c »

™®k[Ai]Fœ]F_¥c

Âd¶Ê¾fÂÇÌY¾–³ º,¸FÒ ÈFÆŵ·¶–³FºÎAɏÂj»–Ó-±½A¹jÀ¾¿µÅÄjº(Æźn¹Ç»¿½FµŽ½FÐ"¹Ç»¿º

¶–µÅÃÒFƎ¹Ç¾–µŽÂ±½ ¶ÂÇÌݹǽµ·Î‹ºn¹ÇƎµ)ºÎ ¶[µÅ¾–Ò&¹Þ¾–µŽÂ±½#Û î ½Fº?³ ¹j¶"¹

Æ·¹Ç»¿Ð±º¹Ç½ ½FÂǾ¹Þ¾–ºnÎÀ+Âj»–¸FÒ&¶àS¹Ç½ Î¾¿³Fº"½ ºÉQ¾¿¹±Ðj¶1ÌÍÂj»(¾¿³Fº

ù[½ ºÉ1ƎáK¹±½F½F±¾¿¹Þ¾¿ºÎFúM¶[º½j¾¿º½ Àº¶¹Ç»¿ºß¶[µŽÃ«¸FƎáKÎF»¿¹„É1½

ÌÍ»¿Â±Ã7É1³ ¹Ç¾fÉ´¹±¶fÂjÈ ¶[º»–ÄjºÎÖµŽ½ä¾–³Fº4¹±½F½FÂǾ¹Þ¾¿ºÎAÀ±»¿¸FÒ ¶à

¹±¶§µÅÌ´¾–³FºAб±ƷΒ¶Ê¾¹Ç½ ÎF¹±»¿Î’¹Ç½ ½FÂǾ¹Þ¾–Âj»4Éf¹j¶§¸F»¿ÂÕÎFÒ À+µŽ½FÐ

¾–³ µŽ¶-ÌͺºÎ‹È ¹jÀӵŽ㻿º¹ÇÆf¾¿µÅ뺱àfÉ1³FµŽÆź便³Fºä¾–º¶[¾?¶[º¾Öµ‘¾–Ë

¶–ºÆÅ̵·¶à&ÂÇÌ0À+ÂjÒF»¿¶–º±à‹½ ÂǾ(Ò ¶–ºÎäÌÍÂj»´¾–³Fµ·¶1ÌͺºÎ‹È ¹jÀÓIÛN²´³Fµ·¶

µ·¶"¹Ç½µ·Î‹ºn¹ÇƎµ)ºÎ¶–µ‘¾¿Ò ¹Þ¾¿µÅÂj½%ඖµŽ½ À+º?µÅ¾-¹j¶–¶–ÒF뺶4¾–³ ¹Ç¾-¹

¾–»¿ÒFº¹±À+¾–µŽÄ±ºÆŽº¹Ç»¿½FµŽ½Fж[µÅ¾–Ò&¹Þ¾–µŽÂ±½ãÉf±ÒFÆ·Îß³&¹„ıº¹±ÀÀº¶¿¶

¾–ÂÖ¶–±ëºÂj½FºÉ1³FÂÖÀ+±ҠƎÎä¹Ç½F½ ÂǾ¿¹Ç¾–ºÉ1µ‘¾¿³z¸Sº»–ÌͺÀ+¾ÝÀ+Âj½‹Ë

¶–µŽ¶[¾–º½ À+á ¾¿Â^¾¿³FºÐ±Â±Æ·Îõ¶[¾¿¹±½ ÎF¹Ç»ÎßÀ±»¿¸FÒ ¶-¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½

À+Âj½Õıº½d¾¿µÅÂj½ ¶Û

ºnÀ¹±Ò ¶[ºz±ÒF»-бÂd¹ÇÆfµŽ¶¾¿Â^µŽ½dÄjº¶[¾–µŽÐj¹Ç¾–º?¾¿³Fºä»–ºÆŽ¹Ç¾–µŽÄ±º

À+Âd¶Ê¾¶«ÂÇ̧»–Ò ÆźÉ1»¿µ‘¾¿µÅ½FÐ Äjº»¶[Ò ¶Ö¹±½F½F±¾¿¹Þ¾¿µÅÂj½%àNµÅ¾?µ·¶Öº¶[Ë

¶–º½d¾–µ·¹ÇÆ1¾¿³ ¹Þ¾zɏºÒ ¶–ºâ¹»¿º¹±Æŵ·¶Ê¾¿µŽÀäë‹΋ºÆ,ÂÇÌ4¹Ç½F½ ÂǾ¿¹ÇË

¾–µŽÂ±½#Û²´³Fº»–ºÌͱ»¿º±àYÉfº-΋ºnÀ+µ·Î‹ºÎ^¾–Â΋¹AÌÍÒFÆÅƎádË&ºÎ‹ÐjºÎ

¹±À+¾–µŽÄ±º?Ǝº¹±»–½ µÅ½FÐâ¹±½F½F±¾¿¹Þ¾¿µÅÂj½ º+勸&º»–µŽÃ«º½d¾àÉ1µÅ¾–³õ»¿º¹±Æ

¾–µŽÃ«º«³dҠë¹±½¶–ÒF¸Sº»¿Ädµ·¶–µÅÂj½%àY»¿¹Ç¾–³Fº»Ý¾¿³ ¹Ç½ ¹±¶¿¶–ÒFëº"¾¿³Fº

¶–µÅÃÒFƎ¹Ç¾–ºnÎÌͺºÎFÈ ¹±ÀÓ,ÂÇÌF¹±À+¾–Ò ¹±Æ±²#»¿ººÈ ¹Ç½ Ó,¹Ç½ ½FÂǾ¹Þ¾–Âj»¿¶Û

<ºÖ΋ºÄ±ºÆŽÂ±¸SºÎ¹Ç½’¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½¾¿ÂdÂjƾ–³ ¹Ç¾§µ·¶Ã«ÂÕ΋Ë

ºÆŽºÎKÂj½ —Uʲ1æ(ø@¶

ÆźÃ"ÈFµ·À‘<’±»¿ÓÕÈ&º½ À³¼¶[±Ìé¾ÊÉf¹±»–º

üY.¹„á3º+¾ ¹±Æ|ێà I±þàDÈFҋ¾ É1»–µÅ¾[¾¿º½µŽ½ &d¹„Ä„¹ÑÌÍÂj»

¸FÆ·¹Þ¾–Ìͱ»¿ÃËýµŽ½ Î‹º¸Sº½&΋º½ Àº±Û>²#Âbº½ ¹±ÈFƎºÎF¹Ç¾¿¹ß¶[¾–Âj»¿¹±Ð±º

¹Ç½&ξ–³ º¹jÀ¾¿µÅÄjºAƎº¹Ç»¿½FµŽ½FЍ¶¿¹Çë¸FƎº¶[ºÆźnÀ¾–µŽÂ±½ß¾–¾¿¹±Ó±º

¸FÆ·¹±ÀºA±½õ¾–³Fºäë±»¿ºA¸SÂÞɏº»[ÌÍÒFƏÃÖ¹±À³FµŽ½Fº¶µŽ½ß±Ҡ»"Æ·¹ÇÈ

»¹Þ¾–³ º»¾–³ ¹±½-¾–³Fº1Ò ¶–º»!¶³F±ëº´ÃÖ¹±À³FµŽ½Fº±àǾ–³Fº´¾¿ÂdÂjƋÉf¹j¶

΋ºn¶[µŽÐ±½FºnÎDÉ1µ‘¾¿³Ú½Fº¾ÊɏÂj»–Óã¶[ÒF¸ ¸&Âj»[¾z¶–¾¿³ ¹Þ¾äµ‘¾zÀ±ÒFÆ·Î

À+ÂjëÃ"ÒF½Fµ·À¹Ç¾–º§É1µÅ¾–³Â±ÒF»(¶–º»¿Ä±º»¿¶ÂÞıº»f¾–³Fº4µŽ½d¾–º»¿½Fº¾Û

î ÒF»«»–ºn¹ÇÆÅË|¾¿µÅëºz¹jÀ¾¿µÅÄjºzƎº¹±»–½FµŽ½FЍº+勸&º»–µŽÃ«º½d¾Ö¶[ÒFÈFË

6ʺÀ+¾¿¶zɏº»–ºâ¶–ºÄjº½WÐj»¿¹j΋Ҡ¹Þ¾¿ºâ¶Ê¾¿Ò Î‹º½j¾¶?µŽ½MÀ+Âjë¸Fҋ¾–º»

¶¿À+µŽº½ Àº±ÛµÅÄjºz±Ì(¾–³ ºÃ¹Ç»¿ºA½&¹Þ¾–µŽÄ±ºø½ Ð±ÆŽµŽ¶–³ß¶–¸&ºn¹ÇÓdË

º»¶à ÈFҋ¾½F±½ º4³ ¹±Î¹±½dázÌͱ»¿ÃÖ¹ÇÆ%ƎµŽ½FбÒFµ·¶[¾–µ·À¶1¾¿»¿¹±µÅ½ µÅ½FÐ&Û

²´³Fº(µŽ½FµÅ¾–µ·¹ÇÆ ¾–»¹ÇµŽ½FµÅ½ Ð§¶–º+¾®©ãµ·¶¾¿³Fº1÷ »¶Ê¾ÏEE§¶–º½d¾–º½ À+ºn¶

ÂÇÌ0æ(¹±Ã«¶–³ ¹„ÉM0â¹±»¿ÀÒ ¶Õ¾¿»¿¹±µÅ½ µÅ½FÐ?¶–º+¾nÛN²/«¹jÀ

Ò ¹±µÅ½d¾

¾–³ º¶[ÒFț6ʺÀ¾¶´É1µ‘¾¿³¾–³Fº²/»¿ººÈ&¹Ç½FÓ?À±½Õıº½j¾¿µÅÂj½ ¶àj¾¿³Fºá

Éfº»¿º(÷ »¶Ê¾1¹±¶–Ó±ºnΫ¾–«¶–¸&º½ Îz¶–±ëº,¾–µŽÃ«º,µŽ½ä¹"Ìͺºn΋Ƞ¹jÀÓ

¸F³ ¹j¶[ºjà#É1³Fº»–º«¾¿³FºáÉÂjÒFƷΒ¹±½F½F±¾¿¹Þ¾¿ºÖÒF¸’¾–ƒ,E¶[º½‹Ë

¾–º½ À+ºn¶ü;–³FºáWɏº»–º¹ÇƎÆÅÂÞÉfºÎ㾿Âã¶[¾–Âj¸M¹Þ¾¹Ç½Õáß¾¿µÅ뺄þ

΋»¹„É1½ÌÍ»¿Â±Ã ¾–³ ºzµŽ½FµÅ¾–µ·¹ÇƇEE^¶–º½d¾–º½ À+ºn¶"µŽ½3©Û²´³Fº

¶–º½d¾–º½ À+ºn¶,Éfº»¿º«¹Ç½F½F±¾¿¹Ç¾–ºÎ^±½Fº«¹Þ¾4¹A¾–µŽÃ-ºjà#¹Ç½&Î⾿³Fº

²/»–ººÈ ¹±½FÓ¹±½F½FÂǾ¹Þ¾¿µÅÂj½ÖÉf¹j¶¶[³ ÂÞÉ1½«¾–Â4¾¿³FºÃ¹ÞÌ龿º»ºÄdË

º»¿áõ¶–º½d¾–º½ À+ºjÛ î ½D¹„ıº»¹ÇÐjº±à¾–³ º¹±½F½F±¾¿¹Þ¾¿Â±»¶¶–¸Sº½d¾

¹Ç»¿Â±Ò ½ Î-!,«Ã«µŽ½Õҋ¾–ºn¶,Âj½¾–³ µŽ¶ÝÌͺºn΋Ƞ¹±ÀÓ¸F³&¹±¶–º"ÈSº+Ìͱ»¿º

΋ºnÀ+µ·Î‹µÅ½ Ð«¾–³ ¹Ç¾1¾–³FºázÉfº»¿º4À+±Ã-ÌÍÂj»[¾¹ÇÈFƎº§º½FÂjÒFб³É1µÅ¾–³

¾–³ ºÀ+±½ÕÄjº½d¾–µŽÂ±½%Û

²´³Fº-¹jÀ¾¿µÅÄjºÆŽº¹±»–½FµŽ½FÐz¸F³ ¹±¶–ºÌÍÂjÆÅƎÂÞÉ(¶Ý¾–³Fº-Ìͺºn΋Ƞ¹jÀÓ

æ(¹±ÃÖ¶[³ ¹„Ée0Hâ¹±»¿ÀÒ ¶±¾–»¹ÇµŽ½FµŽ½FÐ"¶–º+¾f¹±½ Î-¾–³ º¹±½F½FÂǾ¹ÞË

¾¿Â±»4É´¹±¶,µÅ½ ¶[¾–»¿Ò À+¾–ºÎ¾¿Âä¹±½F½FÂǾ¹Þ¾¿º¾¿³FºÃÛ«²´³FºÖ¹Ç½F½ ÂÇË

¾¹Þ¾–ºnÎA¶–º½d¾–º½ À+ºn¶NÉfº»¿º1¾¿³Fº½ä¶[º½j¾fÈ ¹±ÀÓ-¾¿Â¾–³ º¶–º»¿Ä±º»Û

²´³Fº¶[ዶ[¾–ºÃÑÀ³FÂj¶–º§¾–³ º½Fº+åÕ¾ê,EÖ¶[º½d¾–º½&À+º¶Û²´³ ºº+åÕË

¸Sº»¿µÅ뺽j¾AÀ±½ ¶–µ·¶Ê¾¶«ÂÇ̵E’µ‘¾¿º»¹Þ¾¿µÅÂj½ ¶àf΋ÒF»¿µÅ½ Ð’É1³ µŽÀ³

¾¿³Fº¹Ç½F½F±¾¿¹Ç¾–±»¶Éº»–º¹ÇƎÆÅÂÞÉfºÎõ¾–Â’ÃÖ¹ÇÓ±ºäÒ ¶–ºÂÇÌݾ¿³Fº

Âj»–µŽÐ±µŽ½ ¹Çƪ!EEä¶[º½j¾¿º½ Àº¶4¹j¶4¹z»¿º+Ìͺ»–º½ À+ºÖÀ±»¿¸FÒ ¶Û ÌéË

¾¿º»"À±ë¸FƎº+¾–µŽ½FÐâ¹±ÆÅÆ@!Eµ‘¾¿º»¹Þ¾¿µÅÂj½ ¶à#¾–³Fºá^Éfº»¿ºÖ¹±¶–Ó±ºÎ

¾¿Â߹ǽF½ ÂǾ¿¹Ç¾–º^¹’ÌÍÒ »[¾¿³Fº»¦EEÀ±½ ¶–ºÀҋ¾–µŽÄ±ºâ¶–º½d¾¿º½ Àº¶

΋»¹„É1½’»¿¹±½ Î‹Â±Ã«ÆŽáÌÍ»¿Â±Ã¾¿³FºÖ¾¿º¶[¾"¶[º¾Ûz²´³ ºÖ¸FÒF»¿¸&Âd¶[º

±Ì%¾–³Fµ·¶f÷ ½ ¹±ÆY¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½AÉ´¹±¶N¾–Âê6ÊÒ ÎFбº³FÂÞÉÚÉfºÆŽÆI¹±½‹Ë

½F±¾¿¹Ç¾–±»¶¾¿¹±Ð ¶–º½d¾¿º½ Àº¶Ö΋»¹„É1½ßÉ1µÅ¾–³ã¾–³ ºz¾¿»–Ò ºâ΋µŽ¶[Ë

¾¿»–µŽÈFҋ¾¿µÅÂj½âÌÍ»¿Â±ÃÁ¾–³ º"¾¿º¶[¾§À±»¿¸FÒ ¶àI¹j¶ÝÉfº«¶[³ ¹±ÆÅÆ0¶–ººµÅ½

¶–ºÀ+¾–µŽÂ±½—,‹Û

î

½¹„ıº»¹ÇÐjº±àd¾–³ º¹Ç½F½F±¾¿¹Ç¾–±»¶f¾–ÂÕÂjӃAI"뵎½dÒF¾–º¶1¾–Â

¹±½F½FÂǾ¹Þ¾¿ººn¹±À³¶[º¾1ÂÇÌ,}E«¶[º½d¾–º½&À+º¶à‹»¹Ç½FÐjµÅ½FÐÌÍ»¿Â±Ã

¾¿Âƒ%E뵎½dÒF¾–º¶Ûâ²´³FºA¹„Äjº»¹ÇÐjº«¹±Ã«Â±ÒF½d¾ÂÇÌ´¾¿µÅëº?¾¿³Fº

¶–º»¿Ä±º»¾–ÂÕÂjӍ¾¿Â^»¿ÒF½õ¾¿³Fºz¹jÀ¾¿µÅÄjºAƎº¹Ç»¿½FµŽ½FЍ¹±ÆÅÐj±»¿µ‘¾¿³FÃ

¹±½ Î"¶–ºÆŽºÀ+¾¾¿³Fº´½Fº+åվȠ¹Þ¾À³Â±Ì&¶–º½d¾–º½ À+ºn¶/É´¹±¶¹Ç¸ ¸F»–„åÕË

µŽÃÖ¹Þ¾–ºÆÅáK%,ëµÅ½Õҋ¾¿º¶àǹݻ¿º¶[¾/È »–ºn¹ÇÓÌͱ»¾–³ ºf¹±½F½FÂǾ¹Þ¾¿Â±»¶Û

²´³FºÖ¹Ç½ ¹±ÆÅዶ–µŽ¶Â±Ì¾¿³Fº«»–ºn¶[ÒFÆž¿¶§µ·¶§¸F»¿º¶–º½d¾–ºnÎ^µŽ½ ¶[ºnÀË

¾¿µÅÂj½—,FÛ

OH%EC ì Oì L ¯feDíÊH#a

Uè½-¸F»¿ºÄÕµÅÂjÒ ¶ÉÂj»–ÓIà}f»¿µÅƎƛ0MðÝÐj¹ÇµYüjþ/¶[³ ÂÞɏºnÎ4¾–³&¹Þ¾

ÒF½&΋º»ÝÀº»–¾¿¹±µÅ½À+µŽ»¿ÀÒFÃֶʾ¹Ç½ Àº¶àÕµ‘¾Ýµ·¶´¸SÂj¶¿¶[µŽÈFƎº§Ìͱ»1³ÕҋË

Ãֹǽ&¶,É1»¿µÅ¾–µŽ½FÐA»¿ÒFƎº¶Ý¾–Âä¸&º»[ÌÍÂj»–Ã.¹±¶,ÉfºÆŽÆ¹j¶¹z¶Ê¾¹Þ¾¿º+Ë

±ÌéË|¾¿³Fº+Ëè¹Ç»–¾(ÃÖ¹±À³FµŽ½FºÆŽº¹±»–½FµŽ½FÐ?¶–ዶʾ¿ºÃ7ÌÍÂj»ÝÈ ¹j¶[º4½ Â±ÒF½

¸F³ »¿¹j¶[ºÀ³ÕÒF½FÓÕµŽ½FÐ Û <W³&¹Þ¾?¾¿³ ¹Þ¾A¶[¾–Ò ÎFáb΋µ·ÎD½FÂǾA¹jÎÕË

΋»¿º¶¿¶à#³FÂÞÉfºÄjº»nàYÉf¹j¶¾–³Fº?ÀÂj¶[¾§Â±Ì¾¿³Fº?³ÕÒFÃֹǽ’Æ·¹ÇÈS±»

¹±½ Î„Âj»´Ã«¹jÀ³FµŽ½Fº4À+á‹À+Ǝº¶´µŽ½Õı±ƎıºnÎÖ¾¿Â?À+±½&¶Ê¾¿»–Ò À+¾(¶[Ò À³

¹¶–ዶʾ¿ºÃà´½F±»«¾¿³Fºâ»¿ºÆ·¹Þ¾–µŽÄ±ºÀÂj¶[¾«Â±ÌÂjȋ¾¿¹±µÅ½ µÅ½FÐ ¾¿³Fº

¾¿»¿¹±µÅ½FµŽ½FÐMΠ¹Þ¾¿¹ÚÌͱ»^¾–³Fºbë¹jÀ³FµŽ½FºßƎº¹±»–½FµŽ½FÐM¶–ዶʾ¿ºÃÛ

²´³Fµ·¶(¸&¹Ç¸Sº»(É1µŽÆÅÆ/º¶[¾–µŽÃÖ¹Þ¾–º¹Ç½ ÎÀ+Âj½d¾–»¹±¶[¾f¾¿³Fº¶–º"ÀÂj¶[¾¿¶

»¿ºÆ·¹Þ¾¿µÅÄjº,¾¿Â«¸&º»[ÌÍÂj»–Ãֹǽ&À+º±Û

²#§µŽ½Õıº¶[¾–µŽÐj¹Ç¾–º¾–³Fº(ÀÂj¶[¾¿¶ÂÇÌI¹³dҠë¹±½»¿ÒFƎº+ËýÉ1»–µÅ¾–µŽ½FÐ

¶–ዶʾ¿ºÃàÉfºÒ ¶–ºÎD¹ ¶[µŽÃ«µÅÆ·¹Ç»«ÌÍ»¹ÇëºÉf±»¿Ó’¾– ¾¿³ ¹Þ¾ÖÂÇÌ

f»¿µÅƎƣ0ðÝÐj¹±µ|ÛÚ²´³Fºâ¶–ዶʾ¿ºÃˆÉf¹j¶«É1»–µÅ¾[¾¿º½W¹±¶Ö¹Àбµ

¶¿À+»¿µÅ¸F¾#É1³Fµ·À³À+±ҠƎÎ4ÈSºN¹jÀÀ+ºn¶–¶–ºÎ4¹jÀ+»¿Âj¶¿¶S¾–³FºÉºÈ§ÌÍ»–ÂjÃ

¹ÖÈ »–ÂÞÉ(¶–º»Ý¶–Ò À³â¹j¶Ýð(º¾¿¶¿À¹±¸&ºÂj»£Uè½d¾–º»–½ º+¾,øåÕ¸ ÆÅÂj»–º»Û

ñ#µÅÓjºêf»¿µÅƎÆJ0Ùð(Ðd¹Çµ¶ê!"¹Ç¸F¸F»¿Âj¹jÀ³%àd±ÒF»´»¿ÒFÆźn¶fɏº»–º

È ¹j¶[ºnÎõÂj½ßòº»¿Æ»¿ºÐjÒFÆ·¹Ç»"ºå‹¸F»–ºn¶–¶–µŽÂ±½ ¶Û’ÿÝÂÞɏºÄ±º»àµŽ½‹Ë

¶[¾–ºn¹±Î±Ì&ºåÕ¸ Æŵ·À+µÅ¾–ÆŽá΋º+÷&½FµÅ½ Ð»¿ÒFƎºf¹jÀ¾¿µÅÂj½ ¶/¹±½ Î³&¹„ÄdµŽ½FÐ

΋µIº»¿º½d¾1ÓdµŽ½ ÎF¶´Â±Ì»¿ÒFƎº¶àÕ±ÒF»1»¿ÒFƎº¶fµÅë¸FƎµ·À+µÅ¾–ÆŽáz΋º÷ ½Fº

¾¿³FºµŽ»(¹±À+¾–µŽÂ±½ ¶ÈÕá?Ò ¶–µÅ½FЫ΋µSº»–º½d¾´¶–áÕÃ"ÈS±Ʒ¶N¾¿Â-ÎFº½F±¾–º

¾¿³FºÖ¸FÆ·¹±À+ºÃ«º½d¾ÂÇÌf¾–³FºÖÈ&¹±¶–ºÖ½F±ÒF½ ¸F³ »¿¹j¶[ºË”º½ À+ƎÂj¶–µÅ½ Ð

¸ ¹±»–º½d¾–³Fºn¶[ºn¶4¸F»¿µÅÂj»§¾–Â^¹±½ Î¹ÞÌ龿º»4¾¿³FºA¹Ç¸ ¸FÆŵ·À¹Ç¾–µŽÂ±½ ÂÇÌ

¾¿³Fºâ»¿ÒFÆźjÛö²¹ÇÈFƎº‘¸F»¿º¶–º½d¾¿¶Ö¹À±ë¸ ¹±»–µ·¶[Âj½b±ÌÂjÒF»

»¿ÒFƎºAÌÍÂj»–ÃÖ¹Þ¾Ö¹ÇÐd¹ÇµŽ½ ¶[¾"¾–³&¹Þ¾«ÂÇÌêf»¿µÅƎƪ0ð(Ðd¹Çµ¶Ûõ²´³Fº

»¿ÒFƎº¶1¸F»¿º¶–º½d¾¿ºÎä³Fº»¿º4ÃÖ¹„áAÈSºÀ±½ ¶–µŽÎFº»¿ºÎzÆźn¶–¶(ÀÒFÃ-Ë

ÈSº»¶[Âj뺧¹±½ ÎzÃ-Âj»–º§µŽ½d¾–ÒFµÅ¾–µŽÄ±ºjÛ

Uè½õ¹Éf¹„á⾖³ ¹Ç¾"µŽ¶¶[µŽÃ«µÅÆ·¹Ç»¾–Âf»–µŽÆŽÆS0]ðÝÐj¹±µF¶¶–áÕ¶[Ë

)+*,%-!/.10(2*,345!7698:.(&;<'&!70% = 20-0(2* 3?>@4BAC *EDGF .-%-! HEAJI2*,3>@8:.-;<'&!70

K#LEM > KNLOM = K#LOM "

8P.-2$Q4B3&2 R:S

M

*TC R:S

M

*TC, R:S

MVUWUNUYX[Z ½&\ 65]^_`A&C 0a ½Jbbb K:cedOMfX[Z ½&\ 0<]^g^"a X+h 0]#iikjlB=TmonJaBp KPced qkM/X[h 0]Npf65r#a X r0]^4B4BD:nJ=,nJa K:ced MJX[Z ½\ 0]Ns&a X r0]#t:g#a

lC,!Wu,A.-&0 Xr@0<]^4B45D:nf= nJa vwS M *TC, d S M *TC,

d S M *TC KPcedyx`M/X[h 0]^izikjlB=TmonJa X[Z ½\

65]Npf6Br^{ /| a

d S M *TC,

45!76

lC,! Z }~€}5T‚Nƒ^„…ƒ^†

\ ‡

ZƒPˆ5‰Š„‹:}B‚Nƒ^„P…5ƒ^†

\

Z?}5T‚N~PŒ[eŽ}Pˆ

\W‘

Z _kAC0 j s?4B’BHrm

\

ukA&.-&0

“”!/;70A&• "F !f–P—˜*k™^™w.-*`šG›G–œo X 4B!76B™^™^ž ŸGA&.-' ™^™^ž˜uk.-2{ /|,™^™^ž˜a &_`AC0¡/™ X sz¢?£¤–¥a

lC,! ¦ ¦ ¦

>B ,2;/&0(2A* X "F ! –P— * ™^™ aP.(&* šG›G– œ X 4B!76 ™^™^ž ŸGA.-' ™^™^ž a X u,.-2{,/| ™^™^ž a X _`A&C 0 ¡/™ sz¢?£ ¤– a

²/¹±ÈFÆź(jÔNôÂ±Ã«¸ ¹Ç»¿µ·¶[Âj½AÂÇ̱Ҡ»(À+ÒF»¿»–º½d¾f»¿ÒFƎº§Ìͱ»¿Ã«¹Ç¾1É1µ‘¾¿³/f»¿µÅƎÆ0ÙðÝÐj¹±µü+dþ

»¿ÒFÆźn¶«¹Ç»¿ºä¹±¸F¸&º½ Î‹ºnÎõ±½d¾¿Â^¾¿³Fºº½ ÎbÂÇÌ,¾–³FºÆŽµŽ¶[¾«¹±½ Î

º¹jÀ³»–Ò ÆźA¹±¸F¸FƎµÅºn厽õ±»Î‹º»nàµÅ½¾¿³FºA¸&¹Ç»¹±Î‹µŽÐ±ÃïÂÇÌݹ

¾–»¹Ç½&¶ÊÌÍÂj»–ÃÖ¹Þ¾¿µÅÂj½‹ËýÈ ¹±¶–ºÎÖ»¿ÒFƎº§Æŵ·¶Ê¾nÛ

§žWYX šFk$¨ßa:[^]jh!]Yc7p ¡Ï¢ ™Sk [^]Y k#cºh!œ

²´³Fºf»–Ò Æź˔É1»¿µ‘¾¿µÅ½ Ð(º+勸Sº»¿µÅ뺽d¾¶/Éfº»¿ºNÀ±½ Î‹Ò&À¾–ºnÎÈÕṠб»¿Â±Ò ¸ÂÇÌ@AI?¹±Î‹ÄÞ¹±½ À+ºnÎÀ+±ë¸FÒF¾–º»§¶¿À+µŽº½ Àº¶[¾–Ҡ΋º½d¾¿¶à Ò ¶–µÅ½ Ð^¾¿³FºµŽÎ‹º½d¾–µ·À¹ÇÆf¾¿º¶[¾Ö¶–º+¾?¹j¶"µŽ½ß¾¿³Fº¹Ç½F½ ÂǾ¿¹Ç¾–µŽÂ±½ º+勸Sº»¿µÅ뺽j¾¶«¹Ç½ Îõ¾–³Fº¶¿¹ÇëºzµŽ½FµÅ¾–µ·¹ÇƇ!EEâÐj±ƷÎ߶[¾¿¹±½‹Ë ÎF¹±»¿Îö¶[º½j¾¿º½ Àº¶äÌÍÂj»È&±¾–³QµÅ½FµÅ¾–µ·¹ÇÆ4È »¿¹jÀÓ±º+¾¿µÅ½ Ðã¶[¾¿¹±½‹Ë ÎF¹±»¿ÎF¶%бÒFµ·ÎF¹Ç½&À+ºN¹±½ Î§»–Ò ÆÅºË Ò ¹±ÆŵžÊá(ÌͺºÎ‹È ¹jÀÓݾ¿³F»¿Â±ÒFÐj³‹Ë ±ÒF¾1¾–³FºµÅ»1Éf±»¿ÓIÛ ©«ª,¬­ ®°¯`­k±`±²¬k³°±k´ µ«¶·`¸N¹`¹7º«»,¼$½`¾¿»kÀÁ”À$¾Ã»k¼°½`¾¿»kÀ°ÁT”ÀÄÆÅ

©ÈÇ(®°±`­ ÉÊ®°±k­ É˱`­”ÌͲÎ`¬°ÏÐ¯`Ñ5Ç®°±k­ ÉÆ®°±`­ ÉÐÇ/±`­”Ì ÍÊÎk¬°ÏÐ

µVÒ »kÀ`ӔÔkÕ°ÖÀ

ª

¾²Å²µÃ¶”½`½¿ÔÖ×`Ø°¶ ÙÆÚ²Å

µVҊÀ°Á,Ԑ¶,»,¼$½,ÄÆÅ«µ¿Ô°Ö×`Ø°¶ÙÊÚÆÅ

©²­®°Û ³”ÍËÜkÝÈÇ/­ ÞÆÛ³`Þ$ß,´$ÐïkÑÈÇ/­ ®°Û³”ÍÆÜkÝÊ­ÞËÛ ³`Þ$ß ´$Ð

µ

Ç

Á

Þ°±,àâá-Û Þ°±,àâá

»

®°Û ³”ÍWá(­ ®°Û ³`͏Р¶B¹`¹<º¶ Ç/ã`ÜNá1©$Ð ¹`¹7º ã ¶,ä,¼N¹`¹<ÄåҘ»kÀ`ӔÔ,Õ$ÖÀ ª IJڲŠµ«¶·`¸`·N¹`¹7¾²¶ Çæ ¼”Ô á ½`½ Ð ¹k¹7ºÆ¶ Ç ¼”Ô á+æ · æ°ã`Ü#á[æ Á`ç Ð »k¼$½k¾ ã ¶·`¸N¹`¹7ºéè`Ø`·`¸°ºêҊ»kÀ`ӔÔ,Õ$ÖÀ ª IJÚÊÅ ©Èǘ®°Û,àЯ`ÑÈǀÍ,É°­,Ͳ®°Û,àËÐ Ò Ç Ô É°­,Íâá[ÍkÉ°­,͏Р¶`¶ ¼”ԵûkÀ`Ó`ÔkÕ$ÖÀ ª ÄÆÅ¿Ú

©ÈÇë­ ®°Û ³”Í«ìîíï`ðËÐ

µ

Ç7Û Þ°±,àâá-­ ®°Û ³”Í$Ð ¶B¹`¹7º Ç/ã`Ü#á-©$Ð ¶B¹k¹7ºÆ¶kä,¼N¹`¹ÄÊÅ µVÒ »kÀ`ӔÔkÕ°ÖÀ ª ÄñÒ<º¿»kÀ`ӔÔkÕ°ÖÀ ª ¾Ãڐº¿Úʶ ¯ ò ·`¸ ¯óã Ҋ»kÀ`ӔÔ,Õ$ÖÀ ª IJÚó¶ ¯ ·`·k¸ ¯ Ò »kÀkӔÔkÕ$ÖÀ ª IJÚÆÅ

©¿æ`¬Û Þ°Û ³kÞ$ÌÊ­,¬”´¿³°Ì³°­`±`± ಮ°­”Ì,´

À æ$Ì µ«¶¼”Ô#¹`¹7ºÊ¶ æ · æ Å ©Èôkô/­ ޔõ^ökö÷³$̳°­`±k±,àøÏ`ÌÞ#öÍËÏÞË­¿®­”Ì,´ À æ µVҀ¶ ã çkÄ^¹k¹<Ä²Ú Ç/­Þ”õâá1ùÐ ¶êÒ÷¶ ã çkÄB¹`¹<IJÚÊÅ ©YúÛ,¬”´ËÌ`ÏÞ`û±k´k͐ÛÞÊ®°­”Ì,´ À æ$Ì µ«¶ Ç ¼”Ô á Ø`ü á Ù æ?á Ù`¼”Ô Ð Å¿è`Ø`·k¸

©ÊÌ,Ûzú´«Þ`³ ú®´k¬°Ì«­ ¬”´ÆÌ`ÏÞ`û±k´k͐ÛÞË®­”Ì,´

À

æ°Ì

µVÒ »kÀ`ӔÔkÕ°ÖÀ

ª

ÚêҀ¶kä,¼ÊÚ²Å

©ÈÇýú°³$ßÉ°ïúÛ”Ì ÍîÐ¿Û þ

µ«¶ Ç ¼”Ô á ·k¸ Ð ¹`¹7º Ç1ú³$ßÉ?áÿúÛ”Ì ͏Р¶ÆŲ¶`ÖÀ

µÅÐjÒF»¿ºÏ‹Ô ½?ø勹±Ã«¸FÆź,æ1ÒFƎºÝñ%µ·¶Ê¾nÛ0ñ%µŽ½Fº¶NÈ&ºÐ±µŽ½F½FµŽ½FÐ

É1µÅ¾–³³ ¹±¶–³äë¹±»–Ó‹¶4ü þ´¹±»–º4À±ë뺽d¾¿¶Û ²´³Fºz¾–µŽÃ-ºz¾–³&¹Þ¾-¾–³Fº¶Ê¾¿Ò Î‹º½j¾¶«¶[¸Sº½d¾«Â±½¾¿³FºA¾¹±¶–Ó Ä޹ǻ¿µŽºÎâÉ1µ·Î‹ºÆÅájàIÌÍ»–Âjù?ëµÅ½ µÅÃÒFÃÂÇÌϱې,?³FÂjÒF»¶(¾¿Âä¹ ÃÖ¹Þ勵ŽÃ"ÒFÃ]ÂÇÌ2-³F±ÒF»¶à‹É1µ‘¾¿³¹±½¹„ıº»¹ÇÐjºÝ±Ì2,³FÂjÒF»¿¶Û fºÀ¹ÇÒ ¶–º4Éfº"À¹±¸‹¾–ÒF»¿ºÎ¹±½ Î¶¿¹„ıºÎzºÄjº»¿ázÀ³ ¹±½Fбº§¾¿³Fº ¶[¾–Ò ÎFº½d¾¿¶äÃÖ¹±Î‹º¾–Âß¾–³FºµÅ»»¿ÒFƎºÆŽµŽ¶[¾¹Ç½ ÎWƎ±ÐjбºnÎWºÄdË º»–á«Ã«Â±Ò ¶–º§À+ƎµŽÀÓ-¾–³ ºáÖÃÖ¹±Î‹ºÉ1³FµŽÆź§Î‹ÂjµÅ½Fо–³ º,ºåÕ¸Sº»–Ë µŽÃ«º½d¾àµ‘¾É´¹±¶§¸SÂj¶¿¶–µÅÈFƎº«Ìͱ»4Ò&¶§¾–¾¿»¿¹jÀ+º-¾–³FºÖ¸Sº»–Ìͱ»–Ë Ãֹǽ&À+º(±ÌY¾–³FºÝ¶–ዶʾ¿ºÃ¹±¶N¹§ÌÍÒF½ À+¾–µŽÂ±½?±ÌY¾–µŽÃ-ºjÛ2/µŽÐ±Ò »–º ݶ[³FÂÞÉ(¶#¾–³ º»¿ÒFƎºNƎµŽ¶[¾À±½ ¶[¾–»¿Ò À+¾–ºÎÈdá§Âj½FºN±ÌF¾–³Fº´¶–ÒFÈ‹Ë 6ʺnÀ¾¿¶Û²´³ º Ò&¹Ç½d¾–µÅ¾¿¹Ç¾–µŽÄ±º§»–ºn¶[ҠƑ¾¶1ÂÇ̾–³Fº4»¿ÒFƎº+ËýÉ1»–µÅ¾–µŽ½FÐ ºåÕ¸Sº»¿µŽÃ-º½d¾¿¶1¹Ç»¿º§¸F»¿º¶–º½d¾–ºnÎAµŽ½ä¾–³Fº4½Fºåվݶ[ºnÀ¾–µŽÂ±½#Û H#C OR H ì

°ÆDH#aÕí Ê°‹a Wí ÊH

C OÊ°FO ì LÏX1a ^® ì,ì _0°‹E°FOÊ_ ì

Active Learning (Expert Annotation)

Rule Writing (Non-expert)

Performance (F-Measure)

Human Labor (Minutes)

Sequential Training (Expert Annotation)

Active Learning (Non-expert Annotation)

80

82

84

86

88

90

0

50

100

150

200

250

300

350

400

µÅÐjÒF»¿º>%FÔzôÂj½ ¶–º½ ¶–Ò ¶-òº»–Ìͱ»¿Ã«¹±½ À+º«ÌÍÂj»«Ü‹áÕ¶[¾–ºÃÖ¶À±½ ¶[¾–»¿Ò À¾¿ºÎÄÕµ·¹^æ1Ò Æź¼<»¿µÅ¾–µŽ½FРའ±½‹Ëýº+勸Sº»–¾ ½F½ ÂǾ¿¹Ç¾–µŽÂ±½

¹Ç½&Îz²/»–ººÈ ¹±½FÓ ½F½FÂǾ¹Þ¾¿µÅÂj½ üYU轠΋µŽÄÕµŽÎ‹Ò&¹ÇÆ%À+Ò »–Äjº¶1¹Ç»¿ºµÅ½—µÅÐjÒF»¿ºêLÕþ

Hand-Coded Rules (non-expert)

Trained on

Annotation

(non-expert)

Trained on Annotation (expert)

Performance (F-Measure)

Human Labor (Minutes)

70

75

80

85

90

0

50

100

150

200

250

300

350

400

µÅÐjÒF»¿º;L Ô

½F½ ÂǾ¿¹Ç¾–µŽÂ±½Äjº»¶[Ò ¶"æ1ÒFƎº;<»¿µÅ¾–µŽ½FРÔÖòº»–Ë

Ìͱ»¿Ãֹǽ Àº4΋º+¾¹ÇµŽÆźnÎAÈÕáAµŽ½ Î‹µŽÄÕµŽÎFÒ ¹ÇÆY¸ ¹±»[¾¿µŽÀµÅ¸&¹Ç½d¾Û

EEÖ¶[º½d¾–º½&À+º4бÂjƎζ[¾¿¹±½ ÎF¹±»¿Î¶–º+¾à Ìͱ»,µÅ½FµÅ¾–µ·¹ÇÆ/µÅ½&¶[¸SºÀ+Ë

¾–µŽÂ±½>¹Ç½&ÎϸSº»–Ìͱ»¿Ã«¹±½ À+ºbÌͺºn΋Ƞ¹jÀÓK¾–³F»¿Â±ÒFÐj³F±ÒF¾¾¿³Fº

»¿ÒFÆź˔É1»¿µÅ¾–µŽ½FÐ߸F»¿Â‹À+ºn¶–¶Û²´³Fº³ µÅÐj³Fº»¶Ê¾¹Ç»–¾–µŽ½FÐ߸S±µŽ½d¾

Ìͱ»¾–³ º,¹Ç½ ½FÂǾ¹Þ¾–µŽÂ±½FËý΋»¿µŽÄ±º½ÖƎº¹±»–½ µÅ½FÐÀ+ÒF»¿Ä±ºn¶É´¹±¶NÎFÒFº

¾–Â’¾¿³Fºä̹±À¾«¾¿³ ¹Þ¾Ö¾¿³FºÃ«¹jÀ³FµŽ½FºÆźn¹Ç»¿½FµÅ½ Ð¹ÇƎбÂj»–µÅ¾–³ Ã

À+ÂjÒFÆ·Î-ÎFµŽ½FµÅ¾–µ·¹ÇƋ¾¿»¿¹±µÅ½ µÅ½FЧµŽÃ«Ã-ºn΋µ·¹Þ¾–ºÆÅá±½-¾–³ µŽ¶Î ¹Þ¾¿¹ Û

²´³Fº§»¿ÒFÆź˔É1»¿µÅ¾–µŽ½FÐ"Ǝº¹±»–½Fº»¿¶f¹ÇÆ·¶–Â"»¿ºÀ+ºµÅÄjºÎAµÅëëºÎ‹µ·¹Þ¾¿º

Ìͺºn΋Ƞ¹jÀÓ^±½ ¾¿³FºµŽ»÷&»¿¶[¾»–Ò Æźn¶Ò ¶–µÅ½ Ð¾–³Fµ·¶Î ¹Þ¾¿¹ à/Ƞҋ¾

Éfº»¿º´¶–ÆŽÂÞɏº»/¾¿Â4µÅ½&À+±»¿¸S±»¹Þ¾–º¾–³ µŽ¶ÌͺºÎ‹È&¹±ÀÓ"µŽ½d¾–¾–³ ºµŽ»

½FºÉÙ»¿ÒFÆźn¶Û²´³Fº-¶–µÅå⻖ÒFƎº+ËýÉ1»¿µ‘¾¿º»¶ÝÒ ¶–ºÎ^Ìͱ»4À±ë¸ ¹Ç»–Ë

¹Þ¾¿µÅÄjº§¸FÒF»¿¸&Âd¶[ºn¶´Éº»–º4¹ÇƎÆY½ ¹Ç¾–µŽÄ±º¶–¸&ºn¹ÇÓ±º»¿¶àÕÉ1³FµŽÆź§¾¿³Fº

¹Ç½ ½FÂǾ¹Þ¾–µŽÂ±½zб»¿Â±ÒF¸zµÅ½&À+ƎҠ΋ºÎ—½FÂj½‹Ë”½&¹Þ¾–µŽÄ±º§¶–¸&ºn¹ÇÓ±º»¿¶Û

ÒF½ Ód½ ÂÞÉ1½-È µŽ¹j¶[ºn¶0µÅ½?¶¿¹Çë¸FƎºÝ¶–ºÆŽºÀ+¾–µŽÂ±½«µÅ½«Ì¹„Äj±»0±ÌY¹±½‹Ë

½F±¾¿¹Ç¾–µŽÂ±½%à±¾–³Fº(»¿ÒFƎº+ËýÉ1»–µÅ¾–º»¿¶É1³ Â4ɏº»–º1ºÄ„¹±ÆÅÒ&¹Þ¾–ºnÎֹǽ Î

µŽÆÅƎҠ¶[¾–»¹Þ¾¿ºÎDµŽ½W¾–³Fºn¶[ºÐ±»¹Ç¸F³&¶Öɏº»–ºâ¾–³Fº†õ¶Ê¾¿»–Âj½Fбºn¶Ê¾

¸Sº»–Ìͱ»¿Ã«º»¶Â±ÒF¾NÂÇÌY¾¿³FºÝ¸SÂÕ±ÆSÂÇÌAIojÉ1³ µÅƎºÝ¹ÇƎÆI§¹Ç½F½ ÂÇË

¾¹Þ¾–µŽÂ±½b»–ºn¶[ҠƑ¾¶¹±»–ºAÀ±ë¸ ¹±»–ºnÎYÛ.,º¶–¸FµÅ¾–ºä¾–³ µŽ¶"̹„ıÂj»[Ë

¹±ÈFÆź ¾¿»–ºn¹Þ¾¿Ã-º½d¾à4»¿ÒFÆź˔É1»¿µÅ¾–µŽ½FÐW¶Ê¾¿µÅƎÆÒF½ ÎFº»¿¸&º»[ÌÍÂj»–ÃÖ¶

¹±½F½FÂǾ¹Þ¾¿µÅÂj½‹Ë”È&¹±¶–ºÎ Ǝº¹Ç»¿½FµŽ½FÐ^É1µÅ¾–³D¶[¾¿¹Þ¾¿µŽ¶[¾–µ·À¹±Æ1¶[µŽÐ±½FµÅÌéË

µ·À¹±½ À+º§ÂÇÌ7Œ¤EEÌͱ»\EE"뵎½Õҋ¾–ºn¶´ÂÇÌ/µŽ½Õıºn¶Ê¾¿Ã-º½d¾à

¹±½ ÎÉ1µ‘¾¿³â¶[µŽÐ±½ µ‘÷&À¹Ç½ Àº4ÂÇ̌eEE,ÌÍÂj»1¾–µŽÃ«º¶(Ò ¸¾–Â

¹Ç¾ÝÆźn¹±¶[¾ê‹Û,-³FÂjÒF»¿¶Û´²´³Fº³FµŽÐ±³Ä޹ǻ¿µ·¹Ç½ Àº4µÅ½¾¿³Fº»¿ÒFƎº+Ë

É1»¿µ‘¾¿º»Ö¸SÂÕ±ÆÝÀ±ë¸FƎµŽÀ¹Þ¾–ºn¶?¹÷ ½ Î‹µŽ½Fб̧¶–µÅÐj½FµÅ÷&À¹±½ À+º

ÈSºáj±½ Îz¾–³ µŽ¶Ý¸&ÂjµÅ½d¾à&ÈFҋ¾,¹Ç¾,¹ÇƎÆ

Ò ¹±½j¾¿µ‘¾¿µÅºn¶1ÂÇÌ0³ÕÒFÃֹǽ

Æ·¹ÇÈS±»0µŽ½Õıº¶[¾–ºnÎYà±Ã«ºn¹Ç½«¹Ç½F½F±¾¿¹Ç¾–µŽÂ±½‹ËýÈ ¹±¶–ºÎ9/˔ëºn¹±¶–ÒF»–º

Âjҋ¾–¸Sº»–Ìͱ»¿Ã«ºÎQ»–Ò Æź˔É1»¿µ‘¾¿µÅ½ ÐD¹±½ Îö¾–³Fºn¶[º ¾¿»–º½ ÎF¶â¹±¸‹Ë

¸Sº¹±»´¾–ÂÖº+åÕ¾¿»¿¹±¸&ÂjƎ¹Ç¾–º±Û

W•” dgc7n›šœ!]Yœµ_l¸

 n›c3Z£k [^¸_¥[^ n›c7fk_lc

hŸ7k—dgc7cž_¥hn›h]Y_lcŠn›œb

Uý¾¹Ç¸ ¸&ºn¹Ç»¶1¾–³&¹Þ¾¹?ÃÖ¹^6ÊÂj»,ƎµŽÃ-µÅ¾–µŽ½FÐä̹±À+¾–Âj»Ý¾¿Âz³FµŽÐ±³ º»

¹±½F½FÂǾ¹Þ¾¿µÅÂj½‹Ë”È&¹±¶–ºÎ’Æźn¹Ç»¿½FµŽ½FеŽ¶"¾–³ ºz¹±ÀÀ+ÒF»¹±ÀáâÂÇÌ1¾¿³Fº

¹±½F½FÂǾ¹Þ¾¿Â±»¶"¾¿³FºÃÖ¶–ºÆŽÄ±ºn¶»¿ºÆ·¹Þ¾¿µÅÄjºA¾¿Â’¾–³FººÄ„¹±ÆÅÒ&¹Þ¾–µŽÂ±½

Ðj±ƷÎö¶[¾¿¹±½ ÎF¹Ç»ÎÙü;–³Fºõ²/»¿ººÈ&¹Ç½FÓWµŽ½M¾¿³Fµ·¶âÀ¹j¶[º„þÛÁ²#Â

¶[¾–Ò ÎFá7¾–³ µŽ¶D̹jÀ¾¿Â±»nà^¹Þ¾D¾–³ º¼º½ ÎÑÂÇ̍¾–³FºµÅ»Ú¹jÀ¾¿µÅÄjº+Ë

Ǝº¹±»–½FµŽ½FÐKº+勸Sº»¿µÅ뺽j¾¶¹Ç½F½ ÂǾ¿¹Ç¾–Âj»¿¶’Éfº»¿ºD¹j¶[ÓjºÎϾ–Â

¹±½F½FÂǾ¹Þ¾¿ºä¹^ÌÍÒF»–¾–³Fº»¼!EE¶[º½j¾¿º½ Àº¶ÌÍ»¿Â±Ã ¾–³ º¶¿¹Çëº

¾¿º¶[¾0Π¹Þ¾¿¹,Ò ¶–ºÎ¾–ºÄÞ¹ÇƎҠ¹Þ¾¿ºN¾¿³Fº´Æźn¹Ç»¿½FµŽ½FÐ,¹±ÆÅÐj±»¿µ‘¾¿³FÃÖ¶Û

²´³FºµÅ»8#Ëý뺹j¶[ÒF»¿ºÖ¸Sº»–Ìͱ»¿Ã«¹±½ À+ºÖÂj½’¾–³Fµ·¶"ÎF¹Ç¾¿¹ à¹j¶4µ‘Ì

¾¿³Fºá§Éfº»¿º¹(À±ë¸&º¾–µŽ½FÐ,¹±½F½F±¾¿¹Þ¾¿µÅÂj½"¶–áÕ¶[¾–ºÃànµ·¶/бµŽÄ±º½

µŽ½ö²¹ÇÈFƎº¦FÛײ´³Fºn¶[ºÃ-ºn¹±¶–ÒF»¿º¶?±Ì"¹ÇÐj»–ººÃ«º½d¾AÉ1µÅ¾–³

¾¿³Fº,Ðj±ƷÎ?¶[¾¿¹Ç½&ÎF¹Ç»ÎÖºIºÀ+¾–µŽÄ±ºÆÅáÖÀ+Âj½ ¶[¾–µÅ¾–Ò‹¾¿º¶´¹Ç½?Ò ¸F¸&º»

!EE³FºÆ·ÎÕËý±ҋ¾(¶–º½d¾–º½ À+ºn¶

½F½F±¾¿¹Þ¾¿Â±»‡ ‹Û

½F½F±¾¿¹Þ¾¿Â±»£ ‹Û,^L

½F½F±¾¿¹Þ¾¿Â±»@% ›±ÛI

½F½F±¾¿¹Þ¾¿Â±»°L EFې}E

½F½F±¾¿¹Þ¾¿Â±»£, FÛéAI

½F½F±¾¿¹Þ¾¿Â±»@† †FÛéL

½F½F±¾¿¹Þ¾¿Â±»ÏI %Fۆ

²¹ÇÈFƎº£‹Ô

½F½ ÂǾ¿¹Ç¾–µŽÂ±½Öòº»–Ìͱ»¿Ãֹǽ Àº´Â±½/EE²/º¶[¾fÜÕº¾

ÜÕº½j¾¿º½ Àº¶

²´³dÒ&¶(¾¿ÂÖÌÍÒF»–¾–³Fº»,¸FÒF¾¹Ç½ ½FÂǾ¹Þ¾–µŽÂ±½FË|¾¿»¿¹±µÅ½Fºnζ[ዶ[¾–ºÃ

¸Sº»–Ìͱ»¿Ã«¹±½ À+º^µÅ½Ú¸Sº»¶–¸&ºnÀ¾–µŽÄ±ºjà@µÅÐjÒF»–º-,¶–³FÂÞÉ(¶Ö¾¿³Fº

¸Sº»–Ìͱ»¿Ã«¹±½ À+º ±̵Ž½ Î‹µŽÄdµ·Î‹Ò ¹±Æ4¾–»¹ÇµŽ½FºnÎö¶–ዶʾ¿ºÃÖ¶»–ºÆŽ¹ÇË

¾–µŽÄ±ºâ¾– ¾–³ º^³FµŽÐ±³Fºn¶Ê¾A¹jÀ³FµŽºÄ±ºnÎã¸&º»[ÌÍÂj»–Ãֹǽ&À+ºÂÇ̧¾¿³Fº

¹Ç½ ½FÂǾ¹Þ¾–Âj»§Â±½ É1³Fµ·À³^¾¿³ ¹Þ¾"¶–ዶʾ¿ºÃÉ´¹±¶,¾¿»¿¹±µÅ½FºnÎYÛ(Uè½

º¹jÀ³’À¹±¶–º±àY¾¿³FºÖ»¹Þ¾–µŽÂµŽ¶4ÀÆÅÂd¶[º-¾¿Â‘±à%µŽ½ Î‹µ·À¹Ç¾–µŽ½Fо–³ ¹Ç¾

¾–³ º,ÃÖ¹±À³ µÅ½Fº,Æźn¹Ç»¿½FµŽ½FÐë‹΋ºÆI¹±À³FµŽºÄjº¶N¸&º»[ÌÍÂj»–Ãֹǽ&À+º

À+ƎÂj¶–º¾–Â侖³ ¹Ç¾ÂÇ̏¾–³Fº?¹±½F½FÂǾ¹Þ¾¿Â±»É1³FÂj¶–ºÖÎF¹Þ¾¹zµÅ¾4Éf¹j¶

¾–»¹ÇµŽ½FºnÎAÂj½%Û

System 6

System 5

System 4

System 3

System 1

System 2

Human Annotator’s Performance (relative to Treebank)

Learned System Performance as percentage of

Human Labor (Minutes)

89

90

91

92

93

94

95

96

97

98

99

100

0

50

100

150

200

250

µÅÐjÒF»¿º,‹Ôbòº»–Ìͱ»¿Ã«¹±½ À+º^ÂÇÌæ(¹±ÃÖ¶[³ ¹„É’0 ^¹Ç»À+Ò ¶

¶–áÕ¶[¾–ºÃѾ–»¹ÇµŽ½FºÎÂj½^¹Ç½ ½FÂǾ¹Þ¾–µŽÂ±½&¶ÝÈÕá

½F½ ÂǾ¿¹Ç¾–Âj»

û

àI¹j¶

¹ã¸&º»¿Àº½d¾¿¹±Ð±º’ÂÇÌ-¾–³ ¹Ç¾â¸&º»¿¶–±½$¶äÂÞÉ1½Q¸&º»[ÌÍÂj»–Ãֹǽ&À+º

뺹j¶[ÒF»¿ºÎ§¹±Ðj¹ÇµŽ½ ¶[¾Y¾–³Fºf²#»¿ººÈ ¹Ç½ Óü¹±½4ºIºÀ+¾–µŽÄ±ºÒF¸ ¸&º»

ÈS±ÒF½ Î&þÛ

_Naj°9_1Z(HW[aP_C CF_ada9_1Z(E

OH%EC ì O ì L1_®R EC O[ad_ ì

²/»¿¹j΋µ‘¾¿µÅÂj½ ¹ÇƎƎá±à´ºÄÞ¹ÇƎҠ¹Ç¾–µŽÂ±½Wë‹΋ºÆ·¶?µŽ½D¾–³FºÃÖ¹±À³FµŽ½Fº

Ǝº¹Ç»¿½FµŽ½FÐ Æŵž–º»¿¹Ç¾–ÒF»¿ºÃ«º¹±¶–ÒF»¿º¸&º»[ÌÍÂj»–Ãֹǽ&À+ºä»–ºÆŽ¹Ç¾–µŽÄ±º

¾–ÂÄÞ¹±»–µ·¹ÇÈFƎº

Ò ¹Ç½d¾–µÅ¾–µŽº¶D±̍¾¿»¿¹±µÅ½ µÅ½FÐ7Π¹Þ¾¿¹ Û ²´³Fµ·¶

뺹j¶[ÒF»¿º§µŽ¶(µÅ½ ¹±¸F¸F»¿Â±¸Fµ·¹Þ¾¿º±àF³ ÂÞɏºÄ±º»nàdÌͱ»ÝÀ±½d¾–»¹±¶[¾–µŽ½FÐ

ÎF¹Ç¾¿¹Þ˔¾–»¹ÇµŽ½FºnÎÉ1µ‘¾¿³b»¿ÒFƎº+ËýÉ1»–µÅ¾–µŽ½FВ¹Ç¸F¸F»¿Âj¹jÀ³Fº¶"É1³Fº»¿º

¾–µŽÃ«ºb¹±½ ÎKƎ¹±È&Âj»^À+Âd¶Ê¾’¹Ç»¿º¾–³Fºß¸F»–µŽÃֹǻ¿áMÄ޹ǻ¿µ·¹ÇÈFƎº¶Û

ÿ(º»–ºÝɏº,¸F»–ºn¶[º½d¾À+Âd¶Ê¾Në‹΋ºÆŽ¶f¹ÇƎÆÅÂÞÉ1µŽ½FÐ4¾¿³Fº¶–ºÝ΋µIº»–Ë

º½d¾«¹Ç¸F¸F»¿Âj¹jÀ³Fº¶4¾–ÂâÈSºäÀ±ë¸ ¹±»–ºnΒÎFµÅ»¿ºÀ+¾–ÆŽá ¹±½ ÎÂjȋË

6ʺÀ+¾–µŽÄ±ºÆÅájÛ

±̹Æźn¹Ç»¿½FµÅ½ Ð¹ÇƎбÂj»–µÅ¾–³ ÃäÛb²´³FºA÷&»¿¶[¾ÖÃ-ºn¹±¶–ÒF»¿ºzÀ+Âj½‹Ë

¾¿»¿¹j¶Ê¾¶/¸Sº»–Ìͱ»¿Ãֹǽ Àº»¿ºÆ·¹Þ¾¿µÅÄjºN¾¿Â4¹À±ëë±½-¶Ê¾¹Ç½ ÎF¹±»¿Î

±Ì-µŽ½Õıº¶[¾–ºnÎM³ÕÒFÃÖ¹±½öÆ·¹ÇÈS±»nÛ.²´³Fº¶[ºnÀ+±½&ÎM뺹j¶[Ò »–º

À±½ ¶–µŽÎFº»¶¹AÌÍÒFƎÆź»4»¿¹±½FбºÂÇÌf¸&±¾–º½d¾¿µŽ¹±Æ΋ºÄjºÆŽÂ±¸F뺽d¾

ÀÂj¶[¾¿¶´µŽ½¹-ë±½ º+¾¿¹±»–ádËýÈ ¹±¶–ºÎzÀ+ÂjÃ-ëÂj½ä΋º½F±ëµŽ½ ¹Þ¾¿Â±»nÛ

$WYX K]Y qk°¨8n`œk#8_lœh

 Â±»ä¾–³Fº ¸FÒ »–¸SÂj¶–º¶zÂÇ̾¿³Fº¹ÇÈSÂÞıºº+勸&º»–µŽÃ«º½d¾¿¶àɏº

³ ¹„Äjº7À³FÂj¶–º½ï¾–±¾¿¹±Æß³ÕÒFÃֹǽ ºI±»–¾Øü͵Ž½9¾¿µÅëºnþϹ±¶

¾¿³FºöÄÞ¹±»–µ·¹ÇÈFƎºÚ»¿º¶–±ÒF»À+ºjàAÉ1³Fµ·À³Ø¶–Ò ÀÀº¶¿¶ÊÌÍÒ ÆÅƎá>ë¹±¸ ¶

ÃÖ¹±À³ µÅ½FºË”ÆŽº¹±»–½ µÅ½FÐϹ±½ Î7»¿ÒFƎº+ËýÈ ¹±¶–ºÎ>Ǝº¹±»–½ µÅ½FÐÙ±½Ø¹

À±ëë±½?뺹j¶[Ò »–º(±ÌY¾–»¹ÇµŽ½FµŽ½Fл¿º¶–±ÒF»À+º(µŽ½Õıºn¶Ê¾¿Ã-º½d¾Û

²´µÅëºË”È ¹j¶[ºnÎDºÄÞ¹ÇƎҠ¹Ç¾–µŽÂ±½Wµ·¶A¹ÇÆ·¶–ÂÒ ¶[ºÌÍÒFÆ,Ìͱ»zÀ±Ã-Ë

¸ ¹±»–µŽ½FÐÚ¶–ዶʾ¿ºÃÖ¶¾¿»¿¹±µÅ½FºnÎK±½ÙÎFµIº»¿º½d¾¹±½F½FÂǾ¹Þ¾¿Â±»¶Û

¶A¶–³FÂÞÉ1½DµÅ½eµÅÐjÒF»¿º—L à1¹Ç½F½ ÂǾ¿¹Ç¾–Âj»¿¶«Ä޹ǻ¿µŽºÎãµÅ½D¾¿³Fº

¾¿µÅëºÖ¾¿³Fºá’Ò ¶–ºÎ’¾–Â⾿¹Çо¿³FºÖÌÍÒFƎƊ,EEÇËý¶–º½d¾–º½ À+ºÖÎF¹Ç¾¿¹

¶–º+¾n۞fºÀ¹ÇÒ ¶–º0¸&º»[ÌÍÂj»–ÃÖ¹±½ À+º¾–º½ Î‹ºnξ–Â(ÈSºÆŽÂÞɏº»YÉ1³Fº½

¾¿»¿¹±µÅ½FºnÎâÂj½â¾–³ ºÌ¹j¶Ê¾¿º»4¹Ç½ ½FÂǾ¹Þ¾–Âj»¿¶-ü͸Sº»¿³ ¹±¸ ¶§Î‹ÒFº¾–Â

Ǝº¶¿¶zÀ¹Ç»¿º+ÌÍÒFƧÉf±»¿ÓFþàݹ߸&º»[ÌÍÂj»–Ãֹǽ&À+º+Ëý¸Sº»–Ëý¶–º½d¾–º½ À+ºn¶ÊË

¾¹ÇбÐjºÎMÃ-ºn¹±¶–ÒF»¿º^Éf±ÒFÆ·ÎW¾¿º½ ÎM¾–Â㻿¹±½FÓD¾–³ º¶–ºµŽ½ Î‹µÅË

ÄÕµ·Î‹Ò ¹ÇÆ·¶?ƎÂÞÉfº»«¾–³&¹Ç½D¾–³ ºµŽ»z¶–ÆÅÂÞÉfº»^üÈFҋ¾äÃ-Âj»–ºâÀ¹Ç»¿º+Ë

ÌÍÒFÆéþ4À±ƎÆźn¹ÇбҠº¶Û-ÿÝÂÞɏºÄ±º»nàYÉ1³Fº½’ëºn¹±¶–ÒF»–ºnÎ^ÈÕ᾿³Fº

Ǝº¹±»–½FµŽ½FйjÀÀ+Ò »¿¹jÀ+á¹±À³ µÅºÄ±ºÎ-¸Sº»N¹±Ã«Â±ÒF½d¾ÂÇÌ%¹±½F½FÂǾ¹ÞË

¾¿Â±»0¾¿µÅëº(µŽ½Õıº¶[¾–ºnÎYàÞ¾¿³Fº1̹±¶[¾–º»ÈFҋ¾½F±µ·¶[º»¹Ç½F½ ÂǾ¿¹Ç¾–Âj»¿¶

¸Sº»–Ìͱ»¿Ã«ºÎÃ"Ò À³4ëÂj»–º0À+Âjë¸&º¾–µÅ¾–µŽÄ±ºÆŽá«ü¹ÇÆž–³ Â±ÒFÐj³,¾¿³Fº

»¿ºÆ·¹Þ¾¿µÅÄjº"ÈSº½Fº÷F¾¿¶§Â±ÌN³FµŽÐ±³Fº»,Äj±ƎÒF뺶ÂÇÌN½ Â±µ·¶[º»ÎF¹Ç¾¿¹

ÃÖ¹„áÖ½F±¾fºåd¾¿»¿¹±¸&ÂjƎ¹Ç¾–º,ɏºÆÅÆéþÛ ½F½FÂǾ¹Þ¾¿Â±»–Ë|¾¿µÅëº+ËýÈ ¹j¶[ºnÎ

¸Sº»–Ìͱ»¿Ãֹǽ Àº?뺹±¶–ÒF»¿º¶"¸F»–ÂÞÄÕµ·Î‹ºA¹^Ò ¶[ºÌÍÒFÆ´¶Ê¾¹Ç½ ÎF¹±»¿Î

ÌÍÂj»1ºÄÞ¹ÇƎҠ¹Þ¾¿µÅ½ Ð¾¿³Fµ·¶1ıÂjÆÅÒFëºË”½FÂjµŽ¶–º,¾–»¹±Î‹ºÂ}Û

$W•” ·:_lcžk hn›[ 8_¥œh

½F½FÂǾ¹Þ¾¿Â±»0Æ·¹ÇÈS±»Î‹ÂÕº¶–½¾À¹Ç¸F¾–ÒF»¿º´¾–³Fº(À±ë¸FƎº+¾¿ºf»¿ºÆÅË

¹Ç¾–µŽÄ±º§À+Âj¶[¾Â±Ì/¹Ð±µŽÄ±º½z¹Ç¸F¸F»¿Âj¹jÀ³%àd³FÂÞɏºÄ±º»ÛžUý¾´µ·¶fÒ ¶–º+Ë

ÌÍÒFƔà/¾–³Fº»–ºÌͱ»¿º±à%¾¿Â뺹±¶–ÒF»¿º«»–ºn¶[ÂjÒF»¿ÀºµŽ½Õıºn¶Ê¾¿Ã-º½d¾µÅ½

¾¿º»¿Ã«¶AÂÇ̾–³Fº’À+ÂjÃ-ëÂj½DÎFº½FÂjÃ-µŽ½ ¹Ç¾–±»AÂÇ̧Ã-Âj½Fº+¾¹Ç»¿á

ÀÂj¶[¾-ÂÞÄjº»«¹^ÌÍÒ ÆÅƎº»Ö¶–º+¾ÖÂÇ̸&±¾–º½d¾¿µŽ¹±Æ´ÀÂj¶[¾ÖĄ¹±»–µ·¹ÇÈ Æźn¶Û

²¹ÇÈFƎºƒ%΋º¾¿¹±µÅÆ·¶A¹¶–º+¾A±Ì4ÂǾ–³ º»?ë±½ º+¾¿¹±»–áb¸ ¹Ç»¹ÇÃ-Ë

º¾–º»¶^À±½ ¶–µ·Î‹º»¿ºÎQµŽ½¼¾–³FºãÀ+ÒF»¿»¿º½d¾^¶Ê¾¿Ò Î‹µŽº¶Û

?

µŽÄ±º½

¾¿³Fº¶–ºA¸ ¹±»¿¹±Ã«º+¾–º»¿¶à±½Fºz¸&Âd¶–¶–µŽÈFÆźä¹Ç¸F¸ »–„勵ŽÃ«¹Ç¾–µŽÂ±½ ÂÇÌ

¾¿³FµŽ¶4ÀÂj¶[¾,ÌÍÒ ½ À¾¿µÅÂj½ÐjµÅÄjº½âÄ޹ǻ¿µ·¹ÇÈFƎº"¾¿µÅ뺫µŽ½dÄjº¶[¾–뺽d¾

©K¹Ç½ ÎzƎº¹Ç»¿½FµŽ½FЫëº+¾–³ ÂÕΗú µŽ¶Ô

ú"!$#

ˆ

§&%('$)o*!,+§+üúMÄ©,þ

³

-­g

ô

î ü/.10 î32 546fþ

î

üj©87ü:9Š

ô

î

ú 5;þ–þ

Æž–³FÂjÒFб³ÁÉfºÏ¹±¶¿¶[Ò Ã-ºKº

Ò&¹ÇÆÆ·¹ÇÈS±»ÚÀ+Âd¶Ê¾W»¹Þ¾¿º¶

9Š

ô

ÌÍÂj»¹±½F½F±¾¿¹Þ¾¿µÅÂj½¹±½ Î⻿ÒFƎº"É1»¿µ‘¾¿µÅ½FÐ&àI¾–³Fºn¶[º-ÃÖ¹„á

¶–ÒFÈ ¶[¾¿¹±½j¾¿µŽ¹±ÆÅƎá§Î‹µIº»/µÅ½¶[ÂjÃ-ºNº½ÕÄյŻ¿Â±½F뺽j¾¶à„¹Ç½&Î4À+º»–Ë

¾¹ÇµŽ½FÆÅáÉ1µÅƎƋÈSº1³FµÅÐj³Fº»ÌÍÂj»0¸F»¿ÂÇÌͺ¶¿¶–µÅÂj½ ¹ÇÆÅË

Ò ¹±ÆŵžÊá4¹Ç½F½ ÂÇË

¾¹Þ¾–µŽÂ±½^±»Ý»¿ÒFƎº+ËýÈ ¹±¶–ºÎÎFºÄ±ºÆÅÂj¸F뺽d¾Û ½ Î^É1³FµÅƎº¾¿³Fº

ºn¶Ê¾¿µÅÃÖ¹Þ¾¿º¶"ÂÇÌ´¾–³FºAë¹jÀ³FµŽ½FºAÀ+á‹ÀÆźAÀÂj¶[¾½FºÀº¶¿¶–¹±»–á⾖Â

¶–ÒF¸F¸S±»–¾%¾–³ µŽ¶/ɏÂj»–Ó,±½ñ#µÅ½ÕҋåÕËýÈ ¹±¶–ºÎ4ò´ô϶#Ą¹±»–á¶[Âjëº+Ë

É1³ ¹Ç¾à§¾¿³FºáK¹Ç»¿º »–ºÆŽ¹Ç¾–µŽÄ±ºÆŽáM΋ɴ¹Ç»–ÌͺÎQÈÕáÚ¾¿³FºÆ·¹ÇÈS±»

-­g

ô

³

Uè½FÌÍ»¿¹j¶Ê¾¿»–Ò À+¾–ÒF»¿º\.ݺıºÆŽÂ±¸ Ã-º½d¾ôÂj¶[¾4üÍÌͱ»´¾¹ÇбÐjµÅ½ ÐÞæ$<Vº½ÕÄÕµŽ»–Âj½F뺽d¾þ ܋³ ¹Ç»¿ºÎ ܋³ ¹Ç»¿ºÎ

.=<

³

ðÝÒFÃ"ÈSº»ÝÂÇÌ/µŽ½FµÅ¾–µ·¹ÇÆ%Ðj±ƷÎz¶[¾¿¹±½ ÎF¹±»¿Îz¶[º½j¾¿º½ Àº¶fÌÍÂj»1¾–»¹ÇµŽ½FµŽ½FÐ EE EE

2 546

³

Ðj±ƷÎz¶[¾¿¹±½ ÎF¹±»¿Îü²/»–ººÈ ¹±½FÓFþ

½F½F±¾¿¹Þ¾¿µÅÂj½^ôÂj¶[¾4ü¸&º»Ý¶–º½d¾–º½ À+º„þ

¯ ¯

9Š

ô

³

ñ/¹ÇÈS±»ÝôÂj¶[¾1Ìͱ» ½F½F±¾¿¹Þ¾¿µÅÂj½zÂj»(æ<;ü͸Sº»1³FÂjÒF»þ >o!FÛEE„³ Â±ÒF» >o!FÛEE„³ Â±ÒF»

ú  ;

³

ôÂd¶Ê¾1±ÌTâ¹jÀ³FµŽ½Fº"ôáÕÀÆźn¶fÌͱ» ½F½FÂǾ¹Þ¾¿µÅÂj½5Þæ$< ÜÕÒF¸ ¸&Âj»[¾ >^EFې^LG„³FÂjÒF» >^EFÛé!„³FÂjÒF»

©

³

"¹±»–µ·¹ÇÈ Æź¾–µŽÃ«º4µÅ½ÕÄjº¶[¾–뺽d¾

²/¹±ÈFƎºK%FÔ0ø0åF¹Çë¸FƎº‡Â±½ º+¾¿¹±»–ád˄´¹±¶–ºÎzôÂd¶Ê¾(ò0¹Ç»¹Ç뺾–º»¶NÌͱ»@‹΋ºÆôÂ±Ã«¸ ¹±»–µ·¶[Âj½

º½ÕÄÕµŽ»–Âj½F뺽d¾¿¶à„É1³FµÅƎºNµŽ½FµÅ¾–µ·¹ÇƎÆÅá§Ä޹ǻ¿µ·¹ÇÈFƎº¹jÀ+»¿Âj¶¿¶Yëº+¾–³FË

‹ÎF¶à³ ¹„ıº¹ÇƎ»¿º¹±ÎFáÈSºº½bÈS±»¿½Fº¹Ç½ Îõ¾–¾–³Fºº+åÕ¾¿º½d¾

¾–³&¹Þ¾ÈSÂǾ–³«µŽ½d¾–º»–̹±Àº1¶[ዶ[¾–ºÃÖ¶¸S±»–¾¾–Â4½FºÉßÆ·¹Ç½FÐjÒ ¹ÇÐjº¶

¹Ç½&Îß΋Âjë¹±µÅ½&¶"É1µÅ¾–³ã»–ºÆŽ¹Ç¾–µŽÄ±ºzº¹±¶–º±à¾¿³FºµÅ½&À+»¿ºÃ«º½d¾¿¹±Æ

΋ºÄ±ºÆŽÂ±¸ Ã-º½d¾"À+Âj¶[¾¿¶4Ìͱ»"½ ºÉ ¾–»¿µŽ¹±ÆŽ¶"¹Ç»¿ºÖÆŵŽÓ±ºÆÅá^¾–ÂâÈSº

»¿ºÆ·¹Þ¾–µŽÄ±ºÆÅáƎÂÞÉÙ¹±½ Î À+±ë¸ ¹±»¿¹±ÈFƎº±Û8µŽ½ ¹ÇƎƎá±àY¾¿³FµŽ¶"À+Âj¶[¾

ë‹΋ºÆ‹¾¹ÇÓjº¶µŽ½j¾¿Â¹±ÀÀ+±Ҡ½j¾¾¿³FºÝÀ+Âd¶Ê¾0±ÌI΋ºÄ±ºÆÅÂj¸FµÅ½ ÐÂj»

¹±À

ÒFµÅ»¿µŽ½FÐA¾¿³Fº?. 0 бÂjƎ΍¶Ê¾¹Ç½ ÎF¹±»¿Î⾿¹±Ð±Ð±ºnÎ^ÎF¹Ç¾¿¹’üͺjÛÐ&Û

ÌÍ»¿Â±ÃÚ¾¿³Fº²/»¿ººÈ&¹Ç½FÓFþ&¾–Â1¸ »–ÂÞÄÕµ·Î‹º0µÅ½ µ‘¾¿µŽ¹±Æj¹Ç½&΄Âj»YµÅ½ À»–ºË

뺽d¾¿¹±ÆI¾–»¹ÇµŽ½FµŽ½FÐ"ÌͺºÎ‹È&¹±ÀÓÖ¾¿Â¾¿³Fº4¹Ç½F½ ÂǾ¿¹Ç¾–Âj»Âj»1»–ÒFƎº

É1»¿µ‘¾¿º»%¾¿Â(³FºÆŸ4ÌÍÂj»¿ÀºNÀ+Âj½ ¶–µŽ¶[¾–º½ À+á,É1µ‘¾¿³4¾–³FºÐ±ÂjƎÎ4¶[¾¿¹±½‹Ë

ÎF¹±»¿ÎYÛ-<’ºz³&¹„ıº?ÌÍÂjÒF½ Îõ¾–³ ¹Ç¾-ÈSÂǾ¿³bƎº¹±»–½FµŽ½FÐâë‹΋ºn¶

À¹±½õÈSº½Fº÷F¾ÌÍ»¿Â±Ã3¾¿³FµŽ¶-³FµŽÐ±³

Ò&¹ÇƎµ‘¾Êá’Ìͺºn΋Ƞ¹jÀÓSà0Ƞҋ¾

¾–³ ºâÀ+Âj¶[¾

¯

ÂÇÌ4΋ºÄjºÆŽÂ±¸FµŽ½FÐ ¶[Ò&À³ã¹ ³FµŽÐ±³FË

Ò ¹±ÆŵžÊỖºË

¶–±ÒF»À+º,Ìͱ»1½FºÉMÆ·¹Ç½FÐjÒ ¹ÇÐjº¶Â±»1΋Âjë¹±µÅ½&¶´µŽ¶´ÒF½ Ód½ ÂÞÉ1½%à

ÈFҋ¾,ÆŵŽÓ±ºÆÅáA¾–Â?ÈSº³FµŽÐ±³Fº»1¾–³&¹Ç½ä¾–³Fº"½F±½‹Ëýº+勸Sº»–¾(Ǝ¹±È&Âj»

À+Âd¶Ê¾¶´ºÃ«¸FƎÂÞᱺnÎA³Fº»–ºjÛ

@

DíÊH#aX1a ^®

ì,ì

_0°‹E°FOÊ_

ì

n¯,EadH#Z

OH%EC

ì

O

ì

LA ®WZ1XE

ì

°‹ELH#aßE

ì

Z

UÚO[adE0Z1XE

ì

°‹ELH#a

Uè½¾–³ º"¸F»¿ºÄÕµŽÂ±Ò ¶(¶–ºÀ+¾–µŽÂ±½ ¶à Éfº4µŽ½dÄjº¶[¾–µŽÐj¹Ç¾–ºÎz¾¿³Fº"¸Sº»–Ë

Ìͱ»¿Ãֹǽ Àºz΋µIº»¿º½ Àº¶«¹Ç½ Îß»–ºn¶[ÂjÒF»À+ºAÀÂj¶[¾¿¶-µÅ½ÕÄj±ƎıºÎ

Ìͱ»«Ò ¶–µŽ½FЍ³ÕÒFÃÖ¹±½ ¶¾–Â’É1»–µÅ¾–º»¿ÒFÆźn¶"ċ¶ÛßÒ ¶–µŽ½FÐ^¾¿³FºÃ

Ìͱ»Ö¹±½F½FÂǾ¹Þ¾¿µÅÂj½ ¶ÛqUè½õ¾–³ µŽ¶Ö¶–ºÀ+¾–µŽÂ±½%àÉfºÉ1µÅƎÆfÌÍÒF»–¾–³Fº»

À+Âj븠¹Ç»¿ºÝ¾¿³Fº¶–º¶–áÕ¶[¾–ºÃØ΋ºÄ±ºÆŽÂ±¸ Ã-º½d¾´¸&¹Ç»¹±Î‹µŽÐ±ÃÖ¶Û

½F½F±¾¿¹Ç¾–µŽÂ±½‹ËýÈ ¹±¶–ºÎÙ³ÕÒFÃֹǽ ¸ ¹Ç»–¾–µ·À+µŽ¸ ¹Þ¾¿µÅÂj½×³&¹±¶¹

½ÕÒFÃ"ÈSº»ÂÇÌS¶[µŽÐ±½FµÅ÷&À¹Ç½d¾/¸F»¹±À+¾–µ·À¹±Æd¹j΋Ä޹ǽd¾¿¹±Ð±º¶%»–ºÆŽ¹Ç¾–µŽÄ±º

¾–ÂÖ΋ºÄ±ºÆÅÂj¸FµÅ½ Ð«¹«¶–ዶʾ¿ºÃØÈÕá?ÃÖ¹±½dÒ&¹ÇÆY»¿ÒFÆź˔É1»¿µÅ¾–µŽ½FРÔ

B

½F½FÂǾ¹Þ¾¿µÅÂj½‹Ë”È&¹±¶–ºÎWƎº¹±»–½FµŽ½FÐãÀ¹Ç½QÀ+Âj½j¾¿µÅ½ÕÒFºµÅ½FË

΋º÷ ½FµÅ¾–ºÆÅájà ÂÞıº»1ɏººÓ‹¶1¹Ç½&ÎzëÂj½j¾¿³ ¶à É1µÅ¾–³»–ºÆŽ¹ÇË

¾¿µÅÄjºÆŽáõ¶[ºÆ‘ÌéËèÀ+Âj½j¾¹ÇµŽ½FºÎ߹ǽF½F±¾¿¹Ç¾–µŽÂ±½bÎFºÀ+µ·¶–µÅÂj½ ¶¹Ç¾

ºn¹±À³K¸&ÂjµÅ½d¾nÛ Uè½ÏÀ+±½d¾¿»¿¹j¶Ê¾nà4»–ÒFƎº+ËýÉ1»¿µ‘¾¿º»¶Ã"Ò ¶[¾

»¿ºÃֹǵŽ½MÀ±б½ µ)n¹Ç½d¾?ÂÇ̸SÂǾ¿º½d¾–µ·¹ÇƧ¸F»¿ºÄÕµŽÂ±Ò ¶A»–ÒFƎº

µŽ½d¾–º»Î‹º¸&º½ Î‹º½&À+µŽº¶õÉ1³ º½7¹±Î Î‹µÅ½ Ð¼Â±»õ»¿ºÄÕµ·¶[µŽ½FÐ

»¿ÒFƎº¶àAÒFÆž–µŽÃÖ¹Þ¾–ºÆÅá>ÈS±ÒF½&΋µÅ½ Ð×À+Âj½d¾–µŽ½dÒ ºÎ>»¿ÒFÆźË

¶–ዶʾ¿ºÃ7Ðj»–ÂÞÉ´¾¿³zÈÕáAÀ±б½ µ‘¾¿µÅÄjºÆŽÂj¹jÎÖ̹jÀ¾–Âj»¿¶Û

B

½F½FÂǾ¹Þ¾¿µÅÂj½‹Ë”È&¹±¶–ºÎ>Ǝº¹Ç»¿½FµŽ½FÐÏÀ¹±½Ã«Â±»¿ºÚºIºÀ+Ë

¾¿µÅÄjºÆŽáMÀ+ÂjÃ"ÈFµŽ½Fº ¾–³ ººI±»–¾¿¶ÂÇÌ«Ã"ҠƑ¾¿µÅ¸FƎºµŽ½ Î‹µÅË

ÄÕµ·Î‹Ò ¹ÇÆ·¶Û´²´³ º¾¿¹±Ð±ÐjºÎ¶[º½d¾–º½&À+º¶1ÌÍ»–ÂjÃÑ΋µIº»¿º½d¾

ÎF¹Ç¾¿¹4¶–º+¾¶À¹±½-ÈSºÝ¶–µÅë¸FƎáÀ±½ À¹Þ¾¿º½ ¹Ç¾–ºÎ"¾–ÂÌͱ»¿Ã

¹Æ·¹Ç»¿Ð±º»"ÎF¹Ç¾¿¹^¶–º+¾É1µ‘¾¿³ßÈF»¿Âj¹j΋º»"ÀÂÞıº»¿¹±