消失したWebページの情報源としての有効性の分析とURL自動変更

丢失网页作为信息源的有效性分析和自动URL更改

• 批准号: 15650043
• 负责人: 原田 隆史
• 金额: $ 2.05万
• 依托单位: Keio University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Exploratory Research
• 财政年份: 2003
• 资助国家: 日本
• 起止时间: 2003 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-15650043/
• 关键词: Web; 消失

現在,Webページは質・量ともに急激な伸展をとげ,一般生活のみならず企業での意思決定行動や研究活動にとっても,欠くことができない情報源となっている。しかし,一方でWebページの約三分の一が1年以内に消失する,また多くのページは更新がなされるなど,その継続性が情報源としての問題点であると言われている。しかし,従来の研究は,研究時点で利用可能なWebページの分析がほとんどであり,消失したページや更新されたページの分析はほとんど行われてこなかった。このような消失したページの分析はWebページの利用に関してだけではなくWebページの作成という観点からも有効であると考えられる。本研究では,昨年度までに収集したWebページのうちで現在は消失してしまったWebページを対象とした分析を行い,その特徴と消失したWebページと同内容のWebページの存在する可能性,さらに同内容のWebページを見つけるためのアルゴリズムについて検討した。消失した500のWebページを対象とした調査の結果,消失ページのうち42%のページについて消失したページと同じかあるいは継続した内容であるページが残っていることが明らかとなった。これらの同内容のページが残っているものを対象として,1)URLの階層構造を利用したトラッキング,2)Webページ消失前になされた移転予告の告知,3)HTMLタグに注目してキーワードの抽出を行う方法を用いて同内容のWebページを探し出すアルゴリズムを開発し,抽出案験を行った。実験の結果,1)および2)の手法を用いて消失Webページのうち27%を見つけることができ,このアルゴリズムの有効性が確認された。しかし,HTMLタグに注目したキーワード抽出を用いた方法では5%以下のWebページしか検出することができず,HTMLタグがメタ言語としては十分に機能していないことが明らかとなった。

At present, the quality and quantity of Web design are both urgent and extensive, and the rational decision-making and action of enterprises in general life and research activities are both incomplete and incomplete. The Web has disappeared for about a third of a year, and many of them have been updated, and the information source has been updated. For example, if you want to use Web analytics, you can use Web analytics to update it. The analysis of this phenomenon is based on the analysis of Web page usage. In this study, we analyzed the characteristics of Web pages with the same content and the possibility of Web pages with the same content. Disappeared in the search results, disappeared in 42% of the search results. 1) Use of URL hierarchy, 2) Notification of migration before Web page disappears, 3) Use of HTML hierarchy to extract Web page, 3) Use of HTML hierarchy to extract Web page. As a result, 1) and 2) of the methods used in the disappearance of the Web page 27% of the time, the effectiveness of the Web page was confirmed. The HTML page is not available. The HTML page is not available. The HTML page is available.