データベースの更新

この節では、データベースで定期的に行う作業、つまり新しいモデルの追加、被引用数の更新、分析用にデータセットを入手できるホスト上のファイルの更新について、詳しく説明する。

新しいモデルの追加

データセットへの項目の追加はほぼ毎日行っており、新しく公開されたモデルと、注目すべきモデルであると新たに判明した古いモデルの両方を含む。通常、公開情報から容易に判明する情報の大半は、モデルをデータベースに登録する時点で入力する。ただし、一部の情報が後から少しずつ入力されることもよくある。たとえば、計算量の推定は最初は空欄にしておき、計算にさらに労力を割いた後で初めて追加することがある。

データベースについての質問や、追加すべきモデルの提案があれば、data@epoch.ai まで気軽に連絡してほしい。

被引用数の更新

モデルをデータベースに追加する際、学術論文やプレプリントがあるモデルについては被引用数を記録する。毎月初めに、Semantic Scholarに掲載されている論文の被引用数を自動で更新する。Semantic Scholarに掲載されていない論文は、被引用数を手作業で入力している。

ホスト上のファイルの更新

Epoch AIのデータベースは、毎日データベースと同期されるCSVとして公開している。スクリプトでデータを読み込むには、このCSVのURLを使うのが最も簡単である。まだ同期されていない変更も反映した最新版が必要な場合は、ウェブサイトの表形式の表示からCSVを手動で生成できる。