ローマのバリチェッリアーナ図書館の誕生は、フィリッポ・ネリとオラトリオ会に深く結びついています。1565年に設立され、1575年にグレゴリウス13世によって勅書Copiosus in misericordiaで公式に認められました。オラトリアンは書籍に特別な配慮を払っており、規則により食事は宗教的テキストの朗読と議論と共に行われるべきとされていました。
最初の図書コレクションはフィリッポ・ネリが所有していた作品群で、彼の死後1595年にオラトリオ会の財産となりました。
バリチェッリアーナ図書館は1581年に、アキーレ・スタツィオ（アキレス・エスタッツォ）による遺贈によってすでに文献に記録されています。彼はフィリッポ・ネリとオラトリオ会に1700冊の印刷本と300の写本を遺しました。
最初の二つのコレクションに加え、その後も様々な寄贈がなされました。例えば、サン・ジョヴァンニ・イン・ヴェネーレのアーカイブおよび一部の図書（1585年）、シルヴィオ・アントニアーノ枢機卿の図書、ピエール・モランの蔵書、サルッツォ司教ジョヴェナーレ・アンチーナ（1604年）によるオラトリオ会関係の書籍、聖エウティティオからの写本群（修道院長ジャコモ・クレシェンツィの介入による）、フィリッポ・ネリの初代伝記作家アントニオ・ガロニオ神父のコレクション（1605年）などです。
17世紀のオラトリオ会共同体の最も文化的に盛んな時期は、チェーザレ・バロニオのAnnales Ecclesiasticiの出版、アントニオ・ボシオのRoma sotterranea（アントニオ・セヴェラーノ神父編集）およびオラトリオ音楽の普及と関連しています。これはフィリッポ・ネリが最も好んだ精神的娯楽の形態であり、音楽を魂を引き寄せるものと考えていました。
1607年にチェーザレ・バロニオ枢機卿が亡くなると、その蔵書の一部がオラトリオ会図書館に継承されました。1662年にはヴィルジリオ・スパーダのコレクションが届き、これは硬貨、鉱石、マヨリカ焼き、珍品のコレクションで構成されていました。
1669年にはバチカン図書館の管理者であるギリシャ出身の知識人レオーネ・アラッチの写本コレクション約237点が図書館に移されました。その後、オラトリオ会の神父オドリコ・リナルディ、ジャコモ・ラデルキ、ジョゼッペ・ビアンキーニ（学者フランチェスコ・ビアンキーニの相続者）らの遺贈も受け入れられました。
フランスによるローマ占領（1797〜1799年）の間、図書館は他の施設と同様にひどい略奪を受け、1810年には49点の遺産が失われましたが、一部は1837〜38年に回収されました。
1874年に宗教法人解散法が施行され、バリチェッリアーナ図書館は公法上の図書館へと転換されました。1876年には教会資産清算委員会が、オラトリオ会の文書をローマ国立公文書館、オラトリオ会自身および図書館で分割することを決定しました。
