Win95とWin98をTCP/IPで接続するのは可能です。
「つながらない」というのは、どういう状態ですか？つながったかどうかは、どうやって判断しましたか？

起動してパスワードを入力しても、
ネットワークコンピューターに何も
表示されません。
あと、普通なら起動したら「ネットワークパスワードの入力」
というダイアログがでるはずなんですがなぜか、
「Windowsへようこそ」のダイアログが出てきます。

　ネットワークのプロパティで優先するログインが「Windows ログオン」でパスワード入力が無い場合はいきなり起動音が鳴って起動します。

　ネットワークコンピュータに何も表示されないとのことですが「ネットワーク全体」しか表示されていないというのなら一度識別情報のワークグループのところが４台とも同じになっているかどうか確認してください。通常ここは何の設定もしていないときは「WORKGROUP」になっているはずです。

　あとTCP/IPのみならLMHOSTS(WINDOWSの中)を編集しないと表示しないかもしれません(Net BEUIならこんなことする必要はないんですけどね)。

「優先的にログオンするネットワーク」が「マイクロソフトネットワーククライアント」になってますか？
あと、ワークグループは4台とも同じになってますか？
それから、その4台以外にLANがつながっていないのなら、IPアドレスを固定にしてやるという手もあります。

以前会社のPCで似たような症状が出ました。NTドメイン(ネットワークプロトコルは
TCP/IPのみ使用)に入っているWin95クライアントLs150(同じくTCP/IPのみインスト
ール)のHDDが飛んでしまい、OSから再セットアップしたところなぜか使ってもいないNetBEUIとIPX/SPXもインストールしないとNTドメインにログインできなくなりました。
バックアップしてあったHOSTS,LMHOSTSも入れ、その他設定項目も予備La13(Win95+
TCP/IPのみで完動)と比べて相違ないことは確認済みです。
結局またOSから再セットアップしたところあっさり復旧しましたが・・・

優先的にログオンするネットワークがWindowsログオンになっていても
ワークグループが異なっていても、取り敢えず接続可能です。

ただし、まず各マシンでエクスプローラなどでネットワークコンピュータを開いた時に、「自分が見えて」いない事にはネットワークその物が動いていません。1〜2分ほど放って置くと自分が見えるようになります（このあたりは環境にかなり左右されると思いますが）。
そうなってからネットワークコンピュータを開いてみれば相手が表示されていませんでしょうか？
ネットワークが見えないからといっていろいろぐちゃぐちゃやるよりも、何もせずに待っていると結構上手くいったりします。

因みに、理屈ではなく当方の実体験だったりします。
（これって普通の反応でしょうか？（＾＾；）

　一台電気入りっぱなしのWindows98だけ「Microsoftネットワーク」のプロパティで「ブラウズマスタ」を「有効」にさせて、その他のマシンは全部「無効」にしてます。どうも「自動」にしておくと、いろいろと手間取って結果他のマシンの認識に手間取るような感じを受けるので。

他のスレッドからの転載ですが、
９８掲示板のスレッドで
［6390］ 98とATノートとのLAN接続
　投稿者：オオノ さん　【2000/03/10(Fri) 21:50】
のレス
>０５７ さん　【2000/03/11(Sat) 04:28】
>OSが書いていないのでこれがあてはまるかは判りませんが。
>NEC PC98用Win95OSR2でCABSセットアップしている場合は
>レジストリの書き換えをしないとネットワークが動作しません。
>HKEY_LOCAL_MACHINESOFTWAREMicrosoftWindowsCurrentVersionNetworkReal Mode Net
>の"autologon"（なければ作る）の値が00なら01に修正してください。

うちはこれで全滅してました。窓９８にもなかったですがいらないそうです。
（下で私が質問したのですがすでに流れてしまっていました）
（再ログオン必要なのがなかなか修正できないで困って？います）

追加ですがDECのventurisＦＸ５１２０にOSR2.5入れた物も同様でした。

再ログオンの方は TweakUIや窓の手などで自動ログオンの設定で解決できるかと。
レジストリでも出来るのですがちょと忘れてしまったのでご容赦下さい。

SYさんへ
基本的にWin95特有の症状と認識しています。
WinNT/Win98では必要ない様です。

なお。これは過去ログで検索すると出てきます。
私もお世話になった口ですから。
ただ、どなたの投稿かはちょっと覚えていませんが。