WordPressの管理画面の「外観」からウィジェット画面を開いて下さい。
一番右側カラムの「○○AD」という項目がありますので、真ん中カラムの「テキスト」ウィジェットをドラッグ＆ドロップで入れ込んで下さい。（左側の画像参照）
注意として「テキスト」ウィジェットの「タイトル」部分には何も入力しないで空白のままにしてください。
画像と同じようにタイトルは空白のまま下側の欄に広告やアフィリエイトタグなど挿入してください。
タグはサポートされていますのでご自身のカスタムコードなども挿入可能です。
なお、サイドバー以外のAD部分には「テキスト」ウィジェットのみ入れるようにしてください。
その他のウィジェットを入れ込むように設計されていませんのでご注意下さい。